Name: Szacowanie biomasy w oparciu o wizję komputerową dla roślin inwazyjnych (Wideo) | JoVE Journal
Uploaded: 2024-02-09T13:50:00.000+00:00
Duration: 8 min 47 s
Description: Poznaj metodę szacowania biomasy roślin inwazyjnych z wykorzystaniem zdalnego teledetekcji UAV i sztucznej inteligencji. To podejście zwiększa dokładność oceny biomasy i mapowania przestrzennego, wspierając systemy wczesnego ostrzegania.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Autor dziękuje Chińskiej Akademii Nauk Rolniczych i Uniwersytetowi Guangxi za wsparcie tej pracy. Prace były wspierane przez Narodowy Kluczowy Program Badawczo-Rozwojowy Chin (2022YFC2601500 i 2022YFC2601504), Chińską Narodową Fundację Nauk Przyrodniczych (32272633), Shenzhen Science and Technology Program (KCXFZ20230731093259009)

1. Przygotowanie zbiorów danych
<ol>
	<li>Wybór obiektu badawczego
	<ol>
		<li>Należy wybrać próbki testowe w zależności od celu badania eksperymentalnego, rozważając opcje takie jak Mikania micrantha lub inne inwazyjne rośliny.</li>
	</ol>
	</li>
	<li>Gromadzenie obrazów z UAV
	<ol>
		<li>Przygotować kwadratowe ramki plastikowe o wymiarach 0,5 m × 0,5 m w liczbie od 25 do 50 sztuk, w zależności od wielkości badanego obszaru.</li>
		<li>Zastosuj metodę losowania próbek w celu wyznaczenia lokalizacji poboru próbek gleby na obszarze badań, wykorzystując odpowiednią liczbę próbek biomasy. Umieść ramkę próbkowania poziomo nad roślinnością, tak aby w pełni objęła rośliny, zachowując minimalną odległość 2 m pomiędzy poszczególnymi roślinami.</li>
		<li>Wykorzystaj drona i kamerę do utworzenia systemu filmowania metodą teledetekcji za pomocą UAV, jak pokazano na Rycina 1.</li>
		<li>Należy wykorzystać UAV do wyznaczenia trasy w określonym obszarze badań. Konfiguracja planowania trasy przedstawiona jest w Rysunek 2.
		<ol>
			<li>Ustaw stopień pokrycia bocznego i czołowego na poziomie 70%, wykonuj zdjęcia w jednolitych odstępach czasu wynoszących 2 s, utrzymując kąt nachylenia kamery prostopadle do podłoża przy 90°i ustawiono wysokość kamery na 30 m. Pozwoliło to na uzyskanie ciągłych danych obrazowych obszaru badań z rozdzielczością pojedynczego obrazu wynoszącą 8256 x 5504 pikseli, co przedstawiono w Rysunek 3.</li>
		</ol>
		</li>
		<li>Przechowuj zdjęcia lotnicze do późniejszego przetwarzania za pomocą oprogramowania Python w celu oszacowania biomasy.</li>
	</ol>
	</li>
	<li>Zbiór nadziemnej biomasy
	<ol>
		<li>Zebrać biomasę nadziemną z Mikania micrantha ręcznie w obrębie każdej powierzchni próbnej po zakończeniu gromadzenia danych za pomocą drona. Należy umieścić je w workach i odpowiednio opisać każdy worek.
		<ol>
			<li>Podczas pobierania Mikania micrantha, zapobiegając przemieszczaniu się działek próbnych. Najpierw odciąć Mikania micrantha wzdłuż wewnętrznej krawędzi pola badawczego.</li>
			<li>Następnie odciąć kłącze Mikania micrantha od dołu. Usuń wszelkie zanieczyszczenia, kamienie lub inne rośliny, które zmieszały się z próbką. Na koniec umieść próbki w woreczkach i opisz je.</li>
		</ol>
		</li>
		<li>Przenieś zebrane w kroku 1.3.1 próbki roślin inwazyjnych do laboratorium. Wszystkie zebrane próbki wysusz na powietrzu, aby odparować większość wilgoci.</li>
		<li>Aby dodatkowo usunąć wilgoć z próbek suszonych na powietrzu, należy użyć suszarki laboratoryjnej. Ustaw temperaturę na 55 °CSuszyć próbki przez 72 h, następnie zważyć każdą z nich na wadze elektronicznej i zapisać dane dotyczące biomasy w gramach (g).
		<ol>
			<li>Ustawić wagę elektroniczną w miejscu wolnym od zakłóceń, zważyć, skalibrować i kontynuować ważenie. Umieścić worki z Mikania micrantha odczekaj na stabilizację wskazań wagi elektronicznej, a następnie zapisz otrzymane wyniki.</li>
			<li>Odważić Mikania micrantha co godzinę, aż masa przestanie się zmieniać, i zapisz odczyt pomniejszony o wagę torebki jako zmierzoną masę tej próbki. Oblicz biomasę nadziemną rośliny inwazyjnej, korzystając z poniższego wzoru: 
			<img alt="Wzór na naprężenie wiązania B=M/S; równanie matematyczne; analiza strukturalna." src="/files/ftp_upload/66067/66067eq01.jpg" style="margin: auto;" data-altupdatedat="1788304762000" data-alt="Równanie 1"> 
			gdzie B reprezentuje biomasę Mikania micrantha w gramach na metr kwadratowy (g/m²2), M to masa zmierzonej Mikania micrantha, mierzona w gramach (g), S odpowiada powierzchni powierzchni próbnej w metrach kwadratowych (m2).</li>
		</ol>
		</li>
	</ol>
	</li>
	<li>Tworzenie zbioru danych
	<ol>
		<li>Wyodrębnij obraz RGB odpowiadający obrazowi próbki z oryginalnego obrazu z UAV. Podziel go na siatkę o wymiarach 280 × 280 pikseli, korzystając z programowania w języku Python (Rycina uzupełniająca 1).</li>
		<li>Podziel surowe dane obrazowe na mniejsze obrazy o rozmiarze zgodnym z obrazami próbek, korzystając z języka programowania Python. Do segmentacji zastosuj metodę przesuwnego okna, ustawiając krok w poziomie i pionie na 280 pikseli.</li>
		<li>Z małych obrazów wysegmentowanych w kroku 1.4.2 należy losowo wybrać 880 obrazów roślin inwazyjnych oraz 1500 obrazów tła w celu utworzenia zbioru danych. Następnie należy podzielić ten zbiór na zbiory treningowy, walidacyjny i testowy w stosunku 6:2:2 (Rycina dodatkowa 2).</li>
	</ol>
	</li>
</ol>
2. Identyfikacja Mikania micrantha
<ol>
	<li>Przygotowanie oprogramowania
	<ol>
		<li>Przejdź do oficjalnej strony internetowej Anaconda (https://www.anaconda.com/), a następnie pobierz i zainstaluj program Anaconda. Następnie odwiedź stronę PyCharm (https://www.jetbrains.com/pycharm/) i pobierz środowisko IDE PyCharm.</li>
	</ol>
	</li>
	<li>Tworzenie środowiska Conda.
	<ol>
		<li>Po zainstalowaniu programu Anaconda otwórz wiersz poleceń Anaconda Prompt, a następnie wpisz conda create -n pytorch python==3.8 , aby utworzyć nowe środowisko Conda. Po utworzeniu środowiska wpisz conda info --envs , aby potwierdzić istnienie środowiska pytorch .</li>
		<li>Otwórz Anaconda Prompt i aktywuj środowisko pytorch , wpisując conda activate pytorch. Sprawdź aktualną wersję CUDA (Compute Unified Device Architecture), wpisując nvidia-smi. Następnie zainstaluj PyTorch w wersji 1.8.1, uruchamiając polecenie conda install pytorch==1.8.1 torchvision==0.9.1 torchaudio==0.8.1 cudatoolkit=11.0 -c pytorch.</li>
	</ol>
	</li>
	<li>Uruchomienia dla rozpoznawania modelu 
	UWAGA: Do zbudowania modelu rozpoznawania Mikania micrantha wykorzystanego w niniejszej pracy użyto PyTorch. Zastosowano model sieciowy ResNet10121, którego architektura jest zgodna z oryginalną publikacją. W sekcji wyjściowej sieci wprowadzono modyfikacje, aby spełnić wymagania dotyczące rozpoznawania rumianku.
	<ol>
		<li>Przeprowadź wstępne przetwarzanie obrazów, aby przygotować je do wprowadzenia do modelu. Zmień rozmiar obrazów z 280 x 280 pikseli na 224 x 224 piksele i znormalizuj je, aby zapewnić zgodność z wymaganiami rozmiaru modelu, korzystając z następującego kodu: 
		transform = transforms.Compose([ 
		transforms.Resize((224, 224)), 
		transforms.ToTensor(), 
		​transforms.Normalize([0.485, 0.456, 0.406], [0.229, 0.224, 0.225])])</li>
		<li>Wykonaj ekstrakcję cech obrazu i redukcję wymiarowości przy użyciu splotowej sieci neuronowej.
		<ol>
			<li>Najpierw zainicjuj warstwę splotową dla wstępnej ekstrakcji cech za pomocą self.conv1. Dzięki tej warstwie splotowej oryginalny obraz jest przekształcany w mapę cech z self.in_channel kanałami w celu ekstrakcji cech początkowych (Supplementary Figure 3A). 
			UWAGA: Zaawansowane cechy są ekstrahowane w operacji splotu na przejściach rezydualnych. Warstwy te są tworzone poprzez wywołanie funkcji _make_layer, która składa się z sekwencji bloków rezydualnych. Każdy blok rezydualny składa się z splotu, normalizacji wsadowej oraz funkcji aktywacji, co pozwala na stopniową ekstrakcję złożonych cech (Supplementary Figure 3B).</li>
			<li>Użyj funkcji warstwy do zmiany liczby kanałów w celu redukcji wymiarowości poprzez splot 1x1. Operacja ta zmniejsza obciążenie obliczeniowe przy jednoczesnym zachowaniu istotnych cech (Supplementary Figure 3C). 
			UWAGA: Ogólnie rzecz biorąc, ResNet101 wykonuje ekstrakcję cech przy użyciu różnych warstw splotowych, a redukcja wymiarowości jest osiągana poprzez warstwy splotowe 1x1 wewnątrz bloku rezydualnego. Podejście to pozwala sieci głębiej uczyć się cech i unika problemu zanikającego gradientu, co umożliwia bardziej efektywną naukę i reprezentację cech obrazu w złożonych zadaniach.</li>
			<li>Po operacjach splotu i próbkowania wprowadź wysokiej jakości cechy do warstwy w pełni połączonej. 
			UWAGA: W architekturze ResNet ekstrakcja cech odbywa się w warstwie splotowej. Cechy te są następnie przesyłane do warstwy w pełni połączonej (FC) w celu klasyfikacji (Supplementary Figure 4). Operacja self.avgpool(x) wykonuje adaptacyjne uśrednianie próbkowania, aby zmienić kształt tensora na stały rozmiar. Operacja torch.flatten(x, 1) rozprostowuje tensor do wektora jednowymiarowego, a self.fc(x) stosuje warstwę w pełni połączoną do spłaszczonego wektora, co stanowi końcowy krok klasyfikacji. Proces ten skutecznie przekazuje wyekstrahowane cechy przez warstwę splotową, przekształcając je w format odpowiedni dla klasyfikacji za pomocą warstwy w pełni połączonej.</li>
			<li>Użyj funkcji Softmax , aby uzyskać końcowy wynik na podstawie trzech wymagań klasyfikacyjnych.</li>
		</ol>
		</li>
		<li>Wytrenuj wieloklasowy model rozpoznawania, korzystając z zestawu danych z kroku 1.4. Ustaw liczbę iteracji na 200 oraz początkową szybkość uczenia na 0,0001. Zmniejszaj szybkość uczenia o jedną trzecią co 10 iteracji przy rozmiarze partii (batch size) równym 64. Automatycznie zapisuj optymalne parametry modelu po każdej iteracji (Supplementary Figure 5).</li>
		<li>Wykorzystaj starannie wytrenowany model rozpoznawania i systematycznie przeanalizuj oryginalny obraz z kroku 1.2.2 w celu identyfikacji.
		<ol>
			<li>Skonfiguruj kroki poziome i pionowe dokładnie na 280 pikseli, co pozwoli na wygenerowanie kompleksowej mapy rozkładu wskazującej obecność flory inwazyjnej w granicach obszaru badań. Przedstaw wybrane wyniki wizualnie, jak pokazano na Figure 4. 
			UWAGA: Obraz początkowy jest wstępnie przetwarzany poprzez podział na mniejsze fragmenty, klasyfikację każdego fragmentu za pomocą wytrenowanego modelu głębokiego uczenia i połączenie wyników w obraz wyjściowy. Jeśli fragment zostanie zaklasyfikowany jako roślina inwazyjna, odpowiadające mu miejsce na obrazie wyjściowym przyjmuje wartość 255. Powstały obraz wyjściowy jest zapisywany jako plik obrazu w skali szarości. Szczegółowy kod implementacyjny przedstawiono na Supplementary Figure 6.</li>
		</ol>
		</li>
	</ol>
	</li>
</ol>
3. Szacowanie biomasy roślin inwazyjnych
<ol>
	<li>Przeprowadź prostą augmentację danych za pomocą funkcji RandomResizedCrop i RandomHorizontalFlip (Rysunek uzupełniający 7), aby rozszerzyć zestaw obrazów utworzony w kroku 1.2, a następnie wyekstrahuj sześć wskaźników roślinności powszechnie stosowanych do szacowania biomasy: RBRI, GBRI, GRRI, RGRI, NGBDI i NGRDI. Wzory obliczeniowe dla tych wskaźników znajdują się w Tabeli 1.</li>
	<li>Stwórz model regresji K-najbliższych sąsiadów (KNNR)22, wykorzystując wyniki modelu, aby zapewnić precyzyjne szacowanie biomasy roślin inwazyjnych. Jako dane wejściowe dla modelu szacującego wykorzystaj wyekstrahowane wskaźniki roślinności.</li>
	<li>Użyj współczynnika determinacji R2 oraz pierwiastka błędu średniokwadratowego (RMSE)23 do oceny dokładności modelu, obliczanych w następujący sposób: 
	<img alt="Wzór na współczynnik determinacji R², analiza statystyczna, wyświetlanie równania." src="/files/ftp_upload/66067/66067eq02.jpg" style="margin: auto;" data-altupdatedat="1788304762000" data-alt="Równanie 2"> 
	<img alt="Wzór RMSE, równanie obliczania pierwiastka błędu średniokwadratowego w analizie statystycznej." src="/files/ftp_upload/66067/66067eq03.jpg" style="margin: auto;" data-altupdatedat="1788304762000" data-alt="Równanie 3"> 
	UWAGA: Algorytm regresji K-najbliższych sąsiadów (KNNR) to nieparametryczna technika uczenia maszynowego stosowana do rozwiązywania problemów regresyjnych. Jej podstawowa koncepcja polega na przewidywaniu wyników poprzez wyznaczanie K najbliższych sąsiadów w przestrzeni cech na podstawie odległości próbek wejściowych. Kluczowe zalety stosowania KNNR to prostota i łatwość zrozumienia, a także brak konieczności przeprowadzenia fazy treningowej. Ponadto KNNR nie przyjmuje nadmiernych założeń dotyczących rozkładu danych. KNNR można zastosować w problemach regresyjnych do przewidywania ciągłych zmiennych celu i precyzyjnej oceny biomasy roślin inwazyjnych.</li>
	<li>Zastosuj wybrany w kroku 3.2 model szacowania biomasy nadziemnej i przeskanuj mapę rozmieszczenia roślin inwazyjnych z kroku 2.3.4 z poziomym i pionowym krokiem przesunięcia wynoszącym 280 pikseli.</li>
</ol>

Invasive Plant Biomass Assessment by Unmanned Aerial Vehicle Remote Sensing Data

<ol><li>Lian, J. Y., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Influence+of+obligate+parasite+Cuscuta+campestris+on+the+community+of+its+host+Mikania+micrantha%5BTitle%5D)+AND+%22Weed+Research%22%5BJournal%5D)">Influence of obligate parasite Cuscuta campestris on the community of its host Mikania micrantha.</a> Weed Research. 46, 441-443 (2006).</li>
<li>Yu, X., Bao, Q. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Aboveground+biomass+estimation+of+potato+from+UAV+multispectral+imagery%5BTitle%5D)+AND+%22Remote+Sensing%22%5BJournal%5D)">Aboveground biomass estimation of potato from UAV multispectral imagery.</a> Remote Sensing. 54 (4), 96-99 (2023).</li>
<li>Guo, T. C., Wang, Y. H., Feng, W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Research+on+wheat+yield+estimation+based+on+multimodal+data+fusion+from+unmanned+aircraft+platforms%5BTitle%5D)+AND+%22Acta+Agronomica+Sinica%22%5BJournal%5D)">Research on wheat yield estimation based on multimodal data fusion from unmanned aircraft platforms.</a> Acta Agronomica Sinica. 48 (7), 15(2022).</li>
<li>Shao, G. M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Estimation+of+transpiration+coefficient+and+aboveground+biomass+in+maize+using+time-series+UAV+multispectral+imagery%5BTitle%5D)+AND+%22The+Crop+Journal%22%5BJournal%5D)">Estimation of transpiration coefficient and aboveground biomass in maize using time-series UAV multispectral imagery.</a> The Crop Journal. 10 (5), 1376-1385 (2022).</li>
<li>Jiang, Q., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((UAV-based+biomass+estimation+for+rice-combining+spectral%2C+TIN-based+structural+and+meteorological+features%5BTitle%5D)+AND+%22Remote+Sensing%22%5BJournal%5D)">UAV-based biomass estimation for rice-combining spectral, TIN-based structural and meteorological features.</a> Remote Sensing. 11 (7), 890(2019).</li>
<li>Fei, S. P., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((UAV-based+multi-sensor+data+fusion+and+machine+learning+algorithm+for+yield+prediction+in+wheat%5BTitle%5D)+AND+%22Precision+Agriculture%22%5BJournal%5D)">UAV-based multi-sensor data fusion and machine learning algorithm for yield prediction in wheat.</a> Precision Agriculture. 24, 187-212 (2023).</li>
<li>Shu, S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Aboveground+biomass+estimation+of+rice+based+on+unmanned+aerial+vehicle+imagery%5BTitle%5D)+AND+%22Fujian+Journal+of+Agricultural+Sciences%22%5BJournal%5D)">Aboveground biomass estimation of rice based on unmanned aerial vehicle imagery.</a> Fujian Journal of Agricultural Sciences. 37 (7), 9(2022).</li>
<li>Wu, X., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((UAV+LiDAR-based+biomass+estimation+of+individual+trees%5BTitle%5D)+AND+%22Fujian+Journal+of+Agricultural+Sciences%22%5BJournal%5D)">UAV LiDAR-based biomass estimation of individual trees.</a> Fujian Journal of Agricultural Sciences. 22 (34), 15028-15035 (2022).</li>
<li>Yang, X., Zan, M., Munire, M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Estimation+of+above+ground+biomass+of+Populus+euphratica+forest+using+UAV+and+satellite+remote+sensing%5BTitle%5D)+AND+%22Transactions+of+the+Chinese+Society+of+Agricultural+Engineering%22%5BJournal%5D)">Estimation of above ground biomass of Populus euphratica forest using UAV and satellite remote sensing.</a> Transactions of the Chinese Society of Agricultural Engineering. 37 (1), 7(2021).</li>
<li>Li, B., Liu, K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Forest+biomass+estimation+based+on+UAV+optical+remote+sensing%5BTitle%5D)+AND+%22Forest+Engineering%22%5BJournal%5D)">Forest biomass estimation based on UAV optical remote sensing.</a> Forest Engineering. 5, 38(2022).</li>
<li>Li, Z., Zan, Q., Yang, Q., Zhu, D., Chen, Y., Yu, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Remote+estimation+of+mangrove+aboveground+carbon+stock+at+the+species+level+using+a+low-cost+unmanned+aerial+vehicle+system%5BTitle%5D)+AND+%22Remote+Sensing%22%5BJournal%5D)">Remote estimation of mangrove aboveground carbon stock at the species level using a low-cost unmanned aerial vehicle system.</a> Remote Sensing. 11 (9), 1018(2019).</li>
<li>Luo, S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Fusion+of+airborne+LiDAR+data+and+hyperspectral+imagery+for+aboveground+and+belowground+forest+biomass+estimation%5BTitle%5D)+AND+%22Ecological+Indicators%22%5BJournal%5D)">Fusion of airborne LiDAR data and hyperspectral imagery for aboveground and belowground forest biomass estimation.</a> Ecological Indicators. 73, 378-387 (2017).</li>
<li>Li, S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Research+of+grassland+aboveground+biomass+inversion+based+on+UAV+and+satellite+remoting+sensing%5BTitle%5D)+AND+%22Remote+Sensing+Technology+and+Application%22%5BJournal%5D)">Research of grassland aboveground biomass inversion based on UAV and satellite remoting sensing.</a> Remote Sensing Technology and Application. 1, 037(2022).</li>
<li>Wengert, M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Multisite+and+multitemporal+grassland+yield+estimation+using+UAV-borne+hyperspectral+data%5BTitle%5D)+AND+%22Remote+Sensing%22%5BJournal%5D)">Multisite and multitemporal grassland yield estimation using UAV-borne hyperspectral data.</a> Remote Sensing. 14 (9), 2068(2022).</li>
<li>Li, Y., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+effect+of+season+on+Spartina+alterniflora+identification+and+monitoring%5BTitle%5D)+AND+%22Frontiers+in+Environmental+Science%22%5BJournal%5D)">The effect of season on Spartina alterniflora identification and monitoring.</a> Frontiers in Environmental Science. 10, 1044839(2022).</li>
<li>Wang, F., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Estimation+of+above-ground+biomass+of+winter+wheat+based+on+consumer-grade+multi-spectral+UAV%5BTitle%5D)+AND+%22Remote+Sensing%22%5BJournal%5D)">Estimation of above-ground biomass of winter wheat based on consumer-grade multi-spectral UAV.</a> Remote Sensing. 14 (5), 1251(2022).</li>
<li>Lu, N., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Improved+estimation+of+aboveground+biomass+in+wheat+from+RGB+imagery+and+point+cloud+data+acquired+with+a+low-cost+unmanned+aerial+vehicle+system%5BTitle%5D)+AND+%22Plant+Methods%22%5BJournal%5D)">Improved estimation of aboveground biomass in wheat from RGB imagery and point cloud data acquired with a low-cost unmanned aerial vehicle system.</a> Plant Methods. 15 (1), 17(2019).</li>
<li>Chen, H., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Mapping+forest+aboveground+biomass+with+MODIS+and+Fengyun-3C+VIRR+imageries+in+Yunnan+Province%2C+Southwest+China+using+linear+regression%2C+K-nearest+neighbor+and+random%5BTitle%5D)+AND+%22Remote+Sensing%22%5BJournal%5D)">Mapping forest aboveground biomass with MODIS and Fengyun-3C VIRR imageries in Yunnan Province, Southwest China using linear regression, K-nearest neighbor and random.</a> Remote Sensing. 14 (21), 5456(2022).</li>
<li>Yan, M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Biomass+estimation+of+subtropical+arboreal+forest+at+single+tree+scale+based+on+feature+fusion+of+airborne+LiDAR+data+and+aerial+images%5BTitle%5D)+AND+%22Sustainability%22%5BJournal%5D)">Biomass estimation of subtropical arboreal forest at single tree scale based on feature fusion of airborne LiDAR data and aerial images.</a> Sustainability. 15 (2), 1676(2023).</li>
<li>Tian, Y. C., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Aboveground+mangrove+biomass+estimation+in+Beibu+Gulf+using+machine+learning+and+UAV+remote+sensing%5BTitle%5D)+AND+%22Science+of+the+Total+Environment%22%5BJournal%5D)">Aboveground mangrove biomass estimation in Beibu Gulf using machine learning and UAV remote sensing.</a> Science of the Total Environment. 781, 146816(2021).</li>
<li>Shrivastava, A., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Beyond+skip+connections%3A+Top-down+modulation+for+object+detection%5BTitle%5D)+AND+%22arXiv%22%5BJournal%5D)">Beyond skip connections: Top-down modulation for object detection.</a> arXiv. , (2016).</li>
<li>Belkasim, S. O., Shridhar, M., Ahmadi, M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Pattern+classification+using+an+efficient+KNNR%5BTitle%5D)+AND+%22Pattern+Recognition%22%5BJournal%5D)">Pattern classification using an efficient KNNR.</a> Pattern Recognition. 25 (10), 1269-1274 (1992).</li>
<li>Joel, S., Jose Luis, A., Shawn, C. K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Farming+and+earth+observation%3A+Sentinel-2+data+to+estimate+within-field+wheat+grain+yield%5BTitle%5D)+AND+%22International+Journal+of+Applied+Earth+Observation+and+Geoinformation%22%5BJournal%5D)">Farming and earth observation: Sentinel-2 data to estimate within-field wheat grain yield.</a> International Journal of Applied Earth Observation and Geoinformation. 107, 102697(2022).</li>
<li>Tian, L., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Review+of+remote+sensing-based+methods+for+forest+aboveground+biomass+estimation%3A+Progress%2C+challenges%2C+and+prospects%5BTitle%5D)+AND+%22Forests%22%5BJournal%5D)">Review of remote sensing-based methods for forest aboveground biomass estimation: Progress, challenges, and prospects.</a> Forests. 14 (6), 1086(2023).</li>
<li>Wei, X. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Biomass+estimation%3A+A+remote+sensing+approach%5BTitle%5D)+AND+%22Geography+Compass%22%5BJournal%5D)">Biomass estimation: A remote sensing approach.</a> Geography Compass. 4 (11), 1635-1647 (2010).</li>
<li>Débora, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((New+methodology+for+intertidal+seaweed+biomass+estimation+using+multispectral+data+obtained+with+unoccupied+aerial+vehicles%5BTitle%5D)+AND+%22Remote+Sensing%22%5BJournal%5D)">New methodology for intertidal seaweed biomass estimation using multispectral data obtained with unoccupied aerial vehicles.</a> Remote Sensing. 15 (13), 3359(2023).</li>
<li>Zhang, J. Y., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Unmanned+aerial+system-based+wheat+biomass+estimation+using+multispectral%2C+structural+and+meteorological+data%5BTitle%5D)+AND+%22Agriculture%22%5BJournal%5D)">Unmanned aerial system-based wheat biomass estimation using multispectral, structural and meteorological data.</a> Agriculture. 13 (8), 1621(2023).</li>
<li>Shen, H., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Influence+of+the+obligate+parasite+Cuscuta+campestris+on+growth+and+biomass+allocation+of+its+host+Mikania+micrantha%5BTitle%5D)+AND+%22Journal+of+Experimental+Botany%22%5BJournal%5D)">Influence of the obligate parasite Cuscuta campestris on growth and biomass allocation of its host Mikania micrantha.</a> Journal of Experimental Botany. 56 (415), 1277-1284 (2005).</li>
</ol>

Autorzy nie mają nic do ujawnienia.

Przedstawiamy szczegółowe etapy eksperymentu polegającego na szacowaniu biomasy roślin inwazyjnych z wykorzystaniem teledetekcji UAV i wizji komputerowej. Główny proces i etapy tej umowy przedstawiono na rysunku 7. Właściwa jakość próbki jest jednym z najważniejszych i najtrudniejszych aspektów programu. Znaczenie to odnosi się zarówno do wszystkich roślin inwazyjnych, jak i do wszelkich innych eksperymentów związanych z szacowaniem biomasy roślinnej24.
Aby określić rozmieszczenie roślin inwazyjnych na badanym obszarze, musimy najpierw pozyskać widzialną i ciągłą fotogrametrię badanego obszaru z wykorzystaniem teledetekcji z UAV. Aby to osiągnąć, niezbędna jest odpowiednia wysokość fotograficzna UAV i rozdzielczość kamery. Dzięki temu ResNet101, konwolucyjna sieć neuronowa, będzie mogła uzyskać z obrazu takie cechy, jak wskaźnik wegetacji i tekstura. Cechy te pomagają zidentyfikować rośliny inwazyjne nawet w złożonym tle środowiskowym i ostatecznie odwzorować ich rozmieszczenie na badanym obszarze.
Aby oszacować biomasę roślin inwazyjnych na badanym obszarze, konieczne jest stworzenie kwadratowych ramekpróbek 25 z 25-50 losowymi punktami poboru próbek. Gdy bezzałogowy system powietrzny zakończy proces wykonywania zdjęć, konieczne jest zebranie roślin inwazyjnych z ramek próbnych. Należy zauważyć, że jak stwierdzono w początkowym rozdziale, zbieranie biomasy z ramek powinno odbywać się bez ich przesuwania i z precyzją poprzez przypisywanie unikalnych numerów. Dodatkowo biomasę należy delikatnie wysuszyć i zważyć w laboratorium, aby uzyskać dokładny pomiar. Model regresji KNNR18 został wykorzystany do uzyskania przestrzennego rozmieszczenia roślin inwazyjnych, wykorzystując sześć wskaźników wegetacji wyodrębnionych z obrazów uzyskanych przez system kamer UAV jako dane wejściowe do modelu estymacji oraz biomasę jako dane wyjściowe modelu.
Opisane w niniejszej pracy metody szacowania inwazyjnych populacji roślin nie są wyczerpujące. W celu uzyskania porównywalnych danych można wykorzystać dodatkowe narzędzia, a także zastosować liczne praktyczne lub innowacyjne modyfikacje. Możliwe jest wykorzystanie szeregu dronów, z których model wyznaczony w protokole służy tylko jako jedna opcja i może być zastąpiony dowolnym dronem posiadającym integrację z automatyczną nawigacją, możliwość dostosowania do gimbala, zdolność do lotu do 50 metrów, udźwig przekraczający wybraną kamerę oraz zasięg obejmujący cały badany obszar. Wybierając kamerę do UAV, należy wziąć pod uwagę takie czynniki, jak maksymalna rozdzielczość, efektywna liczba pikseli obrazu, maksymalna liczba pikseli i inne parametry obrazowania, a także ograniczenia dotyczące rozmiaru i wagi obciążenia UAV. Dodatkowo do pomyślnego zakończenia procesu filmowania niezbędny jest odpowiedni zasięg. Co więcej, model identyfikacji nie jest jedyną metodą i może być dostosowany do wielu inwazyjnych gatunków roślin, takich jak rośliny drzewiaste lub różne rodzaje roślin, w celu ulepszenia sugerowanej metody. Strategia ta może być również rozwinięta w algorytm regresji, który wykorzystuje mniej próbek, uzyskuje dodatkowe wskaźniki wegetacji i osiąga zwiększony stopień precyzji. Alternatywnie, w celu identyfikacji roślin inwazyjnych można wdrożyć zredukowaną sieć identyfikacji, co pozwoliłoby na praktyczne zastosowanie inteligentnych metod identyfikacji.
Podstawowym ograniczeniem prezentowanej metody jest zależność modelu od warunków oświetleniowych i tła. Poprawa w kierunku większej dokładności może nastąpić tylko dzięki dalszemu włączeniu danych multispektralnych26, LiDAR12 i meteorologicznych27. Pozyskiwanie tego rodzaju danych może być trudne i może wymagać drogiego sprzętu, ale możemy zwiększyć dokładność naszych danych, unikając bezpośredniego światła słonecznego i izolując tła roślin podczas pobierania próbek z obszaru za pomocą naszego systemu filmowania UAV.
Zaletą zastosowania tej metodologii, w przeciwieństwie do innych, jest jej zdolność do zapewnienia przestrzennego rozmieszczenia inwazyjnych gatunków roślin na wyznaczonym obszarze badań. Rozkład jest określany za pomocą analizy regresji, wykorzystującej sześć wskaźników wegetacji wyodrębnionych ze zdjęć zarejestrowanych za pomocą systemu kamer UAV jako danych wejściowych, z biomasą jako danymi wyjściowymi modelu. Podejście to wykorzystuje przenośną metodę szacowania biomasy w wielu obszarach badawczych jednocześnie, która zasadniczo różni się od wcześniejszych ręcznych metod zbierania biomasy. Metoda konwencjonalna polega na ręcznym przeprowadzaniu badań i zbieraniu znacznych ilości, co jest nieefektywne i subiektywne28, a tym samym nie zapewnia praktycznego oszacowania biomasy w złożonych warunkach.
Oszacowanie inwazyjnej biomasy roślinnej przy użyciu w/w metodyki pozwala na ilościowe określenie rozmieszczenia regionalnego. Ponadto oferuje pomoc techniczną w zakresie inteligentnego monitorowania i oceny zagrożeń na szczeblu regionalnym.

W tym protokole, proponowana metoda szacowania inwazyjnej biomasy oparta na teledetekcji UAV i wizji komputerowej może odzwierciedlać rozmieszczenie inwazyjnych organizmów i przewidywać stopień inwazyjnego zagrożenia biologicznego. Szacunki dotyczące rozmieszczenia i biomasy organizmów inwazyjnych mają kluczowe znaczenie dla zapobiegania i zwalczania tych organizmów. Gdy rośliny inwazyjne zaatakują, mogą uszkodzić ekosystem i spowodować ogromne straty ekonomiczne. Szybka i dokładna identyfikacja roślin inwazyjnych oraz oszacowanie kluczowej biomasy roślin inwazyjnych to główne wyzwania w monitorowaniu i kontroli roślin inwazyjnych. W tym protokole bierzemy Mikania micrantha jako przykład, aby zbadać metodę szacowania inwazyjnej biomasy roślinnej opartą na bezzałogowej teledetekcji powietrznej i widzeniu komputerowym, która zapewnia nowe podejście i metodę badań ekologicznych roślin inwazyjnych oraz promuje ekologiczne badania i zarządzanie roślinami inwazyjnymi.
Obecnie pomiar biomasy Mikania micrantha odbywa się głównie za pomocą ręcznego pobierania próbek1. Tradycyjne metody pomiaru biomasy wymagają dużej siły roboczej i zasobów materialnych, które są nieefektywne i ograniczone przez ukształtowanie terenu; trudno jest sprostać potrzebom regionalnego szacowania biomasy Mikania micrantha. Główną zaletą stosowania tego protokołu jest to, że zapewnia on metodę ilościowego określania regionalnej biomasy roślin inwazyjnych i przestrzennego rozmieszczenia roślin inwazyjnych w sposób, który nie uwzględnia ograniczeń pobierania próbek na danym obszarze i eliminuje potrzebę ręcznych badań.
Technologia teledetekcji UAV osiągnęła pewne wyniki w szacowaniu biomasy roślin i jest szeroko stosowana w rolnictwie2,3,4,5,6,7, leśnictwo8,9,10,11, oraz grassland12,13,14. Technologia teledetekcji UAV ma zalety niskiego kosztu, wysokiej wydajności, wysokiej precyzji i elastycznego działania15,16, który może skutecznie uzyskiwać dane obrazowe teledetekcyjne w badanym obszarze; Następnie wyodrębniana jest cecha tekstury i wskaźnik roślinności z obrazu teledetekcyjnego, aby zapewnić wsparcie danych do oszacowania biomasy roślinnej na dużym obszarze. Obecne metody szacowania biomasy roślin dzielą się głównie na modele parametryczne i nieparametryczne17. Wraz z rozwojem algorytmów uczenia maszynowego, nieparametryczne modele uczenia maszynowego o większej dokładności stały się szeroko stosowane w teledetekcyjnym szacowaniu biomasy roślinnej. Chen i in.18 wykorzystali mieszaną regresję logistyczną (MLR), KNNR i losową regresję lasów (RFR) do oszacowania nadziemnej biomasy lasów w prowincji Yunnan. Naukowcy doszli do wniosku, że modele uczenia maszynowego, w szczególności KNNR i RFR, przyniosły lepsze wyniki w porównaniu z MLR. Yan et al.19 wykorzystali modele regresji RFR i ekstremalnego zwiększania gradientu (XGBR), aby ocenić dokładność szacowania biomasy lasów subtropikalnych przy użyciu różnych zestawów zmiennych. Tian et al.20 wykorzystali jedenaście modeli uczenia maszynowego do oszacowania nadziemnej biomasy różnych gatunków lasów namorzynowych w Zatoce Beibuwan. Naukowcy odkryli, że metoda XGBR była bardziej skuteczna w określaniu nadziemnej biomasy lasów namorzynowych. Szacowanie biomasy roślin za pomocą teledetekcji człowiek-maszyna jest dobrze ugruntowaną praktyką, jednak wykorzystanie UAV do szacowania biomasy inwazyjnej rośliny Mikania micrantha nie zostało jeszcze zgłoszone zarówno w kraju, jak i za granicą. Podejście to zasadniczo różni się od wszystkich dotychczasowych metod szacowania biomasy roślin inwazyjnych, zwłaszcza Mikania micrantha.
Podsumowując, teledetekcja UAV ma zalety wysokiej rozdzielczości, wysokiej wydajności i niskich kosztów. W ekstrakcji zmiennych cech obrazów teledetekcyjnych cechy tekstury w połączeniu z indeksami roślinności mogą uzyskać lepszą wydajność przewidywania regresji. Modele nieparametryczne mogą uzyskać dokładniejsze modele regresji niż modele parametryczne w szacowaniu biomasy roślinnej. Dlatego, aby dokładnie obliczyć rozkład zerowy roślin inwazyjnych i ich biomasy, sugerujemy następujące opisane procedury dla eksperymentu z inwazyjną biomasą roślin, który opiera się na teledetekcji przy użyciu UAV i wizji komputerowej.

<table><tbody><tr><td>Lustrzanka cyfrowa</td><td>Nikon</td><td>D850</td><td>Typ czujnika: CMOS; Maksymalna liczba pikseli: 46,89 mln; Efektywna liczba pikseli: 45,75 miliona; Maksymalna rozdzielczość 8256 x 5504.</td></tr><tr><td>GPU - Procesor graficzny</td><td>NVIDIA&nbsp;</td><td></td><td></td>RTX3090</tr><tr><td>Hexacopter</td><td>DJI&nbsp;</td><td>M600PRO</td><td>Lot poziomy: 65 km/h (bez wiatru); Maksymalne obciążenie w locie: 6000 g</td></tr><tr><td>PyCharm</td><td>Python IDE</td><td>2023.1</td><td></td></tr><tr><td>Python</td><td>Python</td><td>3.8.0</td><td></td></tr><tr><td>Pytorch</td><td>Pytorch</td><td>1.8.1</td><td></td></tr></tbody></table>

szacowanie biomasy w oparciu o wizję komputerową dla roślin inwazyjnych

Computer Vision-Based Biomass Estimation for Invasive Plants

Informujemy o szczegółowych krokach metody szacowania biomasy roślin inwazyjnych na podstawie teledetekcji UAV i wizji komputerowej. W celu pobrania próbek z badanego obszaru przygotowaliśmy zestaw kwadratów próbnych w celu losowego rozmieszczenia punktów poboru próbek. Bezzałogowy system kamer lotniczych został zbudowany przy użyciu drona i kamery do pozyskiwania ciągłych obrazów RGB badanego obszaru za pomocą zautomatyzowanej nawigacji. Po zakończeniu strzelania zebrano biomasę nadziemną w ramce próbki, a cała korespondencja została oznaczona i zapakowana. Przykładowe dane zostały przetworzone, a zdjęcia lotnicze zostały podzielone na małe obrazy o wymiarach 280 x 280 pikseli w celu utworzenia zestawu danych obrazu. Do zmapowania rozmieszczenia Mikania micrantha na badanym obszarze wykorzystano głęboką konwolucyjną sieć neuronową i uzyskano jej wskaźnik wegetacji. Zebrane organizmy wysuszono, a suchą masę zapisano jako biomasę mieloną. Model regresji inwazyjnej biomasy roślinnej został skonstruowany przy użyciu regresji K-najbliższego sąsiada (KNNR) poprzez wyodrębnienie wskaźnika wegetacji z obrazów próbki jako zmiennej niezależnej i zintegrowanie go z biomasą prawdy gruntowej jako zmienną zależną. Wyniki pokazały, że możliwe jest dokładne przewidzenie biomasy roślin inwazyjnych. Za pomocą przechodzenia przez obraz wygenerowano dokładną mapę rozmieszczenia przestrzennego biomasy roślin inwazyjnych, co pozwoliło na precyzyjną identyfikację obszarów wysokiego ryzyka dotkniętych przez rośliny inwazyjne. Podsumowując, badanie to pokazuje potencjał połączenia teledetekcji bezzałogowych statków powietrznych z technikami uczenia maszynowego w celu oszacowania inwazyjnej biomasy roślinnej. Znacząco przyczynia się do badań nad nowymi technologiami i metodami monitorowania roślin inwazyjnych w czasie rzeczywistym oraz zapewnia wsparcie techniczne dla inteligentnego monitoringu i oceny zagrożeń w skali regionalnej.

Przedstawiamy reprezentatywne wyniki zastosowania metody opartej na komputerowym rozpoznawaniu obrazu do szacowania ilości roślin inwazyjnych, zaimplementowanej programowo na komputerze. W tym eksperymencie oceniliśmy rozkład przestrzenny i oszacowaliśmy biomasę roślin inwazyjnych w ich naturalnych siedliskach, przyjmując Mikania micrantha jako obiekt badań. Do pozyskania obrazów terenu badawczego wykorzystaliśmy system kamer drona, którego część przedstawiono na Rysunku 3. Do identyfikacji roślin obecnych na obszarze badań zastosowaliśmy splotową sieć neuronową ResNet101. Następnie zmapowaliśmy rozkład przestrzenny roślin inwazyjnych, a część naszych ustaleń zilustrowano na Rysunku 4. Na Rysunku 3 widać Mikania micrantha pnącą się po roślinie ozdobionej białymi kwiatami. Pozostałe rośliny, jak również droga i elementy towarzyszące, są jednolicie przedstawione w tle. Na Rysunku 4 model rozpoznaje część zaznaczoną na czerwono jako Mikania micrantha. Porównując oba zestawy obrazów, staje się jasne, że ResNet101 wykazuje wysoką skuteczność wykrywania Mikania micrantha na złożonym tle. Ponadto model ten z wysoką precyzją odwzorowuje rozkład Mikania micrantha na obszarze badań.
Biomasę inwazyjnych roślin na obszarze badań oszacowano poprzez przycięcie wszystkich obrazów działek próbnych Mikania micrantha z ortofotoplanów do rozmiaru 280 × 280 pikseli oraz wyekstrahowanie wskaźników roślinności RBRI, GBRI, GRRI, RGRI, NGBDI i NGBDI. Analizę regresji przeprowadzono z wykorzystaniem modelu regresji KNNR, przyjmując sześć wskaźników jako dane wejściowe modelu szacującego, a biomasę jako wynik modelu. Rysunek 5 przedstawia wyniki: współrzędne poziome wykresu reprezentują wartości biomasy zmierzone w terenie, współrzędne pionowe reprezentują wartości biomasy przewidziane przez model, a szare obszary przedstawiają przedziały ufności. Wyniki wykazują wysoką zdolność predykcyjną, przy wartości R² wynoszącej 0,62 i RMSE wynoszącym 10,56 g/m2. Model zwiększa dokładność szacowania biomasy Mikania micrantha, a mapa rozmieszczenia przestrzennego na Rysunku 6 skutecznie oddaje dystrybucję biomasy Mikania micrantha.
<img alt="Dron heksakopter na nawierzchni, sprzęt do fotografii powietrznej, zaawansowana technologia obrazowania." class="xfigimg" src="/files/ftp_upload/66067/66067fig01.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 1"> 
Rycina 1: Systemy teledetekcji UAV. Przykłady danych obrazowych RGB zarejestrowanych przez UAV. <a href="https://www.jove.com/files/ftp_upload/66067/66067fig01large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.</a>
<img alt="Schemat mapowania napowietrznego przedstawiający ścieżkę pomiarów gruntowych do analizy geograficznej." class="xfigimg" src="/files/ftp_upload/66067/66067fig02.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 2"> 
Rycina 2: Planowanie trasy. Badanie nad regionalnym planowaniem tras <a href="https://www.jove.com/files/ftp_upload/66067/66067fig02large.jpg" target="_blank">Kliknij tutaj, aby zobaczyć powiększoną wersję tej ryciny.</a>
<img alt="Analiza bioróżnorodności powietrznej pokazująca różnice w miejskich terenach zielonych na schemacie metody badawczej." class="xfigimg" src="/files/ftp_upload/66067/66067fig03.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 3"> 
Rysunek 3: Wyniki identyfikacji roślin inwazyjnych na obszarze badań. Rysunek przedstawia wyniki identyfikacji Mikania micrantha w strefie badań za pomocą splotowej sieci neuronowej ResNet101. Czerwony obszar na zdjęciu wskazuje teren wykryty przez ResNet101 jako Mikania micrantha, natomiast tło oznacza pozostałą część obszaru badań. Wyniki te odpowiadają obrazom próbek przedstawionym na Rysunku 1. Reprezentują one odpowiednio wyniki rozpoznawania z Rysunku 1. <a href="https://www.jove.com/files/ftp_upload/66067/66067fig03large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tego rysunku.</a>
<img alt="Analiza roślinności z powietrza; czerwone znaczniki wyróżniają liczbę drzew na zdjęciach z drona, schemat pomiarów terenowych." class="xfigimg" src="/files/ftp_upload/66067/66067fig04.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 4"> 
Rycina 4: Rozkład przestrzenny roślin inwazyjnych. Model rozpoznaje czerwoną część jako Mikania micrantha. <a href="https://www.jove.com/files/ftp_upload/66067/66067fig04large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić większą wersję tej ryciny.</a>
<img alt="Wykres analizy regresji KNNR, RMSE:30,59, R2:0,65, linia trendu danych, wyniki statystyczne." class="xfigimg" src="/files/ftp_upload/66067/66067fig05.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 5"> 
Rysunek 5: Wyniki regresji dla przewidywania biomasy. Oś pozioma przedstawia wartości biomasy obserwowane w polu, natomiast oś pionowa obrazuje wartości biomasy oszacowane przez model. Obszary zacieniowane na szaro oznaczają przedziały ufności. Model KNNR osiągnął wartość R2 wynoszącą 0,65 w zbiorze testowym, natomiast najniższy błąd średniokwadratowy wyniósł 30,59 g/m2. Na wykresie rozrzutu regresji modelu wiele oszacowań biomasy Mikania micrantha mieściło się w przedziale ufności, co wskazuje na poprawność przewidywania biomasy. <a href="https://www.jove.com/files/ftp_upload/66067/66067fig05large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić ten rysunek w większym rozmiarze.</a>
<img alt="Analiza pokrycia terenu, skale szarości map gęstości, rozkład przestrzenny, diagram, badanie środowiskowe." class="xfigimg" src="/files/ftp_upload/66067/66067fig06.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 6"> 
Rysunek 6: Rozkład przestrzenny biomasy Mikania micrantha. Rysunek przedstawia szacunkową wartość biomasy Mikania micrantha na obszarze badawczym z wykorzystaniem modelu predykcyjnego KNNR, wraz z wygenerowaną mapą rozkładu biomasy Mikania micrantha. Ciemniejsze obszary reprezentują większe ilości biomasy Mikania micrantha. <a href="https://www.jove.com/files/ftp_upload/66067/66067fig06large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tego rysunku.</a>
<img alt="Schemat planowania UAV z przetwarzaniem obrazów RGB w celu analizy biomasy roślin inwazyjnych, indeksu wegetacyjnego i ResNet101." class="xfigimg" src="/files/ftp_upload/66067/66067fig07.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 7"> 
Rycina 7: Schematyczny przebieg rozwoju niniejszego protokołu. Na rycinie przedstawiono główne etapy zaprezentowanego protokołu. <a href="https://www.jove.com/files/ftp_upload/66067/66067fig07large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.</a>
<table border="1" fo:keep-together.within-page="1" fo:keep-with-next.within-page="always">
	<tbody >
		<tr >
			<td >Nazwa indeksu roślinności</td>
			<td >Wzór obliczeniowy</td>
		</tr >
		<tr >
			<td >Indeks stosunku zieleni do błękitu</td>
			<td >GBRI = DNG/DNB</td>
		</tr >
		<tr >
			<td >Indeks stosunku zieleni do czerwieni</td>
			<td >GRRI = DNG/DNR</td>
		</tr >
		<tr >
			<td >Indeks stosunku czerwieni do błękitu</td>
			<td >RBRI = DNR/DNB</td>
		</tr >
		<tr >
			<td >Indeks stosunku czerwieni do zieleni</td>
			<td >RGRI = DNR/DNG</td>
		</tr >
		<tr >
			<td >Znormalizowany indeks różnicy zieleni i błękitu</td>
			<td >NGBDI = (DNG - DNB)/(DNG + DNB)</td>
		</tr >
		<tr >
			<td >Znormalizowany indeks różnicy zieleni i czerwieni</td>
			<td >NGRDI = (DNG - DNR)/(DNG + DNR)</td>
		</tr >
	</tbody >
</table>
Tabela 1: Wzory obliczeniowe indeksów roślinności.Indeksy roślinności użyte w niniejszym protokole oraz odpowiadające im wzory obliczeniowe.
Rycina uzupełniająca 1: Wycinanie obrazu do rozmiaru 280 x 280 pikseli za pomocą skryptu Python z wykorzystaniem biblioteki OpenCV. <a href="https://www.jove.com/files/ftp_upload/66067/Supplementary%20Figure%201.zip" target="_blank">Kliknij tutaj, aby pobrać ten plik.</a>
Rycina uzupełniająca 2: Podział zbioru danych na zbiór treningowy, walidacyjny i testowy. <a href="https://www.jove.com/files/ftp_upload/66067/Supplementary%20Figure%202.zip" target="_blank">Kliknij tutaj, aby pobrać ten plik.</a>
Rycina uzupełniająca 3: Ekstrakcja cech i redukcja wymiarowości. (A) Wstępna ekstrakcja cech. (B) Operacja splotu. (C) Redukcja wymiarowości. <a href="https://www.jove.com/files/ftp_upload/66067/Supplementary%20Figure%203.zip" target="_blank">Kliknij tutaj, aby pobrać ten plik.</a>
Rysunek uzupełniający 4: Przekazywanie cech do warstwy FC w architekturze ResNet. <a href="https://www.jove.com/files/ftp_upload/66067/Supplementary%20Figure%204.zip" target="_blank">Kliknij tutaj, aby pobrać ten plik.</a>
Rycina uzupełniająca 5: Ustawianie parametrów. <a href="https://www.jove.com/files/ftp_upload/66067/Supplementary%20Figure%205.zip" target="_blank">Proszę kliknąć tutaj, aby pobrać ten plik.</a>
Rysunek uzupełniający 6: Specyficzny kod implementacyjny do generowania szczegółowej mapy rozmieszczenia. <a href="https://www.jove.com/files/ftp_upload/66067/Supplementary%20Figure%206.zip" target="_blank">Kliknij tutaj, aby pobrać ten plik.</a>
Rysunek uzupełniający 7: Funkcje RandomResizedCrop oraz RandomHorizontalFlip. <a href="https://www.jove.com/files/ftp_upload/66067/Supplementary%20Figure%207.zip" target="_blank">Aby pobrać ten plik, kliknij tutaj.</a>

Raportujemy szczegółowe procedury dla metody szacowania biomasy roślin inwazyjnych, która wykorzystuje dane uzyskane z teledetekcji bezzałogowych statków powietrznych (UAV) do oceny biomasy i uchwycenia przestrzennego rozmieszczenia gatunków inwazyjnych. Takie podejście okazuje się bardzo korzystne w przeprowadzaniu oceny zagrożeń i wczesnym ostrzeganiu przed roślinami inwazyjnymi.

Szacowanie biomasy w oparciu o wizję komputerową dla roślin inwazyjnych

We report on the detailed steps of a method to estimate the biomass of invasive plants based on UAV remote sensing and computer vision. To collect samples ...

Nasz mistrz wykorzystuje mono detekcję UAV i rozum komputerowy, aby skutecznie oszacować biomasę w zakładach odpadowych, pokonując nieefektywność i subiektywność tradycyjnych ręcznych pomiarów i gromadzenia danych w złożonych środowiskach. Niedawny postęp w teledetekcji UAV do szacowania biomasy roślin obejmuje obrazowanie w wysokiej rozdzielczości i integrację danych wielomodelowych, a osiągnięcia te usprawniają badania naukowe, monitorowanie środowiska i zarządzanie rolnictwem, oferując bardziej precyzyjne wsparcie danych. Postęp w teledetekcji UAV do szacowania biomasy roślin obciąża czujniki o wysokiej rozdzielczości, obrazowanie wielospektralne/hiperspektralne, GBS/INS, specjalistyczne oprogramowanie do przetwarzania danych, sztuczną inteligencję i głębokie uczenie, ulepszanie baterii, ulepszone przechowywanie danych i przetwarzanie w chmurze.W odniesieniu do tradycyjnych rolników marki znajdują się metody automatyzacji, proponowana przez nas mapa nie wymaga szybkiej obsługi lustra i cięcia danych, a w przypadku innych specjalnych modelowania hiperspektralnej metody wymiarowej nie potrzebujemy specjalnych wymagań. Nasza metoda może być rolnicza i dokładna polega na tym, że są to podstawowe rośliny bez wymogu doświadczenia, co jest naszą zaletą. Nasze laboratorium będzie nadal badać czujniki zdalne UAV, farmacja roślinna jest niesamowita.W przyszłości skupimy się na obsłudze oprogramowania układowego, głęboko działających organizmach, stosowaniu w wypełnianiu danych z wieloma piłami, prawie, kontynuujemy głębokie wyniki dotyczące preferencji roślin i innowacji terminologicznych w zakresie czujników. Na początek należy zastosować metodę losowego pobierania próbek z wystarczającą liczbą próbek biomasy, aby określić miejsca pobierania próbek gleby na badanym obszarze. Umieścić ramkę próbki poziomo nad roślinnością, całkowicie obejmując rośliny z zachowaniem minimalnej odległości dwóch metrów między każdą rośliną.Użyj drona i kamery, aby zbudować bezzałogowy statek powietrzny lub system teledetekcji UAV. Aby wykreślić korzeń w określonym obszarze badania za pomocą UAV, najpierw ustal współczynnik nakładania się kierunku wewnątrz wynoszący 70%, utrzymuj kamerę prostopadle do ziemi i na wysokości 30 metrów, aby robić zdjęcia w jednolitych odstępach czasu wynoszących dwie sekundy. Uruchom plik skryptu, aby zapisać zdjęcia lotnicze do późniejszego przetwarzania za pomocą oprogramowania Python do szacowania biomasy.Aby utworzyć zestaw danych przy użyciu programowania w języku Python, przejdź do segmentacji nieprzetworzonych danych obrazu na mniejsze obrazy o rozmiarze takim samym jak przykładowe obrazy. Użyj metody okna przesuwnego do segmentacji, ustawiając kroki poziome i pionowe na 280 pikseli. Z podzielonych na segmenty małych obrazów wybierz losowo 880 obrazów roślin inwazyjnych i 1500 obrazów tła, aby utworzyć zestaw danych, a następnie podziel ten zestaw danych na zestawy treningowe, walidacyjne i testowe w stosunku sześć do dwóch do dwóch.Na początek należy ręcznie zebrać nadziemną biomasę rumianku na każdej powierzchni próbki po zakończeniu zbierania danych za pomocą drona. Podczas zbierania pokrój rumianek wzdłuż wewnętrznej krawędzi poletka z próbką, a następnie odetnij kłącze rumianku od dołu, usuń wszelkie zabrudzenia, kamienie lub inne rośliny, które są zmieszane, na koniec zapakuj i oznacz próbki. Następnie przynieś pobrane próbki roślin inwazyjnych do laboratorium.Wysuszyć wszystkie próbki na powietrzu, aby odparować większość wilgoci. Suszyć próbki w piecu w temperaturze 55 stopni Celsjusza przez 72 godziny, aby usunąć resztki wilgoci. Umieść worek rumianku na wadze elektronicznej i zapisz ustabilizowane odczyty w gramach.Po zakończeniu ponownie skalibruj i kontynuuj ważenie. Waż rumianek co godzinę, aż masa przestanie się zmieniać. Odejmij masę worka od odczytu, aby uzyskać zmierzoną masę tej próbki.Na koniec oblicz biomasę nadziemną rośliny inwazyjnej, korzystając z wyświetlonego wzoru. Aby przygotować oprogramowanie, pobierz i zainstaluj Anaconda z jej oficjalnej strony internetowej. Uruchom program PyCharm IDE, a następnie otwórz wiersz poleceń wiersza poleceń Anaconda i wpisz conda create n pytorch python=3, 8, aby utworzyć nowe środowisko conda.Po utworzeniu środowiska wprowadź conda info envs, aby potwierdzić, że środowisko PyTorch istnieje. Otwórz wiersz polecenia Anaconda i aktywuj środowisko PyTorch, wprowadzając conda activate pytorch, wpisz nvidia smi, aby sprawdzić bieżącą ujednoliconą architekturę urządzenia obliczeniowego lub wersję CUDA. Następnie zainstaluj PyTorch w wersji 1.8.1, uruchamiając polecenie conda install pytorch=1.8.1 torchvison=0.9.1 torchaudio=0.8.1 cudatoolkit=11.0 c pytorch.Aby uruchomić rozpoznawanie modelu, wstępnie przetwórz obrazy, aby przygotować je do danych wejściowych modelu. Korzystając z wyświetlonego kodu, zmień rozmiar obrazów z 280 na 280 pikseli na 224 na 224 piksele i znormalizuj je, aby upewnić się, że spełniają wymagania dotyczące rozmiaru modelu. Wytrenuj wieloklasowy model rozpoznawania przy użyciu już utworzonego zestawu danych, ustawiając liczbę iteracji na 200 i początkową szybkość uczenia się 0,0001.Zmniejsz szybkość uczenia się o jedną trzecią co 10 iteracji przy rozmiarze partii 64. Zapisuj optymalne parametry modelu automatycznie po każdej iteracji. Kliknij prawym przyciskiem myszy i naciśnij uruchom skrypt, a następnie zastosuj skrupulatnie wyszkolony model rozpoznawania i systematycznie przechodź przez oryginalny obraz w celu identyfikacji.Skonfiguruj kroki poziome i pionowe z precyzją 280 pikseli, aby uzyskać wygenerowaną kompleksową mapę rozmieszczenia, podkreślającą obecność inwazyjnej flory w granicach badanego obszaru. Przedstaw wybrane wyniki wizualnie. Wykonuj proste rozszerzanie danych za pomocą funkcji losowego przycinania o zmienionym rozmiarze i losowego odwracania w poziomie, aby rozszerzyć zestaw obrazów i wyodrębnić sześć wskaźników wegetacji.Aby zapewnić precyzyjne oszacowanie biomasy roślin inwazyjnych, należy utworzyć model regresji najbliższego sąsiada KNN, używając danych wyjściowych i wyodrębnionych wskaźników wegetacji jako danych wejściowych. Mikania micrantha, można było zaobserwować wspinającą się na szczyt rośliny ozdobionej białymi kwiatami, pozostałe rośliny, a także droga i towarzyszące jej elementy, były jednolicie przedstawione w tle. Model rozpoznał czerwoną część jako mikania micrantha, wykazując solidną detekcję w złożonym tle.Analiza regresji wykazała wysoką wydajność predykcyjną z wartością R kwadrat wynoszącą 0,62 i RMSE wynoszącą 10,56 grama na metr kwadratowy. Model zwiększył dokładność szacowania biomasy rumianku, a mapa rozmieszczenia przestrzennego skutecznie uchwyciła rozkład biomasy rumianku.

computer-vision-based-biomass-estimation-for-invasive-plants

Research

JoVE Journal

Engineering

Inżynieria

Pokazujemy użyteczność danych teledetekcyjnych i nowo opracowanego oprogramowania do wspomaganego modelowania siedlisk (SAHM) w przewidywaniu występowania gatunków inwazyjnych w krajobrazie. Zespół modeli predykcyjnych stworzył bardzo dokładne mapy inwazji tamaryszku (Tamarix spp.) w południowo-wschodnim Kolorado w USA, po ocenie za pomocą późniejszych walidacji w terenie.

Integracja teledetekcji z modelami rozmieszczenia gatunków; Mapowanie inwazji tamaryszków za pomocą oprogramowania do wspomaganego modelowania siedlisk (SAHM)

Oparty na oprogramowaniu system analizy obrazów stanowi alternatywną metodę badania morfologii gatunków rozłogowych i kłączowych. Protokół ten umożliwia pomiar długości i średnicy rozłogów i kłączy i może być stosowany do próbek z dużą ilością biomasy i do wielu różnych gatunków.

Pomiar rozłogów i kłączy traw darniowych za pomocą cyfrowego systemu analizy obrazu

Zaprojektowaliśmy protokół fenotypowania oparty na obrazach, aby określić morfologiczne i fizjologiczne reakcje na pojedyncze i skojarzone zabiegi upałów, suszy i podlewania. Podejście to umożliwiło identyfikację wczesnych, późnych i regeneracyjnych reakcji na poziomie całego zakładu, w szczególności części nadziemnych, a także podkreśliło konieczność stosowania wielu czujników obrazowania.

Wysokoprzepustowe fenotypowanie oparte na obrazie w celu określenia morfologicznych i fizjologicznych odpowiedzi na pojedyncze i połączone stresy u ziemniaka

Przedstawiono metodę taniego obrazowania roślin do pomiaru fenotypów, wraz z najlepszymi praktykami przechwytywania obrazów i potokiem analizy obrazu do ilościowego określania cech roślin. Metody te zastosowano do pomiaru fenotypów kukurydzy (Zea mays) w warunkach upałów, suszy i połączonego stresu abiotycznego.

Obrazowanie i analiza w celu ilościowego określenia fenotypów stresu abiotycznego kukurydzy (Zea mays)

Najnowsze osiągnięcia w zdalnie sterowanych systemach powietrznych (RPAS) umożliwiają rozdzielczość poniżej metra, co jest idealne do monitorowania odbudowy lasów. Integracja sztucznej inteligencji (AI) umożliwia głębsze wglądy z dużych, zdalnie badanych zbiorów danych. Protokół ten poprawia monitoring, wspierając bardziej efektywną ocenę i zarządzanie terenami leśnymi po zakłóceniach.

Zbieranie i przetwarzanie danych zdalnie wykrywanych za pomocą dronów do monitorowania odbudowy lasów

Niniejszy manuskrypt opisuje niedestrukcyjne, wysokoprzepustowe podejście do autonomicznych pomiarów terenowych o wydajności kwantowej fotosystemu II, odbiciu spektralnym oraz architekturze roślin, umożliwiając wielkoskalowe fenotypowanie fotosyntezy korony w próbach polowych agronomicznych i hodowlanych.

Wysokoprzepustowe, terenowe badania wydajności fotosyntetycznej roślin uprawnych z wykorzystaniem autonomicznego robota

Protokół ten przedstawia porównawczą metodę oceny cech szparkowych i naskórkowych u dwóch odrębnych gatunków za pomocą peelingów naskórnych, technik oczyszczania oraz analizy obrazowej wspomaganej przez AI. Celem jest umożliwienie wysokoprzepustowej, powtarzalnej ilościowej identyfikacji struktur komórkowych leżących u podstaw funkcji szparków szparkowych dla zastosowań rolniczych oraz szerokich badań roślinnych.

Charakteryzacja cech szparków szparkowych i naskórka za pomocą peelingów, oczyszczania oraz analizy obrazów opartej na AI

Referencyjna technika interferometryczna, która ma na celu usuwanie niepożądanych zakłóceń laserowych dla nanodetekcji, jest wykorzystywana do sondowania mikrownęk czynnikowych o ultra wysokiej jakości. Instrukcje dotyczące montażu, konfiguracji i pozyskiwania danych są dostarczane wraz z procesem pomiaru w celu określenia współczynnika jakości gniazda.

Implementacja interferometru referencyjnego do nanodetekcji

Solidna konstrukcja elektrostatycznych siłowników MEMS z obrzeżami pola skutkuje z natury niskimi warunkami tłumienia filmu ściskającego i długimi czasami stabilizacji podczas wykonywania operacji przełączania przy użyciu konwencjonalnego polaryzacji krokowej. Poprawa czasu przełączania w czasie rzeczywistym dzięki przebiegom dynamicznym prądu stałego skraca czas ustalania siłowników MEMS z polem obwódkowym podczas przechodzenia między stanami góra-dół i dół-dół-górę.

Metoda dynamicznego polaryzowania prądu stałego w czasie rzeczywistym w celu poprawy czasu przełączania w mocno niedotłumionych elektrostatycznych siłownikach MEMS z polem obrzeżnym

Dokładne modelowanie struktur nanohelisowych jest ważne dla predykcyjnych badań symulacyjnych prowadzących do nowatorskich zastosowań nanotechnologii. Obecnie pakiety oprogramowania i kody są ograniczone w tworzeniu atomistycznych modeli spiralnych. Prezentujemy dwie procedury przeznaczone do tworzenia atomistycznych modeli nanohelisowych do symulacji, oraz interfejs graficzny do usprawnienia badań poprzez wizualizację.

Skalowalne nanohelisy do badań predykcyjnych i ulepszonej wizualizacji 3D

Poznaj metodę szacowania biomasy roślin inwazyjnych z wykorzystaniem zdalnego teledetekcji UAV i sztucznej inteligencji. To podejście zwiększa dokładność oceny biomasy i mapowania przestrzennego, wspierając systemy wczesnego ostrzegania.

Szacowanie biomasy w oparciu o wizję komputerową dla roślin inwazyjnych

Przeglądaj więcej filmów