Hyperspektral billedbehandling er blevet et værdifuldt redskab indenfor medicinsk diagnostik, især i forhold til latent tuberkulose (LTBI) infektion. Teknologien muliggør en detaljeret analyse af væv ved at opfange et bredt spektrum af lysreflektioner, hvilket gør det muligt at identificere subtile ændringer i vævsstrukturer, som er svære at opdage med konventionelle metoder.

En af de mest lovende anvendelser af hyperspektral billedbehandling er til tidlig opdagelse af latent tuberkuloseinfektion, hvor metoden anvendes til at analysere hudreaktioner og vævsmønstre, der kan indikere tilstedeværelsen af infektionen. Hyperspektral billedbehandling kan således fungere som et supplement til den traditionelle tuberkulin hudtest, som ofte har begrænsninger i både følsomhed og specifitet.

I en undersøgelse af Moayedi-Nia et al. (2019) blev en mHealth-løsning udviklet, hvor mobilenheder kunne integrere billedbehandlingsteknologi til præcist at vurdere tuberkulinprøver. Dette system kunne både indsamle billeder af testens erythema og analysere dem ved hjælp af avanceret software. Resultatet var en præcis vurdering af hudreaktionen, hvilket muliggjorde en mere effektiv og hurtigt tilgængelig diagnose af latent tuberkulose.

Brugen af hyperspektral billedbehandling kan især være nyttig i ressourcestærke områder, hvor adgangen til avancerede diagnostiske faciliteter er begrænset. Hyperspektrale kameraer kan anvendes til at udføre billedoptagelser, der analyserer de biologiske markører for tuberkulose, og dette kan i høj grad forbedre diagnosen på et tidligt stadie. En af de store fordele ved hyperspektral billedbehandling er, at den muliggør en ikke-invasiv evaluering af væv og dermed minimerer risikoen for komplikationer ved traditionel biopsi eller andre invasive metoder.

Derudover åbner hyperspektral billedbehandling op for muligheder i realtidsmonitorering, hvilket kan være afgørende i kontrol med smitsomme sygdomme som tuberkulose. Ved at integrere hyperspektral billedbehandling i eksisterende sundhedssystemer kan man både forbedre diagnosticeringens hastighed og nøjagtighed, samtidig med at man reducerer belastningen på sundhedsvæsenerne.

Hyperspektral billedbehandling kan også anvendes til at analysere andre sygdomme, herunder kræft og hudlidelser. Det giver en mere præcis vurdering af væv, hvilket er kritisk, når det gælder sygdomme som melanom, hvor tidlig opdagelse kan betyde forskellen mellem liv og død. En relevant anvendelse af metoden er i vurdering af lentigo maligna melanom, som blev undersøgt af Neittaanmäki et al. (2017). Deres forskning demonstrerede, hvordan hyperspektral billedbehandling kunne afsløre dermale invasioner, som kan være svære at opdage ved konventionelle visuelle inspektioner.

Foruden anvendelsen i tuberkulose og kræftdiagnostik, kan hyperspektral billedbehandling også benyttes til at overvåge miljøforandringer og støtte landbrugssektoren. Det er et værktøj, der kan hjælpe med at spore sygdomsudbrud, samt analysere jordens og planternes sundhed ved at måle spektrale refleksioner, der afslører tegn på sygdom eller mangel på næringsstoffer.

Men som med enhver teknologisk innovation er det vigtigt at forstå de potentielle udfordringer og begrænsninger ved hyperspektral billedbehandling. Selvom teknologien er lovende, kræver den omfattende dataanalyse og ofte avanceret software for at udtrække de relevante informationer fra de indsamlede billeder. Der er også økonomiske og praktiske barrierer, der kan hæmme udbredelsen af teknologien i lav- og mellemindkomstlande. I den sammenhæng er det vigtigt, at der fortsat investeres i forskning, der kan optimere både billedbehandlingsmetoder og analysesoftware, så teknologien bliver mere tilgængelig og effektiv.

Endelig er det væsentligt at påpege, at hyperspektral billedbehandling ikke nødvendigvis skal erstatte eksisterende diagnostiske metoder, men snarere fungere som et supplement, der kan forbedre pålideligheden og hastigheden af diagnoser. Teknologiens effektivitet afhænger i høj grad af korrekt kalibrering og implementering af systemet, samt hvordan dataene anvendes i klinisk praksis. Derfor er træning af sundhedspersonale og udviklingen af standardiserede protokoller for billedbehandling og -analyse essentielt for at maksimere metodens anvendelighed.

Hvordan hyperspektral billedbehandling og dyb læring kan opdage tidlige tegn på vandstress i planter

I analysen af tidlig stressdetektion blev de resterende ni planter fra hver gruppe anvendt på hver eksperimentel dag. Hver spektrum i dette datasæt blev underkastet inferensprocessen ved hjælp af den trænede model, og forholdet af estimerede sunde spektra (WW-klasse) for hver plantekategori blev beregnet baseret på inferensresultaterne. Dette forhold af WW-spektra fungerede som en baselineindikator til at overvåge udviklingen af de observerede planter gennem den ni-dages tidsserieperiode. Hypotesen var, at når planterne oplevede stress, ville andelen af sunde spektra falde. For at vurdere signifikante forskelle blev en envej-ANOVA udført. Formålet med at bruge envej-ANOVA er at afgøre, om data fra flere grupper af en faktor har et fælles gennemsnit eller ej. Det betyder, at envej-ANOVA muliggør kvantificering af, om forskellige grupper af en uafhængig variabel har forskellige virkninger på den afhængige variabel. Derfor blev envej-ANOVA med et signifikansniveau på 0,05 testet for nulhypotesen, at der ikke var nogen signifikant forskel i forholdet af sunde spektra mellem de to plantekategorier. Den alternative hypotese blev defineret som at angive, at der var en signifikant forskel i forholdet af sunde spektra mellem de to plantekategorier. Hvis p-værdien, der blev opnået fra ANOVA, var mindre end 0,05, blev nulhypotesen afvist. Matlab-funktionen "anova1" blev brugt til at beregne p-værdien af envej-ANOVA for sampledataene. Funktionen beregner p-værdien ved hjælp af den kumulative fordelingsfunktion. P-værdien for F-statistikken bør være mindre end signifikansniveauet, så nulhypotesen kan afvises ved 0,05 signifikansniveau.

Resultaterne af træning og validering af den foreslåede 1D-CNN-model er illustreret i figur 2.6, der viser nøjagtighed og tab procent for både træning og validering. Den endelige valideringsresultat præsenteres i en forvirringsmatrix, hvor nøjagtighed, præcision, følsomhed og specificitet kan udledes. Træningsdataene viser, at læringen konvergerer efter 400 iterationer og forbliver stabil indtil de sidste iterationer. Fra forvirringsmatrixen viser resultatet på valideringssættet, at 6146 spektra korrekt blev klassificeret som PD-gruppen, hvilket svarer til 33,8 %, mens 9195 spektra korrekt blev klassificeret som WW-gruppen, hvilket svarer til 50,5 % af de samlede 18.212 spektra. På den anden side blev 1681 af spektrene forkert klassificeret som PD, hvilket svarer til 9,2 % af de samlede 18.212 spektra. Tilsvarende blev 1187 af spektrene forkert klassificeret som WW, hvilket svarer til 6,5 % af alle data. Ud af 7830 PD-spektra-forudsigelser var 78,5 % korrekte og 21,5 % forkerte. Ud af 10.382 WW-spektra-forudsigelser var 88,6 % korrekte og 11,4 % forkerte. Fra forvirringsmatrixen blev den opnåede nøjagtighed 84,3 %, præcisionen var 78,5 %, følsomheden var 83,8 %, og specificiteten var 84,5 %. Som sammenligning blev modellen sammenlignet med implementeringen af spektra uden at udføre PCA-transformationen. For denne sammenligning forblev arkitekturen af 1D-CNN den samme som præsenteret i figur 2.4. Figur 2.7 viser resultaterne af denne implementering. Det observeres, at præstationen er meget lavere end den for PCA-implementeringen, med en opnået nøjagtighed på 78,1 %, præcision på 72 %, følsomhed på 77,2 % og specificitet på 78,8 %.

Den trænede 1D-CNN-model blev derefter brugt til at inferere de resterende planter (9 planter fra hver WW- og PD-gruppe) til tidlig stressdetektionsanalyse. Resultaterne af denne analyse er illustreret i figur 2.8, som viser plottet af WW-pixelproportionen for både sunde og stressede planter over ni dage. I figur 2.8a afslører implementeringen af 1D-CNN på PCA-transformerede spektra et tydeligt mønster, hvor en signifikant afvigelse i fejllinjerne opstår fra dag 3 og frem. Dette kvantificeres ved p-værdien fra ANOVA-testen, der bliver mindre end signifikansniveauet på 0,05 fra dag 3 og frem. Det er interessant at bemærke, at der i PD-gruppen var et markant fald i andelen af sunde pixels fra dag 1 til dag 9 på tværs af alle modeller. Bemærkelsesværdigt var de restaurative virkninger af genvanding, der blev tydelige med en stigning i andelen af sunde pixels i PD-gruppen efter dag 7. I modsætning hertil udviste WW-gruppen en relativt konstant andel af sunde pixels gennem alle dage.

Sammenlignet med 1D-CNN-implementeringen på spektra uden PCA-transformation (figur 2.8b) er den signifikante afvigelse i fejllinjerne en smule forsinket. Selvom det samme udviklingsmønster observeres for både WW- og PD-grupperne, opstår en signifikant afvigelse først fra dag 4. Dette viser, at den foreslåede metode til PCA-transformation på spektra kan forbedre detektion af stresssymptomer på et meget tidligt stadie. Disse resultater viser også lovende muligheder for at bruge hyperspektral billedbehandling med dyb læringsteknikker til at opdage tidlige tegn på stress i planter, selv før synlige symptomer viser sig.

En vigtig pointe er, at den anvendte metode ikke kun påviser tilstedeværelsen af vandstress, men også gør det muligt at detektere stress tidligt, når symptomerne stadig er skjulte for det blotte øje. Denne evne til at identificere stress på et tidligt stadie er afgørende for landbrug, hvor tidlig intervention kan forhindre yderligere skader på afgrøderne og dermed øge udbyttet og kvaliteten af produktionen.

Derudover er det vigtigt at understrege, at mens metoden har vist sig effektiv til at detektere vandstress, giver den ikke direkte indsigt i de specifikke spektrale bånd, der er ansvarlige for de fysiologiske egenskaber, der påvirker stressfaktorerne. Fremtidig forskning bør fokusere på at øge modellens fortolkbarhed ved at korrelere spektralbåndene med de underliggende fysiologiske parametre, hvilket vil give dybere indsigt i mekanismerne bag plantens stressrespons. Yderligere bør den foreslåede metode testes på forskellige plantearter og under varierende miljøbetingelser for at vurdere modellens generaliserbarhed og robusthed. At udvide datasættet og inkludere diverse stressfaktorer kan også forbedre modellens pålidelighed og anvendelighed i praktiske landbrugsindstillinger.

Hvordan forbedrer STRNN-modeller klassificeringen af hyperspektrale data?

F1-scoren er en central metrik til vurdering og forbedring af ydeevnen hos hyperspektrale klassifikationsmodeller. Den kombinerer præcision og recall i en enkelt værdi, som giver et mere balanceret billede af modellens præstation, især i tilfælde af ubalancerede datasæt. Den beregnes som 2 × (Precision × Recall) / (Precision + Recall), hvilket gør den særligt velegnet i fjernmåling, hvor falske positiver og falske negativer kan have stor betydning for den endelige analyse.

Visualisering af feature-maps i forskellige lag af netværket giver mulighed for at identificere, hvilke spektrale mønstre netværket reagerer på. Ved hjælp af metoder som aktiveringsmaksimering og klasseaktiveringskort (CAM) kan man lokalisere de inputregioner, der mest bidrager til en given klassifikation. Dette øger transparensen i beslutningstagningen og gør det muligt at validere modellens adfærd mere systematisk. CAM udregnes som en vægtet sum af feature-kortene i de dybe lag: CAM₍c₎ = ∑ α₍c,l₎Zₗ, hvor α₍c,l₎ er vægten for det l-te lag med hensyn til klasse c.

STRNN-modellen (Spatial-Temporal Residual Neural Network) bygger videre på ResNet-arkitekturen og tilbyder betydelige fordele i forhold til konventionelle neurale netværk, når det gælder klassificering af komplekse hyperspektrale og multispektrale data. Kombinationen af konvolutionelle og tætte lag i STRNN tillader dyb feature-ekstraktion, og restforbindelser muliggør træning af meget dybe netværk uden at miste gradientinformation.

Det effektive gradientflow i STRNN skyldes shortcut-forbindelserne, som tillader gradienten at passere uden om flere lag. Dette reducerer problemer med forsvindende eller eksploderende gradienter, som ellers kan gøre træning af dybe netværk ustabil eller ineffektiv. Matematisk udtrykkes dette ved, at input xₗ i et residualblok transformeres via F(xₗ), og output er summen xₗ₊₁ = xₗ + F(xₗ). Under baglænspropagering fordeles gradienten direkte til både xₗ og F(xₗ), hvilket sikrer stabilitet og hurtigere konvergens.

STRNN’s evne til at udtrække hierarkiske og fine spektrale mønstre er afgørende fo

Hvordan dyb læring og hybride metoder forvandler plantehelse i landbruget

I de seneste år har dyb læring revolutioneret landbruget, især i forhold til præcis diagnose og forståelse af forskellige plantepathosystemer. Dette har været muligt ved at integrere biologi med avanceret teknologi, hvilket har givet os mulighed for at tackle plantepestproblemer på en langt mere effektiv måde. I 2022 blev der gjort betydelige fremskridt ved at anvende Convolutional Neural Networks (CNN) sammen med UAV'er (ubemandede luftfartøjer), hvilket førte til en imponerende præcision på 95% i studiet af kålens patosystem. Samtidig anvendte man VNIR og DAS-ELISA til at analysere vinstokke, hvilket resulterede i en præcision på 75%. Lignende forskning på banan-Black Sigatoka opnåede en nøjagtighed på 85%, mens studier på majs-curl også, ved hjælp af CNN, nåede en præcision på 97,29%.

En anden markant udvikling fandt sted med analysen af Kartoffel-Bakteriel sygdom, som blev udført ved hjælp af både CNN og UAV-teknologi, hvilket resulterede i en imponerende præcision på 93%. Denne type forskning har været med til at forme fremtidens forståelse af plantesygdomme, da vi nu kan få detaljerede og præcise analyser af plantepathosystemer, som tidligere var udenfor rækkevidde. Ved at kombinere dyb læringsteknikker som 1D-CNN, 2D-CNN og 3D-CNN, opnåede man i 2023 en forbløffende præcision på 99,70% i studiet af kartoffel- senblødning. I samme periode blev også studier af hvede- rust og hvede-blight gennemført med henholdsvis 99,50% og 98% præcision.

Brugen af hybride metoder har også vist sig at være effektiv i landbrugsdiagnostik. I 2020 blev metoder som Support Vector Machine (SVM), K-Nearest Neighbors (KNN), CNN og Discrete Wavelet Transform (DWT) kombineret for at opnå en præcision på 86%. Et andet eksempel er en analyse af systemet Grape-Faliar, hvor man anvendte CNN, SVM, NVIR og SWIR-teknikker, hvilket resulterede i en præcision på 92%. For tomatcurl blev der benyttet UAV og STDA, som gav en nøjagtighed på 90,50%.

I 2021 og 2022 blev yderligere anvendelse af hybride teknikker og kombinationer som PLSR, SVM, PCA og PCA-DWT bemærket. I disse år blev en bred vifte af teknologier integreret til at analysere et væld af plantepatogen systemer, hvilket førte til betydelige forbedringer i nøjagtighed og præcision. F.eks. nåede det fælles studie af hvede-hoved-blight en præcision på 90% gennem Continuous Wavelet Transform (CWT).

Denne udvikling af dyb læring og hybride metoder i plantehelse viser tydeligt, hvordan teknologi og biologi arbejder sammen for at forbedre landbrugets evne til at reagere på sygdomme og skadedyr. Kombinationen af maskinlæring, fjerndetektion, hyperspektral billedbehandling og UAV-teknologi giver en banebrydende måde at overvåge og forudse sygdomme i afgrøder. Denne udvikling åbner for nye muligheder for både præcis overvågning og effektiv sygdomsbekæmpelse.

Vigtigheden af at forstå de underliggende teknikker og metodologier er central for landmænd og forskere. Selvom de teknologiske fremskridt er imponerende, er det vigtigt at erkende, at disse metoder ikke kun kræver teknologisk ekspertise, men også en forståelse af de biologiske processer, der driver sygdommene. Derfor bør den fortsatte forskning ikke kun fokusere på at forfine de teknologiske værktøjer, men også på at udvikle en dybere forståelse af de patogen-systemer, der forårsager plantekrankheder. Dette vil sikre, at vi ikke blot opnår teknologisk præcision, men også en helhedsforståelse, som kan føre til mere bæredygtige og effektive løsninger i landbrugspraksis.