RESEARCH
Peer reviewed scientific video journal
Video encyclopedia of advanced research methods
Visualizing science through experiment videos
EDUCATION
Video textbooks for undergraduate courses
Visual demonstrations of key scientific experiments
BUSINESS
Video textbooks for business education
OTHERS
Interactive video based quizzes for formative assessments
Products
RESEARCH
JoVE Journal
Peer reviewed scientific video journal
JoVE Encyclopedia of Experiments
Video encyclopedia of advanced research methods
EDUCATION
JoVE Core
Video textbooks for undergraduates
JoVE Science Education
Visual demonstrations of key scientific experiments
JoVE Lab Manual
Videos of experiments for undergraduate lab courses
BUSINESS
JoVE Business
Video textbooks for business education
Solutions
Language
German
Menu
Menu
Menu
Menu
A subscription to JoVE is required to view this content. Sign in or start your free trial.
Research Article
Yanping Chen1, Adena Why2, Gustavo Batista3, Agenor Mafra-Neto4, Eamonn Keogh1
1Department of Computer Science and Engineering,University of California, Riverside, 2Department of Entomology,University of California, Riverside, 3Institute of Mathematics and Computer Sciences,University of São Paulo - USP, 4ISCA Technologies
Please note that some of the translations on this page are AI generated. Click here for the English version.
Erratum Notice
Important: There has been an erratum issued for this article. View Erratum Notice
Retraction Notice
The article Assisted Selection of Biomarkers by Linear Discriminant Analysis Effect Size (LEfSe) in Microbiome Data (10.3791/61715) has been retracted by the journal upon the authors' request due to a conflict regarding the data and methodology. View Retraction Notice
Wir haben vorgeschlagen, ein System, das preiswert, nicht-invasive Pseudo-akustisch-optische Sensoren verwendet, um automatisch und genau zu erfassen, zu zählen und zu klassifizieren fliegenden Insekten basierend auf ihren fliegenden Sound.
Eine preiswerte, nicht-invasive System, das genau zu klassifizieren könnte fliegenden Insekten würden wichtige Implikationen für die entomologische Forschung haben, und damit für die Entwicklung von vielen nützlichen Anwendungen in Vektor-und Schädlingsbekämpfung für medizinische und landwirtschaftliche Entomologie. Angesichts dieser, haben die letzten 60 Jahre viele Forschungsanstrengungen dieser Aufgabe gewidmet gesehen. Bis heute ist jedoch keine dieser Forschung hat einen bleibenden Einfluss hatte. In dieser Arbeit zeigen wir, dass Pseudo-akustisch-optische Sensoren überlegen Daten zu erzeugen; dass zusätzliche Funktionen, sowohl intrinsische als auch extrinsische, um das Flugverhalten der Insekten, kann der Angreifer ausnutzen, um Insekten Klassifizierung zu verbessern; dass ein Bayes-Klassifizierung Ansatz erlaubt es, Klassifikationsmodelle, die sehr robust zu Überanpassung sind effizient zu lernen, und eine allgemeine Klassifizierung Rahmen erlaubt es, einfach zu integrieren beliebige Anzahl von Funktionen. Wir zeigen die Ergebnisse mit großen Experimente, die in den Schatten stellen alle bisherigen Werke combiNed, wie durch die Anzahl der Insekten und der Anzahl der betrachteten Spezies gemessen.
Die Idee der automatischen Klassifizierung von Insekten mit dem Neben Klang ihrer Flug stammt aus den frühen Tagen der Computer und handelsüblichen Audio-Aufnahmegeräte 1. Allerdings hat kaum Fortschritte auf dieses Problem in den folgenden Jahrzehnten gemacht worden. Der mangelnde Fortschritt in diesem Streben kann auf mehrere Faktoren zurückgeführt werden verwandten.
Erstens hat das Fehlen einer wirksamen Sensoren Datenerfassung erschwert. Die meisten Versuche, die Daten zu sammeln haben akustische Mikrofone 2-5 verwendet. Solche Vorrichtungen sind sehr empfindlich gegenüber Rauschen und Umgebungsrauschen Wind in der Umgebung, was zu sehr spärlich und Daten geringer Qualität.
Zweitens Compoundierung diese Datenqualitätsprobleme ist die Tatsache, dass viele Forscher haben versucht, sehr kompliziert Klassifikationsmodelle, insbesondere neuronale Netze 6-8 zu lernen. Der Versuch, komplizierte Klassifikationsmodelle zu lernen, mit gerade einmal zehn Beispiele,ist ein Rezept für Überanpassung.
Drittens, die schwer zu erhalten, Daten dazu geführt, dass viele Forscher als 300 Fällen 9 oder weniger versucht, Klassifikationsmodelle mit sehr begrenzte Daten zu bauen, da nur wenige. Es ist jedoch bekannt, dass für den Aufbau eine genaue Klassifizierungsmodelle, besser 10-13 mehr Daten.
Diese Arbeit richtet sich an alle drei Fragen. Optische (und nicht akustisch) Sensoren können verwendet werden, um die Aufnahme "Sound" der Insektenflug von Meter entfernt, mit kompletter Invarianz gegen Windgeräusche und Umgebungsgeräusche. Diese Sensoren haben die Aufnahme von Millionen von markierten Trainingsinstanzen, weit mehr Daten als alle bisherigen Bemühungen kombiniert erlaubt, und so dazu beitragen, die Überanpassung geplagt hat, dass vorherige Forschungsanstrengungen zu vermeiden. Eine prinzipielle Verfahren wird unten gezeigt, dass ermöglicht den Einbau von zusätzlichen Informationen in die Klassifikationsmodell. Diese zusätzlichen Informationen können als alltägliche und als seineinfach zu erhalten, als die Zeit der Tage, doch erzeugen erhebliche Gewinne in der Genauigkeit des Modells. Schließlich wird gezeigt, dass die enormen Mengen an Daten, die wir gesammelt erlauben es uns, die Vorteile von "The unvernünftig Wirksamkeit der Daten" 10, um einfache, genaue und robuste Klassifikatoren zu produzieren.
Zusammenfassend hat Fluginsekten Klassifizierung über die zweifelhafte Ansprüche im Forschungslabor erstellt verschoben und ist nun bereit für die realen Einsatz. Die Sensoren und Software in dieser Arbeit vorgestellt werden Forscher weltweit bieten robuste Werkzeuge, um ihre Forschung zu beschleunigen.
1. Insektenkolonie und Aufzucht
2. Notieren Fliegen Sounds in Versuchskammern
3. Sensordatenverarbeitung und Erkennung von Sounds Produziert von fliegenden Insekten
4. Insekten Klassifizierung
Zwei Experimente werden hier vorgestellt. Für beide Experimente wurden die verwendeten Daten zufällig aus einer Datenmenge, die über 100.000 Objekte enthält abgetastet.
Das erste Experiment zeigt die Fähigkeit der vorgeschlagenen Klassifizierer genau klassifizieren verschiedene Arten / Geschlechtern der Insekten. Da die Klassifikationsgenauigkeit hängt von den Insekten klassifiziert werden, wird eine einzige absolute Wert für Klassifikationsgenauigkeit nicht geben dem Leser eine gute Intuition über die Leistung des Systems. Statt, eher als die Genauigkeit der Berichterstattung Klassifiziergeräts auf einem festen Satz von Insekten, die für die Einstufung wurde auf Datensätzen mit einer inkrementell wachsenden Zahl von Arten angewendet und erhöht somit Einstufung Schwierigkeit.
Der Datensatz begann mit nur 2 Arten von Insekten; dann bei jedem Schritt eine weitere Spezies (oder ein einzelnes Geschlecht eines geschlechtsdimorphischen Arten) wurde zugegeben und der Klassifikator wurde verwendet, um die erhöhte klassifizierenAnzahl der Arten (der neue Datensatz). Insgesamt zehn Klassen der Insekten (verschiedene Geschlechter von der gleichen Spezies zu zählen als unterschiedliche Klassen) wurden als mit 5.000 Exemplaren in jeder Klasse.
Der Klassifikator verwendet sowohl Insekten-Sound (Frequenzspektrum) und Time-of-Achsenabschnitt für die Einstufung. Tabelle 1 zeigt die Klassifikationsgenauigkeit gemessen bei jedem Schritt und der entsprechenden Klasse bei diesem Schritt aufgenommen.
Nach Tabelle 1, die für die Einstufung erzielt mehr als 96% Genauigkeit bei der Klassifizierung nicht mehr als 5 Arten von Insekten, deutlich höher als die Ausfallrate von 20% Genauigkeit. Auch wenn die Anzahl der Klassen betrachtet steigt auf 10, ist die Klassifikationsgenauigkeit nie niedriger als 79%, noch einmal deutlich höher als die Ausfallrate von 10%. Beachten Sie, dass die zehn Klassen sind nicht leicht zu trennen, auch durch menschliche Inspektion. Unter den zehn Arten, acht von ihnen sind Mücken, Witzh davon sechs aus der gleichen Gattung.
Der zweite Versuch ist, zu zeigen, wie genau das System Sex fliegenden Insekten, insbesondere auf männliche Ae. Aegypti Moskitos von den Weibchen zu unterscheiden. Für den ersten Teil des Versuchs an, dass der "Fehlklassifizierungskosten" für die Fehlklassifizierung Männer als Frauen ist die gleiche wie die Kosten der Fehlklassifizierung von Frauen als Männer. Mit dieser Annahme sind die Einstufungsergebnisse in Tabelle 2.Ich gezeigt. Die Klassifikationsgenauigkeit Sex Ae. Aegypti ist etwa 99,4%.
Für den zweiten Teil des Experiments liegen die Kosten nicht asymmetrisch, dh Fehlklassifizierung von Frauen als Männer viel teurer als umgekehrt. Unter dieser Annahme wurde die Entscheidungsschwelle des Klassifikators geändert, um die Anzahl von Fehlklassifikationen hohen Kosten zu reduzieren. Mit der Schwelle richtig eingestellt ist, die Klassifizierungsergebnisse in Tabelle 2.II erreicht wurden. Von 2.000 Insekten in dem Experiment wurden zweiundzwanzig Männer, Frauen und Null falsch klassifiziert.

Abbildung 1. (I) Eine der Versuchskäfige verwendet, um die Daten zu sammeln. (II) Eine logische Version des Sensor-Setup mit den Komponenten kommentiert. Bitte klicken Sie hier, um eine größere Version dieser Figur zu sehen.

Figur 2 (i) ein Beispiel eines 1 sec Audioclips, die einen "fliegenden Insekten sound" durch den Sensor erzeugt wird. Der Ton wurde von einer weiblichen Cx. Stigmatosoma produziert. Die Insect Ton wird in rot / fett hervorgehoben. (II) Das "Insekt Sound", die durch das Zentrieren des Insektensignal und Polsterung mit 0s anderswo gereinigt wurde und in einen 1-sec langen Audioclip gespeichert. (III) Das Frequenzspektrum des das Insekt Sound, mit diskreten Fourier-Transformation erhalten. Bitte klicken Sie hier, um eine größere Version dieser Figur zu sehen.

Abbildung 3. Ein Bayes-Netzwerk, das eine einzelne Funktion zur Klassifizierung verwendet.

Abbildung 4. Ein Bayes-Netzwerk, das zwei unabhängige Funktionen für classificat verwendet Ion

Abbildung 5. Die zirkadianen Rhythmen der Cx. stigmatosoma (weiblich), Cx. tarsalis (männlich) und Ae. aegypti (weiblich), lernte auf Beobachtungen von dem Sensor, die über 1 Monat Laufzeit gesammelt wurden, erzeugt wird. Bitte klicken Sie hier, um eine größere Version dieser Figur zu sehen.

Abbildung 6. Ein Bayes-Netzwerk, das drei unabhängige Funktionen zur Klassifikation verwendet.
g "/>
Abbildung 7. Die Annahmen der geographischen Verteilung der einzelnen Insektenarten und Sensorpositionen in der Simulation, um die Wirksamkeit der Verwendung von Standort-of-Intercept-Funktion in der Klassifizierung demonstrieren. Bitte klicken Sie hier, um eine größere Version dieser Figur zu sehen.

Abbildung 8. Die allgemeine Bayes-Netzwerk, das n Funktionen für die Klassifizierung, wobei n eine positive ganze Zahl verwendet. Bitte klicken Sie hier, um eine größere Version dieser Figur zu sehen.
| Schritt | Species hinzugekommen | Klassifikationsgenauigkeit | Schritt | Arten hinzugekommen | Klassifikationsgenauigkeit | |
| 1 | Ae. aegypti ♂ | N / A | 6 | Cx. quinquefasciatus ♂ | 92.69% | |
| 2 | Musca domestica | 98.99% | 7 | Cx. stigmatosoma ♀ | 89.66% | |
| 3 | Ae. aegypti ♀ | 98.27% | 8 | Cx. tarsalis ♂ | 83.54% | |
| 4 | Cx. stigmatosoma ♂ | 97.31% | 9 | Cx. quinquefasciatus ♀ | 81.04% | |
| 5 | <em> Cx. tarsalis ♀ | 96.10% | 10 | Drosophila simulans | 79.44% |
Tabelle 1 Klassifizierung Genauigkeit mit zunehmender Anzahl von Klassen.
| Vorhergesagt Klasse | Vorhergesagt Klasse | |||||||
| Ich (Symmetric Kosten) | weiblich | männlich | II (Asymmetric Kosten) | weiblich | männlich | |||
| Eigentliche Klasse | weiblich | 993 | 7 | Eigentliche Klasse | weiblich | 1000 | 0 | |
| männlich | 5995 | männlich | 22 | 978 |
Tabelle 2 (I) Die Verwirrung Matrix für Diskriminierung aufgrund des Geschlechts von Ae. Aegypti Mücken mit der Entscheidungsschwelle für Frauen bei 0,5 (dh gleiche Kostenübernahme) gesetzt. (II) Die Verwechslungsmatrix des Geschlechts die gleichen Mücken, mit der Entscheidung Schwelle für Frauen bei 0,1 eingestellt.
Die Autoren erklären, dass sie keine finanziellen Interessen konkurrieren.
Wir haben vorgeschlagen, ein System, das preiswert, nicht-invasive Pseudo-akustisch-optische Sensoren verwendet, um automatisch und genau zu erfassen, zu zählen und zu klassifizieren fliegenden Insekten basierend auf ihren fliegenden Sound.
Wir möchten die Vodafone Americas Foundation, der Bill-und-Melinda-Gates-Stiftung, und der São Paulo Research Foundation (FAPESP) für die Förderung dieses Forschungs danken. Wir möchten auch die vielen Mitglieder der Fakultät von der Abteilung für Entomologie an der Universität von Kalifornien, Riverside, danke ich für ihren Rat an diesem Projekt.
| Audiorecorder: ICD-PX312 | Sony | 4-267-065-11(2) | Mit einem zusätzlichen microSD-Speicher von 8 GB |
| Insectary | Lee's Aquarium & Produkte für Haustiere. | 20088 HerpHaven®, Großes Rechteck | 14 1/2" lang x 8 3/4" breit x 9 3/4" hoch. Modifiziert, um Insekten zu beherbergen. |
| Laserliniengenerator, 650 nm (rot) | Apinex (www.apinex.com) | LN60-650 | 5 mW. Hierbei handelt es sich um einen Laser mit geringer Leistung, ähnlich dem Laserpointer eines Lehrers |
| Fotodioden-Array | VISHAY SEMICONDUCTOR TEFD4300 PIN-FOTODIODE, 650 NM, 20 Grad, T1 | TEFD4300 | Wir haben ein benutzerdefiniertes Array von 15 dieser Fotodioden hergestellt, die parallel geschaltet sind. |
| Integrierte Analog-Digital-Wandler-Schaltung | Sonderanfertigung in unserem Labor | Wir haben diesen Artikel selbst hergestellt, aber ein leicht erhältliches kommerzielles Produkt, Gino PCF8591 AD/DA-Wandler, bietet die gleiche Funktionalität. |