Detectar aviat quins mosquits porten el virus del dengue és clau per a la vigilància epidemiològica, però els mètodes habituals -dissecció o PCR- són lents i destrueixen l'exemplar analitzat. Fer-ho a partir només del comportament de vol captat en vídeo és tècnicament difícil perquè els mosquits es mouen de manera ràpida i irregular, i el fons, la il·luminació i les ombres compliquen extreure'n trets fiables.
Danial Sharifrazi i el seu equip han presentat el 13 d'agost, en un preprint a arXiv, un mètode en tres etapes: primer, un detector YOLO aïlla la regió del mosquit respecte del fons de cada fotograma; després, els trets visuals d'aquests fotogrames s'alineen amb descripcions textuals amb sentit biològic dins d'un espai d'incrustació compartit, a l'estil dels models CLIP; finalment, el model multimodal s'ajusta mitjançant aprenentatge contrastiu supervisat en totes dues direccions. El sistema classifica fotogrames de vol de mosquits Aedes no infectats i infectats amb el serotip DENV2 del virus del dengue, i n'agrega els resultats per obtenir una classificació completa a nivell de vídeo. Els resultats: una precisió del 98,54% i una sensibilitat del 99,91% a nivell de fotograma. Un estudi d'ablació mostra que tant l'ajust fi com les representacions de tipus CLIP són imprescindibles, mentre que els prompts textuals aporten alineament semàntic però no milloren la precisió respecte d'un sistema només visual.
La rellevància del treball és que estén els models de visió i llenguatge, habitualment aplicats a la medicina humana, cap a la vigilància entomològica de malalties transmeses per vectors: un mètode de detecció no invasiu i basat en vídeo podria escalar la vigilància sense haver de disseccionar ni matar cada exemplar capturat, dins d'una tendència més àmplia d'aplicar models fundacionals multimodals a problemes de biologia.
Es tracta d'un preprint encara sense revisió per parells, centrat en un únic serotip (DENV2) i en un conjunt de dades concret, de manera que no és clar com es comportaria el mètode en condicions de camp reals, amb altres espècies d'Aedes o amb altres serotips i soques del virus. Tampoc hi ha encara dades sobre el desplegament real sobre el terreny ni sobre el cost o el rendiment del sistema en comparació amb els mètodes de laboratori actuals.