Kodėl rankinis stebėjimas negali sekti šiuolaikinių elgsenos tyrimų
Rankinis stebėjimas turi ilgą istoriją elgsenos tyrime ir vis dar turi savo vietą. Išmokyta stebėtoja gali pastebėti subtilias pozas, socialinį bendravimą ir kontekstą, kurių gali nepastebėti kamera. Tačiau rankinis vertinimas turi ribotumą. Žmogus gali stebėti tik kelias žuvis vienu metu, o vertinimas vyksta realiuoju laiku arba peržiūrint vaizdo įrašus. Prasideda nuovargis. Du stebėtojai gali vienodą elgseną įvertinti skirtingai. Greiti įvykiai, pvz., staigus atsakas, trunkantis mažesnę nei sekundės dalį, lengvai praleidžiami visiškai.
Šiuolaikiniai zebrušų elgsenos tyrimai dažnai apima kelis akvariumus, kelias koncentracijas ir kelis laiko momentus. Duomenų kiekis viršija tai, ką bet kuri komanda gali įvertinti ranka. Zebrušų elgsenos analizės sistema, paremta vaizdo sekimu, pakeičia šią lygtį. Ji gali vienu metu įrašyti daugybę arenų ir išgauti judėjimo duomenis be stebėtojo, kuris stebėtų kiekvieną sekundę. Tai nešalina žmogaus vertinimo poreikio, tačiau perkėlia žmogaus vaidmenį iš įvertinimo į priežiūrą.
Ką vaizdo sekimas iš tikrųjų užfiksuoja, o kitos metodikos praleidžia
Vaizdo sekimas ne tik nustato, ar žuvis judėjo. Jis nustato, kaip, kada ir kur ji judėjo. Sekimo procesas gali apskaičiuoti bendrą atstumą, vidutinį greitį, maksimalų greitį, posūkio kampą, pagreitį ir laiką, praleistą nustatytose zonose. Jis gali aptikti sustojimą („freezing“), t. y. nejudėjimo laikotarpį, kuris dažnai rodo baimę ar stresą. Jis gali matuoti laiką nuo stimuliatoriaus pateikimo iki žuvies įėjimo į naują zoną.
Šie rodikliai yra svarbūs, nes skirtingos elgsenos gali atrodyti panašios iš pirmo žvilgsnio. Žuvis, plaukianti siaurais ratukais, ir žuvis, plaukianti tiesia linija, gali įveikti tą patį atstumą, tačiau jų pagrindinė elgsena skiriasi. Žuvis, kuri daugiausia laikosi akvariumo dugno srityje, gali jausti nerimą, gali būti šalta arba tiesiog mėgti šią zoną. Vaizdo sekimas suteikia neapdorotus duomenis, kuriais tyrėjas gali tikrinti šiuos aiškinimus.
-
Bendra įveikta atstumo ir vidutinis greitis.
-
Maksimalus greitis ir pagreitis per staigius judesius.
-
Praleistas laikas tam tikrose zonose, pvz., viršutinėje ar apatinėje.
-
Nejudėjimo trukmė ir dažnumas.
-
Laukimo laikas iki reakcijos į šviesos ar garso dirginimą.
Kadrų dažnio ir raiškos vaidmuo elgsenos duomenų kokybėje
Vaizdo sekimas yra tik tiek geras, kiek geras yra vaizdas, kurį jis analizuoja. Kadras per sekundę nustato, kiek greito įvykio pavyksta užfiksuoti. Staigaus reakcijos, trunkančios mažesnę nei sekundės dalį, įvykis žemo kadro dažnio režimu gali būti sumažintas iki vieno kadro, todėl neįmanoma tiksliai išmatuoti reakcijos laiko ar jos intensyvumo. Aukštesnis kadro dažnis užfiksuoja daugiau detalių, tačiau tuo pačiu sukuria didesnius failus ir reikalauja daugiau apdorojimo galios.
Raiška svarbi kitomis priežastimis. Danio rerio lervos yra mažos, todėl jų padėtis turi būti tiksliai sekiama. Jei raiška per žema, sekimo algoritmas gali supainioti žuvį su jos atspindžiu arba šiukšle. Jei raiška labai aukšta, failai tampa dideli, o analizė sulėtėja. Tinkamas balansas priklauso nuo areno dydžio, žuvies amžiaus ir tiriamos elgsenos.
| Aspektas | Rankinis stebėjimas | Vaizdo sekimo sistema |
|---|---|---|
| Duomenų kiekis | Apribojama stebėtojo laiku | Aukštas, nuolatinis |
| Greiti įvykiai | Lengvai praleidžiami | Užfiksuojami, jei kadro dažnis pakankamas |
| Tikslumas | Priklauso nuo stebėtojo | Priklauso nuo algoritmo, bet nuoseklus |
| Daugiašakių arenų našumas | Žemi | Aukšta |
| Žmogaus vaidmuo | Žymėjimas | Priežiūra ir patvirtinimas |
Kaip sekimo algoritmai iš pikselių sukuria elgsenos rodiklius
Vaizdo sekimo programinė įranga nėra magija. Ji naudoja žingsnių seką, kad kiekviename kadre rastų žuvis ir susietų tas aptikimo vietas į seką. Fono atskyrimas pašalina statines vaizdo dalis. Slenkstinis metodas arba kraštų aptikimas izoliuoja žuvis. Sekimo algoritmas, pvz., centroidų sekimas ar Kalmano filtras, prognozuoja, kur žuvys bus kitame kadre, ir priskiria jas aptiktoms pozicijoms.
Kelioms žuvims priskirti identifikavimo algoritmai, pvz., Vengrų metodas, padeda išlaikyti tapatybes, kai žuvys kerta viena kitos kelią. Išvaizdos požymiai, pvz., uodegos forma ar spalvų raštas, gali pagerinti tapatybės išlaikymą. Rezultatas – koordinačių rinkinys laike, kuris vėliau konvertuojamas į anksčiau aprašytus elgsenos rodiklius. Kiekvienas žingsnis turi parametrų, kurie veikia rezultatą, o šie parametrai turi būti dokumentuoti ir išlaikyti nuoseklūs visuose eksperimentuose.
Lauko pavyzdys, kuriame vaizdo sekimo sistema užfiksavo paslėptą efektą
Rytų Kinijoje esančioje universiteto neurofarmakologijos grupė tyrinėjo junginį, kuris gali turėti rūpestį mažinančių savybių. Pirmajame tyrime buvo naudojama rankomis vertinama šviesios ir tamsios dėžutės metodika. Rezultatai buvo nenuoseklūs. Kai kurie rezervuarai aiškiai rodydavo polinkį į tamsiąją pusę, kiti – ne. Stebėtojai nesutapo sprendžiant ribinius atvejus, o efekto dydis buvo mažas.
Grupė perėjo prie žebrafish elgsenos analizės sistemos su vaizdo sekimo funkcija. Sistema nuolat įrašydavo kiekvieną areną ir automatiškai apskaičiuodavo zonų pagrindu grindžiamus rodiklius. Duomenys parodė, kad junginys iš tikrųjų sumažino tamsos pasirinkimą, tačiau taip pat sumažino bendrą judėjimą. Rankomis vertinant rezultatus šis antrasis poveikis buvo praleistas, nes stebėtojai koncentruodavosi tik į zonų pasirinkimą. Sekimo duomenys padėjo matyti abu poveikius. Grupė pritaikė analizę taip, kad būtų atskirtos abi elgsenos. Junginys vis dar buvo įdomus, tačiau jo aiškinimas pasikeitė. Be vaizdo sekimo sistemos judėjimo poveikis galėjo likti visiškai nepastebėtas.
Ten, kur vaizdo sekimo galimybės ribotos ir žmogaus vertinimas vis dar svarbus
Vaizdo sekimas yra įrankis, o ne visiškas sprendimas. Jis gali susipainioti dėl atspindžių, burbulų ir šiukšlių. Jis gali prarasti žuvį, jei kontrastas silpnas arba jei žuvis paliečia areno kraštą. Jis negali nustatyti, ar žuvis atrodo sveika, ar bakas turi problemų, kurios veikia elgesį. Šiuos vertinimus vis dar turi atlikti žmogus.
Taip pat yra pernelyg didelio pasitikėjimo skaičiais rizika. Sekimo sistema gali sugeneruoti didelę matavimų lentelę, bet ne visi jie yra reikšmingi. Teisingų matavimų pasirinkimas ir jų aiškinimas kontekste – tai įgūdis, kuris formuojasi su patirtimi. Sistema pateikia duomenis. Tyrėjas suteikia jiems prasmę.
Hunter Lab (Hunter) gamina žebrafish tyrimų įrangą, atidžiai stebėdama vaizdo sekimo stabilumą. Gamybos ir kokybės kontrolės procesai užtikrina nuoseklumą, kuris būtinas ilgalaikiams elgsenos tyrimams. Laboratorijoms, kurios remiasi vaizdo sekimu elgsenos analizei, toks tikslus gamybos požiūris yra viena iš pagrindinių sąlygų.