Πώς ένα σύστημα παρακολούθησης τροχιάς ζεβραψαριών απεικονίζει τις διαδρομές κολύμβησης σε τρισδιάστατο χώρο;
AΣύστημα παρακολούθησης τροχιών ζεβραφίς μετατρέπει συγχρονισμένες παρατηρήσεις ενός κολυμβώντος ζώου σε μια χρονοσειρά διαδρομής με συντεταγμένες x, y και z. Το αποτέλεσμα δεν είναι απλώς μια γραμμή σχεδιασμένη πάνω σε βίντεο. Είναι ένα ανακατασκευασμένο χωρικό αρχείο που μπορεί να αποκαλύψει πού κινήθηκε ένα ψάρι, πόσο γρήγορα άλλαξε κατεύθυνση και εάν η προτίμηση βάθους ή περιοχής άλλαξε κατά τη διάρκεια ενός πειράματος. Για ερευνητές που μελετούν συμπεριφορά, νευροδραστικές ενώσεις ή περιβαλλοντικές επιδράσεις, αυτή η διάκριση έχει σημασία: μια δισδιάστατη διαδρομή μπορεί να κρύβει κατακόρυφη κίνηση που αλλάζει τη βιολογική ερμηνεία.
Ως καθημερινός χρήστης ρουτινών απεικόνισης ζεβράψαρων, βρίσκω χρήσιμο να διαχωρίζω την εργασία σε τέσσερα συνδεδεμένα καθήκοντα: να ορίσω ένα αξιόπιστο όγκο παρατήρησης, να αποκτήσω συγχρονισμένες προβολές, να εντοπίσω το ίδιο ψάρι σε κάθε προβολή και να μετατρέψω τα ταιριασμένα σημεία εικόνας σε χωρικές συντεταγμένες. Ένα Σύστημα παρακολούθησης τροχιών ζεβραφίς πρέπει να εκτελεί όλα τα τέσσερα καθήκοντα με συνέπεια προτού οι μετρήσεις που ακολουθούν έχουν αξία για σύγκριση.
Γιατί η τρισδιάστατη χαρτογράφηση αλλάζει την ερμηνεία των διαδρομών κολύμβησης
Μία κάμερα από πάνω μπορεί να μετρήσει μία προβαλλόμενη διαδρομή σε ένα ενυδρείο, αλλά συμπιέζει το βάθος. Δύο ψάρια μπορούν να φαίνονται σαν να διασταυρώνονται στην εικόνα, ακόμα και αν πέρασαν σε διαφορετικά βάθη. Ομοίως, ένα ψάρι που φαίνεται να σταματά για λίγο σε μία άποψη μπορεί να κολυμπά προς ή μακριά από την κάμερα. τρισδιάστατη χαρτογράφηση διατηρεί αυτή την απουσιάζουσα διάσταση, επιτρέποντας την εξέταση μίας τροχιάς ως κίνησης μέσα σε ένα βαθμονομημένο όγκο, αντί για ένα επίπεδο σχέδιο.
Αυτό είναι ιδιαίτερα σχετικό όταν το ερώτημα αφορά χωρικός προτίμηση, κατακόρυφη εξερεύνηση, περιστροφή, αποφυγή ή κοινωνική απόσταση. Η κατάλληλη προσέγγιση εξαρτάται σε μεγάλο βαθμό από τη γεωμετρία του ενυδρείου, το στάδιο ανάπτυξης, τον φωτισμό και τον αριθμό των ψαριών· δεν υπάρχει μία μοναδική διαμόρφωση ανακατασκευής που λειτουργεί με τον ίδιο ακριβώς τρόπο σε κάθε εργαστήριο. Ωστόσο, η βασική λογική παραμένει σταθερή.
1. Το σύστημα καθιερώνει πρώτα ένα κοινό τρισδιάστατο σύστημα συντεταγμένων
Πριν αρχίσει μια καταγραφή, πρέπει να γίνει βαθμονόμηση των καμερών και της αρένας. Η βαθμονόμηση εκτιμά πώς κάθε κάμερα «βλέπει» τον κόσμο: τη θέση και τον προσανατολισμό της σε σχέση με το δοχείο, τη συμπεριφορά της εστιακής απόστασης και την οπτική παραμόρφωση. Ένας στόχος βαθμονόμησης με γνωστά σημεία τοποθετείται εντός ή στον σχετικό όγκο απεικόνισης. Το λογισμικό χρησιμοποιεί αυτά τα γνωστά σημεία για να συσχετίσει μια τοποθεσία pixel σε κάθε προοπτική με ένα κοινό φυσικό σύστημα συντεταγμένων.
Αυτό το βήμα είναι εύκολο να υποτιμηθεί. Εάν το πλαίσιο συντεταγμένων είναι ασταθές, μια μετρηθείσα μετατόπιση βάθους μπορεί να αντικατοπτρίζει οπτική παραμόρφωση φακού, αλλαγή της θέσης της κάμερας ή διαθλαστικά φαινόμενα στο όριο νερού–αέρα, αντί για πραγματική συμπεριφορά. Στην πράξη, είναι σκόπιμο να καταγράφεται η διαμόρφωση βαθμονόμησης, το επίπεδο νερού, οι ρυθμίσεις των καμερών και η τοποθέτηση της αρένας μαζί με κάθε πρωτόκολλο. Το βήμα εγκατάστασης που κανείς δεν αναφέρει είναι συχνά αυτό που διασφαλίζει τη συγκρισιμότητα μεταξύ διαδοχικών καταγραφών.
2. Οι συγχρονισμένες κάμερες καταγράφουν συμπληρωματικές 2Δ παρατηρήσεις
AΣύστημα παρακολούθησης τροχιών ζεβραφίς συνήθως χρησιμοποιεί δύο ή περισσότερες προβολές της ίδιας περιοχής. Διατάξεις στερεοσκοπικής ή πολυκάμερας λήψης παρέχουν διαφορετικές προοπτικές ταυτόχρονα. Η ενεργοποίηση μέσω υλικού (hardware triggering) ή μια προσεκτικά επαληθευμένη μέθοδος χρονισμού διασφαλίζει ότι το πλαίσιο 250 από μία κάμερα αντιστοιχεί στο πλαίσιο 250 από την άλλη. Χωρίς συγχρονισμό, γρήγορες στροφές μπορούν να συνδεθούν με λανθασμένη θέση σε άλλη προβολή και να παράγουν απίθανη 3D εκτίμηση.
Κάθε εικόνα αρχίζει ακόμη ως 2D μέτρηση. Το λογισμικό παρακολούθησης απομονώνει το ψάρι από το φόντο χρησιμοποιώντας αντίθεση, τμηματοποίηση ή εκπαιδευμένο ανιχνευτή, και στη συνέχεια εκτιμά ένα αντιπροσωπευτικό σημείο, όπως το κέντρο του σώματος, το κεφάλι ή το κέντρο βάρους. Το επιλεγμένο σημείο πρέπει να συμφωνεί με το βιολογικό ερώτημα. Το κέντρο βάρους μπορεί να είναι επαρκές για τη μέτρηση αποστάσεων και της καταληψιμότητας ζωνών, ενώ η προσανατολισμός του κεφαλιού μπορεί να είναι πιο ενημερωτικός για πλοήγηση μελέτες ερεθίσματος-αντίδρασης.
3. Η συσχέτιση από διαφορετικές οπτικές γωνίες αναγνωρίζει την ίδια παρατήρηση
Το επόμενο καθήκον είναι η αντιστοίχιση: να αποφασιστεί ποια ανίχνευση στην κάμερα Α ανήκει σε ποια ανίχνευση στην κάμερα Β. Με ένα ψάρι σε μια απλή εγκατάσταση, αυτό μπορεί να είναι απλό. Με ομάδες, ανακλάσεις, επικαλυπτόμενα σώματα ή παρεμπόδιση, γίνεται πολύ πιο δύσκολο. Οι καλές διαδικασίες περιορίζουν τις δυνατές αντιστοιχίες χρησιμοποιώντας τη βαθμονομημένη γεωμετρία των καμερών, την εμφάνιση του σώματος και τη συνέχεια από γειτονικά πλαίσια.
Η χρονική συνέχεια είναι σημαντική εδώ. Ένα ψάρι δεν μπορεί ρεαλιστικά να «πηδήσει» από τη μία άκρη του ενυδρείου στην άλλη μεταξύ διαδοχικών πλαισίων, οπότε η λογική παρακολούθησης μπορεί να σηματοδοτήσει μια προτεινόμενη αντιστοίχιση που θα οδηγούσε σε αδύνατη ταχύτητα ή στροφή. Ωστόσο, δεν πρέπει να εξαφανίζει σιωπηρά γνήσιες γρήγορες κινήσεις. Μια ορθή ροή εργασίας σηματοδοτεί τμήματα χαμηλής εμπιστοσύνης για επανεξέταση, αντί να θεωρεί κάθε εξομαλυμένη γραμμή ως αντικειμενική αλήθεια.
4. Η τριγωνοποίηση μετατρέπει τα αντιστοιχισμένα εικονοστοιχεία σε τρισδιάστατες θέσεις
Μόλις το σύστημα εντοπίσει μια αντίστοιχη 2Δ θέση σε συγχρονισμένες προβολές, προβάλλει μια ακτίνα θέασης από κάθε κάμερα διαμέσου αυτού του σημείου της εικόνας. Η εκτιμώμενη 3Δ θέση είναι το σημείο όπου αυτές οι ακτίνες τέμνονται, ή το σημείο όπου πλησιάζουν περισσότερο όταν ο θόρυβος των μετρήσεων απαγορεύει ακριβή τομή. Η επανάληψη αυτού του υπολογισμού καρέ προς καρέ παράγει μια ακολουθία συντεταγμένων: x για την πλευρική θέση, y για τον άλλο οριζόντιο άξονα και z για το βάθος.
Αυτό είναι ο πυρήνας του τρισδιάστατη χαρτογράφηση . Μια πρόσφατη δημοσιευμένη μελέτη παρακολούθησης 3Δ ζεβραψαριών ανέφερε τη χρήση 36.980 εικόνων για την ανακατασκευή συντεταγμένων 18.490 ζεβραψαριών· αυτό το παράδειγμα δείχνει την κλίμακα που επιτρέπει η αυτοματοποιημένη ανάλυση, όχι ένα καθολικό πρότυπο για κάθε εργαστήριο. Το χρήσιμο αποτέλεσμα είναι μια σειρά συντεταγμένων συνδεδεμένη με το χρόνο, με τη διατήρηση πληροφοριών εμπιστοσύνης όπου αυτό είναι δυνατό.
5. Το φιλτράρισμα δημιουργεί μια ερμηνεύσιμη διαδρομή χωρίς να επινοεί συμπεριφορά
Οι ακατέργαστες συντεταγμένες περιέχουν συχνά μικρές διακυμάνσεις από καρέ σε καρέ. Ένα Σύστημα παρακολούθησης τροχιών ζεβραφίς μπορεί να χρησιμοποιήσει φιλτράρισμα ή εκτίμηση κατάστασης για να μειώσει αυτόν τον θόρυβο και να «γεφυρώσει» σύντομες παραλείψεις ανίχνευσης. Το κλειδί είναι η συγκράτηση. Υπερβολικό ομαλοποίηση μπορεί να μετατρέψει αιχμηρές, βιολογικά σημαντικές στροφές σε απαλές καμπύλες· επιθετικό «γέμισμα κενών» μπορεί να δημιουργήσει διαδρομές κολύμβησης που το ψάρι δεν διένυσε.
Ξεκινήσαμε αντιμετωπίζοντας μια οπτικά ομαλή τροχιά ως στόχο, αλλά το πιο χρήσιμο μέτρο ήταν η εμπιστοσύνη στην ανακατασκευή μαζί με την τροχιά. Ελέγξτε εκ νέου τα προβαλλόμενα 3Δ σημεία στα αρχικά βίντεο, εξετάστε τα υπόλοιπα σφάλματα από τις οπτικές γωνίες των καμερών και συγκρίνετε τα συνοπτικά μέτρα με τις μη φιλτραρισμένες παρατηρήσεις. Αν μια φαινόμενη προτίμηση βάθους εξαφανιστεί όταν αποκλειστούν τα τμήματα χαμηλής εμπιστοσύνης, πρέπει να αναφερθεί ως αβέβαιη, αντί να προωθηθεί ως εύρημα.
Από συντεταγμένες σε μέτρα συμπεριφοράς
Μετά την ανακατασκευή, η σειρά συντεταγμένων μπορεί να υποστηρίζει μετρήσεις όπως το συνολικό μήκος διαδρομής, η στιγμιαία ταχύτητα, η επιτάχυνση, η κατακόρυφη κατάληψη, ο χρόνος σε καθορισμένες ζώνες, η γωνιακή ταχύτητα, η απόσταση προς τον πλησιέστερο γείτονα και τα μοτίβα μετάβασης. Αυτές οι έξοδοι απαντούν σε διαφορετικά ερωτήματα. Η συνολική απόσταση περιγράφει τη δραστηριότητα· η κατακόρυφη κατάληψη μπορεί να περιγράφει την κατακόρυφη πλοήγηση · ο ρυθμός στροφής μπορεί να αποκαλύψει ελιγμούς ή αντίδραση σε ερέθισμα. Ένα σαφές σχέδιο ανάλυσης καθορίζει αυτές τις μετρήσεις πριν από τη σύγκριση ομάδων.
Ο έλεγχος του περιβάλλοντος αποτελεί μέρος της ερμηνείας. Η θερμοκρασία, η φωτεινότητα, η δόνηση, η ποιότητα του νερού και η χειριστικότητα μπορούν να τροποποιήσουν διαδρομές κολύμβησης ανεξάρτητα από τη θεραπεία που μελετάται. Το ίδιο ισχύει και για μια μετατοπισμένη κάμερα ή μια αλλαγμένη στάθμη νερού. Μια πρακτική προσέγγιση είναι να συνδυάζεται τα δεδομένα συντεταγμένων με μεταδεδομένα λήψης και συγκρίσιμες συνεδρίες ελέγχου.
Ένας πρακτικός έλεγχος επικύρωσης
- Επιβεβαιώστε τη συγχρονισμένη λειτουργία της κάμερας με ένα επαναλαμβανόμενο τεστ πριν από τη συλλογή δεδομένων συμπεριφοράς.
- Ρυθμίστε τη βαθμονόμηση εντός του σχετικού όγκου δεξαμενής και επαναλάβετε τη βαθμονόμηση μετά από αλλαγές στο υλικό ή στο επίπεδο νερού.
- Επαληθεύστε αντιπροσωπευτικά σημεία σε 3 διαστάσεις επικαλύπτοντας τις προβολές σε κάθε προοπτική κάμερας.
- Ελέγξτε διαστήματα χαμηλής εμπιστοσύνης, παρεμβολές, ανακλάσεις και ανταλλαγές ταυτότητας, αντί να υποθέτετε ότι το λογισμικό τα έχει επιλύσει ορθώς.
- Προκαθορίστε τις χωρικός ζώνες και τα μέτρα αποτελέσματος που χρησιμοποιούνται για τη σύγκριση.
- Αποθηκεύστε το ακατέργαστο βίντεο, τα αρχεία βαθμονόμησης, τις εξαγωγές συντεταγμένων και τις ρυθμίσεις επεξεργασίας, ώστε το αποτέλεσμα να μπορεί να ελεγχθεί.
Τι μπορεί να σας πει μια διαδρομή σε 3 διαστάσεις
AΣύστημα παρακολούθησης τροχιών ζεβραφίς απεικονίζει τη συμπεριφορά συνδέοντας με προσοχή βαθμονομημένες εικόνες με συγχρονισμένες ανιχνεύσεις, ταιριάσματα μεταξύ προοπτικών, τριγωνοποιημένες συντεταγμένες και διαφανείς ελέγχους ποιότητας. Δεν αντικαθιστά τον πειραματικό σχεδιασμό· καθιστά αντίθετα την καταγραφή της κίνησης πληρέστερη. Όταν η βαθμονόμηση, η επιθεώρηση της εμπιστοσύνης και οι ελεγχόμενες περιβαλλοντικές συνθήκες αντιμετωπίζονται ως αναπόσπαστο μέρος του πειράματος, οι τραχείες διαδρομές σε 3 διαστάσεις μπορούν να διακρίνουν μια πραγματική αλλαγή στη πλοήγηση χρήση του χώρου ή του βάθους από ένα τεχνητό αποτέλεσμα της απεικόνισης.
Για μια στέρεη μελέτη, ξεκινήστε με το βιολογικό ερώτημα, επιλέξτε το σημείο που θα παρακολουθηθεί, επαληθεύστε την ανακατασκευή στο πραγματικό περιβάλλον και, στη συνέχεια, υπολογίστε μόνο τα μεγέθη που απαντούν σε αυτό το ερώτημα. Αυτή η σειρά διατηρεί τα 3D δεδομένα διαδρομής χρήσιμα, αναπαράγωγα και βασισμένα σε όσα πραγματικά παρατήρησαν οι κάμερες.