Почему ручная калибровка замедляет развертывание отслеживания траекторий
Настройка системы отслеживания траекторий зебрафиш раньше была ритуалом терпения. В арену помещали сетку или линейку, камера делала снимок, а кто-то вручную измерял расстояния в пикселях. Этот этап калибровки преобразует координаты изображения в реальные единицы измерения, и его приходится повторять каждый раз при перемещении камеры, смене объектива или переустановке арены. В лаборатории, где проводят несколько поведенческих тестов, такие накладные расходы быстро накапливаются.
Ручная калибровка имеет ещё одну проблему: она зависит от человека, который её выполняет. Два техника могут обводить одну и ту же сетку и получать слегка разное количество пикселей. Разница может быть небольшой, но в ходе многонедельного исследования это способно сместить видимое расстояние, пройденное личинкой. Для системы отслеживания траекторий данио-рерио такой дрейф сводит на нет всю цель отслеживания.
Автоматическая калибровка не устраняет все человеческие действия, но исключает рутинные операции. Это особенно важно при развёртывании системы на нескольких установках или когда базовая лаборатория должна быстро запустить работу новых пользователей без длительного периода обучения.
Что на самом деле делает автоматическая калибровка под капотом
По своей сути автоматическая калибровка — это процедура компьютерного зрения, которая обнаруживает известный шаблон и вычисляет соответствие между пикселями камеры и физическими единицами измерения. Шаблоном может быть шахматная доска, сетка точек или напечатанный маркер с известными размерами. Программное обеспечение находит углы или центры, сопоставляет их с известной геометрией и вычисляет преобразование.
-
Камера делает одно или несколько изображений калибровочной мишени.
-
Алгоритм обнаруживает опорные точки, например, пересечения линий шахматной доски.
-
Эти точки сопоставляются с их известными положениями на мишени.
-
Вычисляется гомография или аффинное преобразование.
-
Преобразование сохраняется и применяется к каждому последующему кадру.
Математика здесь не экзотическая. Оценка гомографии уже десятилетиями является стандартной задачей в области компьютерного зрения. Автоматическая калибровка особенно полезна при работе с данио-рерио, поскольку она корректно обрабатывает неидеальные условия: компенсирует небольшой наклон камеры, искажения объектива и перспективные искажения, если цель не расположена строго параллельно сенсору. Ручные методы зачастую игнорируют эти эффекты, поскольку их ручная коррекция трудоёмка.
Компромисс между точностью ручной и автоматической калибровки
Распространённое предположение заключается в том, что автоматическая калибровка менее точна по сравнению с тщательным ручным измерением. Это не всегда так. Хорошо спроектированная автоматическая процедура способна обеспечить точность определения углов ниже одного пикселя — что зачастую превосходит точность, достижимую при ручном указании линий сетки человеком. Реальное различие проявляется в воспроизводимости и скорости.
| Метод калибровки | Типичная воспроизводимость | Время на одну настройку | Необходимый навык |
|---|---|---|---|
| Ручное обведение сетки | Умеренный | Несколько минут | Высокий |
| Ручной измерительный инструмент с программной поддержкой | Умеренный | Несколько минут | Умеренный |
| Автоматическая калибровка по шахматной доске | Высокий | Менее одной минуты | Низкая |
| Автоматический с коррекцией искажений | Высокий | Менее одной минуты | Низкая |
Компромисс заключается не в точности, а в прозрачности. При ручной калибровке пользователь чётко видит, какие именно точки были измерены. Автоматическая процедура представляет собой «чёрный ящик», если программное обеспечение не отображает обнаруженные признаки. Для регламентированных работ такая видимость имеет решающее значение. Для рутинного поведенческого скрининга обычно приоритет имеют скорость и воспроизводимость.
Полевой пример, в котором автоматическая калибровка позволила ускорить развёртывание
В университетской лаборатории в восточном Китае расширяли установку для фенотипирования поведения — с одной до четырёх систем. Первую систему калибровали вручную; на это у обученного студента уходило около десяти минут на одну сессию. При ежедневной работе четырёх систем подготовка перед началом любого эксперимента занимала почти час.
Команда перешла на систему отслеживания траекторий зебrafish с встроенной автоматической калибровкой. Шахматная мишень размещалась в каждой арене, делался снимок, и программа вычисляла масштаб. Время настройки сократилось до нескольких минут на каждую установку. Что ещё важнее — значения калибровки оказались согласованными между установками, что упростило объединение данных из разных экспериментальных конфигураций.
Переход прошёл не без изъянов. На одной из установок камера была слегка наклонена; автоматическая процедура скорректировала это, однако требовалась визуальная проверка, чтобы убедиться: края арены по-прежнему совпадают с областью отслеживания. Эта проверка вошла в ежедневную рутину. Тем не менее, сэкономленное время осталось значительным.
Случаи, когда автоматическая калибровка всё ещё требует человеческого контроля
Автоматическая калибровка не освобождает от необходимости внимательно следить за настройкой. Некоторые ошибки по-прежнему возможны.
-
Калибровочная мишень может быть напечатана в неправильном масштабе, если параметры принтера заданы неверно.
-
Отражающая поверхность или неравномерное освещение могут нарушить распознавание признаков.
-
Цель может быть расположена на другой высоте по сравнению с животными, что приводит к возникновению параллаксной ошибки.
-
Искажение объектива можно скорректировать, но только в том случае, если модель искажения соответствует реальному объективу.
Быстрая проверка на разумность помогает. После калибровки известное расстояние в арене можно измерить линейкой и сравнить с показанием программного обеспечения. Если значения расходятся более чем на небольшой допуск, значит, что-то пошло не так. Такая проверка занимает секунды и выявляет наиболее распространённые режимы сбоев.
Автоматическая калибровка также предполагает, что камера не перемещается во время эксперимента. Столкновение установки или ослабление крепления могут сделать калибровку недействительной в ходе исследования. Некоторые системы включают опорный маркер в арене для обнаружения дрейфа, однако эта функция не является универсальной.
Как компания Hunter Lab решает задачу калибровки на практике
Hunter Lab (Hunter) создаёт оборудование для лабораторий, работающих с данио-рерио, уделяя особое внимание рабочему процессу вокруг аппаратного обеспечения. Производство и контроль качества обеспечивают стабильность, необходимую при развёртывании нескольких установок. Для лабораторий, которым нужно запустить сразу несколько систем отслеживания без длительной процедуры калибровки, автоматическая калибровка — это одна из тех функций, которая незаметно упрощает повседневную работу.