DLC - это разработка быстро растущего коллектива девелоперов, изначально вокруг такого чувака Alexander Mathis (постдок из Harward University и скоро завлаб в EPFL (École polytechnique fédérale de Lausanne), Швейцария) и его жены Mackenzie W. Mathis, но теперь проект набирает скорость и популярность, подключаются новые разработчики.
Демонстрация возможностей DLC для автоматического определения "скелета" позы множества животных (при этом вы обучаете программу делать определение поз только на некоторых фреймах - модель далее применима на множестве новых видео с разным количеством животных, при несколько разных углах и освещениях)
дрозофила откладывает яйца
Презентация проекта от создателя
На рынке есть некоторые, даже иногда довольно развитые, программные продукты для video tracking, но они с проприетарными и негибкими алгоритмами, часто заточенными на pre-clinical trials и популярных модели типа крысы/мыши. К тому же они неоправданно дорогие (например EthoVision от Noldus начинается от 5000 фунтов и далее по 1,5k за допмодули). Эта платформа бесплатна и чрезвычайно гибкая. Есть GUI, но в целом нужно или очень желательно знать Python. Конечно есть проблемы и документация вызывает вопросы, но в целом всё круто.
Мы планируем использовать DLC для нескольких проектов для оцифровки сложных поведенческих актов у животных (например, сканирующие движения головы у птиц в изменяющемся магнитном поле или расположение разных частей тела у рыб в одиночку или в стае).
Проект с документацией, тьюториалами выложен на Github, а еще есть отдельный информационно-демонстрационный сайт.
Комментарии (0)