Эксперты МФТИ и международных исследовательских учреждений разработали инновационную технологию стереозрения Un-ViTAStereo. Она позволит роботам и автономным автомобилям воспринимать окружающий мир в объеме и без слепых зон.
Исследователи подчеркивают, что данная разработка определяет расстояние до объектов без применения дорогостоящих лидаров и ручной разметки, что делает ее более доступной и универсальной. В частности, Un-ViTAStereo обучается с использованием модели Depth Anything V2, которая оценивает относительную глубину объектов на основе одного изображения, распознавая тени, перспективу и перекрытия. Это позволяет алгоритму выбирать только те предсказания, которые соответствуют указаниям «наставника».
Работа технологии осуществляется в три этапа: проверка каждого пикселя на соответствие указаниям, поиск зеленых соседей для красных точек и создание контуров с применением функции сглаживания диспаратности. В результате доля грубых ошибок на тестировании беспилотников KITTI 2015 снизилась до 5%, что на 23% меньше опасных ошибок в определении расстояний до объектов.
В МФТИ акцентируют внимание, что текущая версия Un-ViTAStereo – это только начало. Разработчики намерены создать самообучающуюся нейросеть, способную адаптироваться к различным условиям, а также использовать точные измерения лидаров для повышения точности.
Ранее редакция IT Speaker сообщала, что Китай запустил экспериментальный спутник Shiyan-33, предназначенный для исследования космической среды. Это один из самых современных аппаратов на данный момент.
В ChatGPT добавили визуализацию для изучения математики и физики
