Уникальная база содержит более 600 тысяч изображений, из которых вручную размечено более 20 тысяч, полученных при сложных погодных условиях, а также данные c лидара, позволяющие создавать в реальном времени 3D-карту пространства, окружающего автомобиль. Датасет выложен в свободном доступе под открытой лицензией CC BY 4.0.
«Зимний» датасет собран командой разработчиков лаборатории интеллектуальной космической робототехники Сколковского института науки и технологий (Сколтех) для международного конкурса в области программного обеспечения для беспилотного транспорта Ice Vision. Его уникальной особенностью является фокус на обучении беспилотного транспорта работать в условиях российской зимы: во время гололеда, мокрого снега, при ограниченной и недостаточной видимости, встречном солнечном свете.
«Наличие качественных и всесторонних датасетов является одним из краеугольных камней в деле создания современных систем технического зрения. К сожалению, существующие открытые датасеты в области беспилотного автотранспорта содержат относительно мало данных собранных в зимних условиях, тем самым лишая разработчиков и исследователей возможности проверки своих систем в достаточно сложных и переменчивых условиях», – подчеркнул Артём Павлов, аспирант Сколтеха, руководитель проекта Open Skoltech Car, использованного для сбора датасета Ice Vision.
В базе собраны сжатые без потерь изображения, формирующие видеопоследовательности, снятые с частотой 30 Гц на российских дорогах в зимнее время года в разных погодных условиях и в разное время суток. Запись видеоданных велась при помощи двух цветных камер с «глобальным затвором» и разрешением 5 мегапикселей. Использование камер с «глобальным затвором» позволяет предотвращать искажения при съемке движущихся объектов или на большой скорости, что в частности важно для алгоритмов визуальной локализации и картографирования.
В датасете также содержатся данные лазерного сканирования местности с помощью трехмерного 64-х канального лидара, способного измерять 2,2 млн точек в секунду, и данные приёмников Спутниковых Систем Навигации. Собранный массив информации дает возможность создать систему, которая точно определяет местоположение автомобиля и «видит» окружающее пространство в 3D, что позволяет ей точно ориентироваться в текущей дорожной ситуации и принимать правильные решения.
Кроме того, база данных содержит в себе ручную, то есть сделанную живым человеком, разметку, объясняющую, где и какие знаки находятся в кадре. Наличие подобной разметки позволяет создавать системы распознавания дорожных знаков, в частности на основе искусственных нейронных сетей. Это открывает путь не только к автоматическому семантическому картографированию дорог, но и к созданию беспилотных машин, способных передвигаться по дорогам общего пользования с соблюдением правил дорожного движения без предварительно построенной детализированной карты, а так же способных реагировать на временные изменения на дорогах, связанные, например, с проведением дорожных работ.
«Создание своей базы данных практически невозможно для молодых исследовательских команд. Опубликованный датасет сможет стать хорошим инструментом для любой команды, чтобы обучить свою машину «видеть» знаки и дорожную ситуацию не только летом, но и зимой. Теперь им могут воспользоваться как производители беспилотных автомобилей, так и разработчики отдельных решений для беспилотного транспорта», – отметил заместитель генерального директора – директор по развитию инновационной инфраструктуры РВК Михаил Антонов.
Справочная информация:
О РВК
АО «РВК» — государственный фонд фондов, институт развития Российской Федерации, один из ключевых инструментов государства в деле построения национальной инновационной системы. Уставный капитал АО «РВК» составляет более 30 млрд руб. 100% капитала РВК принадлежит Российской Федерации в лице Федерального агентства по управлению государственным имуществом Российской Федерации (Росимущество). Общее количество фондов, сформированных АО «РВК», достигло 27, их суммарный размер — 51,3 млрд руб. Доля АО «РВК» — 26,8 млрд руб. Число проинвестированных фондами РВК инновационных компаний достигло 202. Совокупный объем проинвестированных средств — 17,8 млрд руб.
www.rvc.ru
Сколковский институт науки и технологий (Сколтех)
Сколковский институт науки и технологий (Сколтех) – негосударственный образовательно-исследовательский институт, который находится в Сколково (Московская область). Созданный в 2011 году при участии Массачусетского технологического института (MIT), Сколтех готовит новые поколения исследователей и предпринимателей, продвигает научные знания и содействует технологическим инновациям с целью решения важнейших проблем, стоящих перед Россией и миром. Институт строит свою работу опираясь на лучшие традиции российских и международных образовательных и исследовательских практик, делая особый акцент на предпринимательской и инновационной деятельности.
www.skoltech.ru
Up Great
Up Great — крупнейшие по размеру призового фонда в России технологические конкурсы. Механика соревнований разработана по образцу престижных международных конкурсов XPrize, Darpa Grand Challenge и др. Участникам предлагается найти решения сложнейших технологических задач, которые в мире пока решения не имеют. Команда-победитель, преодолевшая мировой технологический барьер, получает крупный денежный приз — до 200 млн руб. — за демонстрацию понятного и повторяемого решения конкурсного задания перед экспертами, жюри и широкой общественностью. В 2018 году стартовали первые конкурсы Up Great: «Зимний город» и «Первый элемент». Оператор технологических конкурсов Up Great — РВК. Соорганизаторы — АСИ и Фонд «Сколково».
http://upgreat.one/
Ice Vision
Ice Vision – конкурс технологий в области программного обеспечения для беспилотного транспорта. Конкурс направлен на поиск новых решений на базе искусственного интеллекта, которые позволят беспилотнику повысить качество распознавания дорожной обстановки в сложных погодных условиях. Ice Vision проводится в рамках технологических конкурсов Up Great. Соорганизатором выступает один из ведущих технических российских университетов НИТУ «МИСиС». Впервые перед участниками ставится задача разработки интеллектуальной системы для беспилотника на основе данных, собранных в условиях российской зимы, и этот уникальный «зимний» датасет включает не менее 20 тысяч изображений. Финальный этап конкурса пройдет в формате 48-часового хакатона на площадке Дома коммуны НИТУ «МИСиС», известного памятника архитектуры эпохи конструктивизма.
ПРЕСС-РЕЛИЗ
15 июля 2019 года
