Исследователи собирают данные для обучения роботов через бесплатный ремонт

Лаборатория искусственного интеллекта запустила необычную инициативу по сбору данных для обучения роботов-манипуляторов. В рамках проекта компания предлагает жителям трех городов бесплатные услуги по сантехнике, ремонту систем отопления, вентиляции и кондиционирования (HVAC), а также электромонтажные и клининговые работы.

Основная цель программы — запись высококачественных данных о выполнении сложных физических задач в реальных условиях. Специалисты, выполняющие ремонт, используют носимые сенсоры и записывающие устройства, которые фиксируют каждое движение рук, взаимодействие с инструментами и последовательность действий. Эти данные станут основой для обучения моделей управления роботами, способными выполнять бытовые задачи.

В перечень бесплатных услуг включены не только критически важные ремонтные работы, но и чистка воздуховодов и ковровых покрытий. Такой подход позволяет исследователям получить доступ к разнообразным сценариям работы в жилых помещениях, которые сложно имитировать в лабораторных условиях. Собранная информация включает не только видеопоток, но и телеметрию датчиков, что критически важно для отработки мелкой моторики манипуляторов.

Использование реальных данных от профессионалов помогает решить проблему нехватки качественных датасетов для робототехники. В отличие от синтетических данных, записи реальных ремонтов содержат непредсказуемые факторы, с которыми сталкиваются мастера. Ожидается, что полученные наборы данных помогут обучить роботов более точному взаимодействию с объектами в неструктурированной среде.