В 2024 году исследователи робототехники DeepMind компании Google разработают инновационные способы обучения роботов, что даст робототехнической отрасли значительный толчок в развитии ИИ. Этот прорыв очень важен, поскольку он обещает изменить сферы применения роботов – от обучения до производства.
Традиционно роботы создаются для выполнения конкретных, повторяющихся задач на протяжении всей их трудовой жизни. Однако такие одноразовые роботы сталкиваются с проблемами, когда в окружающей их среде происходят неожиданные изменения или ошибки.
Чтобы решить эту проблему, DeepMind представила AutoRT – фреймворк, использующий большие модели инфраструктуры для различных целей. AutoRT начинает работу с использования модели визуального языка (VLM), чтобы улучшить понимание состояния роботов. Система может работать с несколькими роботами, каждый из которых оснащен камерами для определения окружения и обнаружения. Кроме того, крупномасштабная языковая модель (LLM) задает программы для роботов, что позволяет им понимать и выполнять команды на естественном языке и снижает необходимость в сложном кодовом программировании AutoRT может тестировать и настраивать до 20 роботов одновременно и обрабатывать 52 машины, собирая данные из около 77 000 тестов, включая более 6 000 проектов.
Еще один продукт, разработанный DeepMind компании Google, – RT-Trajectory, который использует видеоинформацию для улучшения обучения роботов. Этот метод предполагает наложение двухмерных видеозаписей движений роботизированной руки на визуальные подсказки, которые помогают роботу изучать системы управления. Этот метод, как было показано, обеспечивает успех более чем в два раза выше, чем предыдущий метод обучения RT-2, который добился успеха на 63 % в 41 экспериментальном задании.
Эти достижения DeepMind компании Google не только повышают эффективность и результативность роботов в новых ситуациях, но и раскрывают потенциальные знания из существующих наборов данных о роботах, создавая основу для беспрецедентного роста и инноваций в области автоматизации и робототехники на основе ИИ.
