❘ Обновлено: 2023-06-27T15:40:31

Новая демонстрация RoboCat, новейшей программы искусственного интеллекта от Google DeepMind, которая может распознавать роботов и управлять ими для выполнения задач по фотографии.
Google DeepMind находится в разгаре попыток создать новый дымящийся пистолет на сцене генеративного ИИ. Однако дочерняя компания Google также работает над несколькими проектами, последним из которых является RoboCat.
Программное обеспечение представляет собой ИИ-агент, предназначенный для управления роботизированными придатками, с поставленными перед ним задачами по фотографиям. Все это возможно благодаря обширному обучению, которое получил RoboCat, который может начать распознавать задачи, поставленные перед ним исследователями.
По словам исследователей RoboCat, он «обучается намного быстрее, чем другие современные модели». Самым большим достижением является то, что он может выбрать задачу из менее чем 100 демонстраций и извлечь из «большого и разнообразного набора данных».
Примеры включают базовую сортировку некоторых фруктов, а также размещение дисков в нужных местах. Хотя сейчас это звучит элементарно, в демоверсии показано, что RoboCat может выполнить задание уже через несколько секунд после снимка с камеры с низким разрешением.
Однако изначально RoboCat не мог достигать успеха более 36%, если он не был предварительно научил задаче. Путем проб и ошибок Google DeepMind смог самостоятельно обучиться и удвоить результат.
RoboCat от Google преодолевает препятствия
RoboCat также может продолжать работу, даже если изображение закрыто руками. Идея здесь в том, что даже если что-то пойдет не так, он должен иметь возможность беспрепятственно обойти инцидент.

Google DeepMind также использовал две разные роботизированные руки. Panda 7-DoF и Sawyer 5-DoF функционально одинаковы, но имеют разные уровни досягаемости и свободы.
DoF, или Степени свободы , указывает уровень свободы, который он имеет перед достижением своего предела. Это также используется в виртуальной реальности для аналогичных целей.
RoboCat может понять и работать в обратном направлении, имея больше свободы с рукой Panda, а затем вынужден использовать руку Sawyer. Несмотря на то, что цели похожи, задача может быть намного сложнее, если аппаратное обеспечение будет лишено двух разных степеней.