Как научить робота проводить те же опрации, что хирург человек? Robot. Surgery. Computer Vision.

Краткое описание: Исследователи из Университета Джонса Хопкинса только что совершили прорыв в хирургической робототехнике, обучив робота выполнять сложные медицинские процедуры, просто заставив его смотреть видеозаписи работы хирургов-людей.

Подробности:

Робот da Vinci Surgical System изучил и выполнил важнейшие хирургические задачи, такие как манипуляции иглами, подъем тканей и наложение швов, с навыками человеческого уровня.

Используя новый подход к обучению с помощью имитации, система обучалась с помощью сотен хирургических видеороликов, снятых камерами на запястьях робота da Vinci.

Модель ИИ сочетает архитектуру в стиле ChatGPT с кинематикой, по сути обучая робота «разговаривать о хирургии» с помощью математических движений.

Система также продемонстрировала неожиданную адаптивность, например, автоматически извлекая упавшие иглы — навык, на выполнение которого она явно не была запрограммирована.

Почему это важно: Резкий рост возможностей роботов как для обучения, так и для ловкости открывает новые возможности использования, и хирургия стоит на очереди. Такой подход к обучению с помощью видео может сделать для хирургической робототехники то же, что магистратура по праву сделала для искусственного интеллекта, позволяя роботам быстро обучаться и адаптироваться к любой процедуре вместо ручного кодирования каждого отдельного движения.

Источник.