Робот-хірург навчився оперувати після перегляду відео (відео)

Система використовує імітаційне навчання та аналізує відеозаписи реальних операцій. Про розробку повідомляє пресслужба Університету Джонса Гопкінса.

Дослідники з Університету Джонса Гопкінса та Стенфордського університету навчили хірургічного робота виконувати складні медичні процедури з високою точністю. Щоб досягти цього, вони використовували імітаційне навчання: робот повторював дії, які освоїв шляхом перегляду сотень відеозаписів реальних хірургічних операцій.

Система використовує ту саму архітектуру машинного навчання, що й система ChatGPT, але замість мови і тексту вона “говорить мовою робота” – використовує кінематику і математичні вирази для управління рухами хірургічного маніпулятора. Після перегляду відео з камер, встановлених на руках роботів da Vinci під час операцій, модель відтворила ті самі хірургічні процедури з рівнем майстерності, порівнянним із досвідченими лікарями.

Робот-хірург

За словами розробників, ключовим моментом було навчання моделі розуміти окремі рухи, а не заучувати конкретні процедури – послідовності дій. “Усе, що нам потрібно, – це введення зображення, а потім ця система ШІ знаходить правильне рішення”, – зазначив Джі Вун “Брайан” Кім, співавтор дослідження.

Автори дослідження стверджують, що підхід усуває необхідність ретельного програмування роботів для кожного окремого кроку медичної процедури, відкриваючи шлях до справжньої автономності хірургічних роботів. Тепер вони можуть швидко навчатися виконання практично будь-яких операцій, скорочуючи ризик лікарських помилок і підвищуючи точність хірургічних втручань.