Робот провів першу хірургічну операцію без допомоги людини 🤩

👏 Робот, навчений на відеозаписах операцій, виконав тривалий етап видалення жовчного міхура без допомоги людини. Робот вперше оперував на реалістичному пацієнті та під час операції реагував на голосові команди команди та навчався за їх допомогою — як хірург-початківець, який працює з наставником

👏 Робот бездоганно працював під час випробувань та з досвідом досвідченого хірурга, навіть у неочікуваних сценаріях, типових для реальних медичних надзвичайних ситуацій

👏Побудований на тій самій архітектурі машинного навчання, що й ChatGPT, SRT-H також є інтерактивним та здатним реагувати на голосові команди («схопи головку жовчного міхура») та корекції («посунь ліву руку трохи ліворуч»). Робот навчається на основі цього зворотного зв'язку

👏SRT-H навчився виконувати операцію з жовчним міхуром, переглянувши відео, на яких хірурги Університету Джонса Гопкінса роблять це на трупах свиней. Команда підкріпила візуальне навчання субтитрами з описом завдань. Після перегляду відео робот виконав операцію зі 100% точністю

👏Робот бездоганно працював в неоднорідних анатомічних умовах та під час неочікуваних відхилень, наприклад, коли дослідники змінювали початкове положення робота та додавали кровоподібні барвники, які змінювали зовнішній вигляд жовчного міхура та навколишніх тканин

✔️ Результати дослідження опубліковані в журналі Science Robotics

Ji Woong Kim et al, SRT-H: A Hierarchical Framework for Autonomous Surgery via Language-Conditioned Imitation Learning, Science Robotics (2025). DOI: 10.1126/scirobotics.adt5254. www.science.org/doi/10.1126/scirobotics.adt5254