Ребят, у нас тут робот-хирург операцию делает
Если лягушку опустить в кипяток, она резко выпрыгнет, но если температуру поднимать постепенно, она не заметит подвоха и сварится. С проектами у меня так же.
И вот неожиданно для себя самого я организую видеосъемку хирургической операции в прямом эфире. Оперирует робот-хирург. Разрез делает на тканевом уровне, так точно, как не может сделать человек. Управляют им два хирурга с помощью VR-шлема и джойстиков. А мы транслируем изображение с камер в щупальцах робота-осьминога в конференц-зал.
Интересный заказчик
Я не медик. Обычно снимаю вебинары, конференции, подкасты. Мне позвонили заказчики и спросили:
Да, конечно, делаем такое – привожу примеры.
Снимаем там, где режут
Выясняю, что нужно снять не только врачей с докладами, но и операционную.
В операционную надо попасть заранее: найти розетки, дополнительную комнату для пультовой, понять, где можно ходить и куда ставить аппаратуру. Тебя заранее ненавидят охранники и медсестры – не пускают и периодически покрикивают.
Твой пропуск — это заказчик-хирург, у которого всегда много дел и волшебные способности к исчезновению. Поэтому его сложно найти.
Без обработки в операционную нельзя, а аппаратуры много: кабели, камеры, объективы, штативы, микрофоны. Поэтому стерилизуем все за день до операции и оставляем в стерильной раздевалке операционной. В больнице двухлитровые антисептики и салфетки. Ими все и протираем.
С одеждой тоже решили – взяли одноразовую. Подумал, если дело пойдет, возьмем набор заправского хирурга: маски, кроксы и халаты. Перед трансляцией — дезинфекция рук и гигантская липучка, которая собирает весь мелкий мусор с тапок.
Снимать будем все: как режут, зашивают, удаляют. В команде операторов все со стабильной нервной системой: все-таки операция – кровь, скальпели. Не помогло.
Пока одни режут, другие слушают доклады
В конференц-зале читают доклады, а в операционной готовятся к операции.
Сперва закатывают пациента. Приходит старшая сестра и указывает, где можно и нельзя ставить камеры. Мы быстро заносим камеры, кладем коммутацию, проклеиваем их гафферским тейпом, чтобы никто не споткнулся и не нарушил ход операции. В операционных мебель на колесиках, поэтому расстановка происходит быстро.
Пока ты занимаешься аппаратурой, подготавливают пациента — погружают в сон, делают необходимые надрезы. Обычно этим занимается второй, ассистирующий хирург.
Начинается трансляция в зал. Приходит главный хирург, описывает клинический случай пациентки. Показывают пару слайдов на камеру, чтобы объяснить необходимость операции: хирургам важно доказать, что операция была единственно возможным, необходимым шагом в лечении. Во время этой операции нужно не только избавиться от опухоли, но и сохранить способность к деторождению. Женщине 48 лет, но она хочет родить детей.
Илону Маску бы понравилось
Над пациентом 4 манипулятора-щупальца робота с инструментами и камерой. У каждого щупальца свой ход. Режет сверхточно, на тканевом уровне, как не может делать человек. Ходим в метре от него, чтобы и нам не прилетело по голове, и у пациента не резануло что-нибудь лишнее.
Перед операцией я изучал документацию робота da Vinci. Из интересного – на случай, если хирург случайно резко заденет джойстик, предусмотрена автоблокировка. Она страхует от невыверенных действий. Называется “компенсация ошибок хирурга”. Дублирующие действия робот также блокирует.
Операционная система такого робота очень простая и напоминает операционную систему ракеты, то есть она простая не потому, что разработчики поленились, а потому, что это позволяет обеспечить надежность. Уже было испытано дистанционное управление этим роботом.
Роботом управляют два хирурга через VR-шлем
Конференц-зал должен видеть то же самое, что и врач. Поэтому разбираемся, откуда и куда идет сигнал с камеры робота.
Роботом управляют два хирурга. Один хирург по сути видеооператор, он снимает внутри человека, и его задача — выдать нужный ракурс второму хирургу. Он идеально знает болезнь и анатомию. А еще этот хирург такой же видяшник, как и мы, с ним легко можно перекинуться фразами вроде: “у меня SDI-интерфейс, 4К-формат, он программируемый, давайте я через матрицу его подключу, с рекордера вытащу и вам сплиттером отдам”. Второй видит ракурс в VR-очках и управляет роботом. Первый хирург видит все от первого лица и, по сути, выбирает ракурс, а второй хирург уже проводит саму операцию.
Над пациентом щупальца с инструментами. Робот использует скальпели, иглы, нити, электрокоагулятор, есть возможность промыть препаратами, продуть воздухом — делает все то же, что и обычные хирурги, но с большей точностью. А еще у него есть видеокамера. Она вводится в тело пациента и транслирует картинку. Все это напоминает Инспектора Гаджета.
Для нашей съемочной группы важна консоль вывода сигнала, которая отдает с робота 5 одинаковых видеосигналов (напоминает ТВ-станцию):
Да Винчи передает картинку высокого качества не ниже Full HD. Сигнал стабильный, потому что трансляция идет по независимым каналам. Но забрать сигнал нельзя. Протоколы в роботе защищены. Поэтому сначала дешифруем видеосигнал кросс-конвертером. А потом забираем его на пультовую. В конференц-зал видео передаем через протокол SRT.
Кроме камеры робота, в операционной 3 камеры у операторов: 2 на штативах, одна на электронном стабилизаторе. Они снимают врача и операционную, когда это требуется.
Чтобы зал слышал врача, крепим ему петличку, или хедсет, как у спикеров, которым нужно 2 руки для жестикуляции. Врач в маске. Если звук не обрабатывать, зал плохо слышит. Поэтому звукорежиссер сразу эквализирует звук и отдает в зал чистый голос.
Чтобы врач слышал вопросы зала, ставим колонку. Наушники нельзя. Он должен слышать все, что творится в операционной.
Если не разделять передачу звука и видео по разным каналам, поймаем звуковую петлю. Это когда голос из зала идет в колонку, от колонки микрофон ловит этот звук и возвращает обратно в зал. Поэтому мы заранее распределили каналы: видео передаем через свои протоколы, звук через систему ВКС со встроенной системой активного шумоподавления, подойдет даже Zoom.
А вот он я
Операция длилась 30 минут. У женщины удалили опухоль, а точность операции позволила оставить возможность иметь детей. В прямом эфире врачам в зале операцию показали. Ссылку скинуть не могу, потому что конференция закрытая. А видео с любительской съемки — могу.
Мы втянулись, и теперь часто снимаем мед. конференции. В операционной навидались всякого: как лица собирали, людей после аварии откачивали. Однажды попали на соревнование гастроэнтерологов. Позже расскажу.
А пока создал блог Cinecast: Люди в кадре. Подписывайтесь, буду делиться интересной внутрянкой со съемок.
Охренеть.
Нет, правда, охренеть.
Комментарий недоступен
и сюда роботы пролезли. и слава труду, надо сказать ;)
офигительный кейс
Спасибо! Мир, труд, роботы)
Прямо сейчас сотни или даже тысячи докторов скидывают описания симптомов и результаты в какое нибудь облако, откуда учатся нейросети. Нейросети уже умеют видеть инсульты и гематомы, определяют объём и площадь поражения. Сейчас наверное накопительный эффект происходит, потом просто подрубаешь оборудование к этой нейронке, вот и качественный переворот в медицине
Симптомы и описания итак есть в различных базах. Особо не помогает))))
Ждём, когда вместо хирурга за рулем там будет какой-нибудь GPT
Ну это и была бы та заплатка, та технология, которая могла бы теоретически нивелировать задержки в передаче данных при оперировании на больших дистанциях. Можно будет и космонавтов оперировать!)
я что-то пропустила? или в какой момент будущее наступило?….
Ждем, когда нас спасать приедет Арнольд
Не представляю как сейчас скакнет медицина. 120 лет средней продолжительности жизни становятся реальностью
Главное дожить до изобретения бессмертия
Звучит супер!
Ну это не массово же все, так сказать один из случаев.
Только в Петербурге в 7 Клиниках ежедневно используют этот робот, плюс есть другие модели на рынке, но пока менее распространенные.
Вау!! Хирургия на новом уровне. Это радует
"Будет плакать Голлливуд" - это про это песня? )
Надо начинать фильм, как хирург делает операцию лежа на пляже)
щупальца робота- как это страшно звучит))
Мне напомнило второго человека-паука
Впечатлили )
спасибо
Я б на месте команды хлопнулась в обморок. Врачи то ладно, их учат к этому привыкать. Но мне кажется, неврачу очень страшно смотреть. А операторы отвернуться-то не могут.
очень круто и очень современно 🔥 ждем теперь еще синхронизацию с ИИ, чтобы без людей и кто первым согласиться на мето пациента 😅
Ууу, звучит опасненько..
Интересная технология, как понимаю дальнейшее развитие в телеуправляемые операции, но что делать роботом в случае, например, разрыва крупного кровотока? Он же не может быстро среагировать.
Я тоже охренел.. .