Real-Time Augmented Reality for Robotic-Assisted Surgery

Jørgensen, Martin Kibsgaard

4. term

Medialogy, Master

2014

2014-08-26

52

Formålet er at forbedre kommunikationen under oplæring i brugen af da Vinci-robotkirurgisystemet. Projektet gør det muligt for en instruktør at kommunikere visuelt med en kursist ved at lægge grafiske overlejringer på den stereoskopiske (3D) videostrøm, som systemet viser. Jeg har undersøgt videohardwaren i da Vinci-systemerne og udviklet et system, der kan hente, sende og overlejre videostrømme, som er kompatible med alle systemerne. Der er desuden tilføjet støtte for flere 3D-inputenheder, så brugeren kan interagere i tre dimensioner. Som første test og eksempel er der indsat virtuelle instrumenter, som i realtid blev lagt oven på den stereoskopiske videostrøm fra et da Vinci S-system.

This project aims to improve communication during training with the da Vinci robotic surgery system. It enables a trainer to communicate visually with a trainee by adding graphical overlays to the system’s stereoscopic (3D) video stream. I examined the video hardware of the da Vinci systems and built a system that can ingest, output, and overlay video streams compatible with all of them. Support for multiple 3D user input devices was also added to enable interaction in three dimensions. As an initial test and usage example, virtual instruments were incorporated and overlaid on the stereoscopic video stream of a da Vinci S system in real time.

[This abstract was generated with the help of AI]

Download
View record in AAU Student Projects