Gesture Based Presentation Tool: A comparison of interaction methods in slideshow presentations
Translated title
Bevægelsesbaseret præsentationsværktøj
Author
Jørgensen, Heino
Term
4. term
Education
Publication year
2011
Submitted on
2011-05-27
Pages
72
Abstract
Dette projekt undersøger, hvordan man kan styre slideshow-præsentationer med naturlige håndbevægelser i stedet for mus og tastatur. Med Microsoft Kinect, et kamerabaseret bevægelsessystem, forsøgte vi at spore både hænder og fingre for at muliggøre gestusbaseret interaktion. Den foreslåede metode til fingersporing kombinerede hudfarvedetektion (at finde billedområder, der ligner hud) med udtrækning af kendetegn ved fingerspidser, implementeret med OpenCV og OpenKinect. Da denne tilgang var ustabil, brugte den endelige prototype kun håndsporing. Applikationen blev bygget i Unity og anvendte NITE-biblioteket fra OpenNI. Den lod oplægsholderen swipe for at skifte slides og fremhæve tekst og objekter. I den afsluttende test sammenlignede vi publikums opfattelse af den gestusbaserede præsentation med en traditionel opsætning med mus og tastatur. Resultaterne viste ingen forskel i, hvor godt information blev formidlet, men den gestusbaserede tilgang virkede mere distraherende på grund af oplægsholderens bevægelser.
This project explores controlling slideshow presentations with natural hand gestures instead of a mouse and keyboard. Using the Microsoft Kinect motion-sensing camera, we attempted to track both hands and fingers to enable gesture-based interaction. The proposed finger-tracking method combined skin color detection (identifying hand-colored regions in the image) with fingertip feature extraction, implemented with OpenCV and OpenKinect. Because this approach was unstable, the final prototype used hand tracking only. The application was built in Unity and used the NITE library from OpenNI. It allowed the presenter to swipe to move through slides and highlight text and objects. In the final test, we compared the audience’s perception of the gesture-based presentation with a traditional mouse-and-keyboard setup. The results showed no difference in how well information was conveyed, but the gesture-based approach appeared more distracting due to the presenter’s movement.
[This abstract was generated with the help of AI]
Keywords
Documents