Creating 360 View by Combining Multiple Fish-eye Images

Nielsen, Freddy Gramstrup

4. term

Vision, Graphics and Interactive Systems, Master

2016

2016-06-01

64 pages

At sammensætte billeder fra flere kameraer monteret på en bil til et fugleperspektiv for at assistere en chauffør i at parkere er en relativt ny ide. Det er blevet forsket tidligere, men det er først for nyligt at bilproducenter er begyndt at sælge implementeringer af det med deres biler. Dette projekt forsker i brugen af fire kameraer med fish-eye linser til at producere et 360 fugleperspektiv. Den primære fremgangsmåde er baseret på at rette input billederne ved at bruge kamera kalibrering, justere de fire billeder til et fælles plan og sammensætte til et enkelt billede. Den anden fremgangsmåde er baseret på at projektere input billederne direkte på semi-sfæriske overflader i et virtuelt miljø for at skabe det endelige billede. Resultaterne fra den primære fremgangsmåde viste at det er muligt at skabe et 360 fugleperspektiv kun ved brug af fire kameraer med fish-eye linser. Det resulterende sammensatte billede menes at være nyttig for en chauffør, da det dækker områder der ellers ville være blinde vinkler hvis man kun brugte vinduer og spejle.

Compositing images from multiple cameras mounted on a car to create a bird's-eye view to assist a driver while parking is a relatively new idea. Though it has been researched in the past, it is only in recent years that car makers have begun selling these systems with their cars. This project researches the use of four fish-eye lens cameras to produce a 360 bird's-eye view. The main approach for this revolves around rectifying the input images using camera calibration, aligning the four camera images to a common ground plane, and compositing them into a single image. A secondary approach was researched as well, which revolves around projecting the input images directly onto semi-spherical surfaces in a virtual environment to produce a composite image. The results from the main approach showed that it is possible to create a 360 view using only four fish-eye lens cameras. The resulting composited view is thought to be helpful to a driver, by covering areas that would be blinds-spots if only windows and mirrors were used.

Camera Calibration ; Image Processing ; Image compositing ; vehicular safety

Download
View record in AAU Student Projects