Procjena smjera pogleda iz slika lica korištenjem dubokog učenja

master's thesis

• Title (english): Gaze direction estimation from facial images using deep learning
• Author: Jakov Gracin
• Mentor: Sven Lončarić (mentor)
• Committee member: Sven Lončarić (predsjednik povjerenstva)
• Committee member: Marko Subašić (član povjerenstva)
• Committee member: Tomislav Petković (član povjerenstva)
• Granter: University of Zagreb; Faculty of Electrical Engineering and Computing; Zagreb
• Defense date and country: 2024-09-03, Croatia

Abstract

Procjena smjera pogleda na temelju lica osobe važna je primjena računalnog vida u posljednja dva desetljeća u autoindustriji i šire, prvenstveno zbog porasta količine slika i videa na koja se svakodnevno generira pomoću kamera visoke rezolucije. U okviru ovoga rada koristi se duboka neuronska mreža temeljena na mreži Resnet18 koja analizira slike tijekom vožnje automobila i
na temelju njih procjenjuje trodimenzionalni vektor smjera pogleda vozača. Istražuje se točnost predviđanja smjera pogleda u odnosu na neuronsku mreže iz ostalih radova te se prilagođavaju informacije o pogledu u skupu dostupnih slika da bi predviđanje bilo dovoljno precizno
za daljnje primjene u polju računalnog vida.

Abstract (english)

Estimating the gaze direction based on a person's face is an important application of computer vision in the last two decades in the automobile industry, primarily due to the increase in the number of images and videos generated daily using high-resolution cameras. This paper utilizes a deep neural network based on the ResNet18 architecture, which analyzes images captured while driving a car and estimates the three-dimensional vector of the driver's gaze direction based on these images. The accuracy of gaze direction predictions is compared to neural networks from other studies, and the gaze information is adapted within the available image dataset to ensure that the predictions are sufficiently accurate for further applications of computer vision.

• Keywords: Računalni vid; procjena smjera pogleda; duboke neuronske mreže; ResNet18; analiza slike; automobilska industrija
• Keywords (english): Computer vision; gaze estimation; deep neural network; ResNet18; image analysis; automobile industry
• Language: croatian
• URN:NBN: urn:nbn:hr:168:233915
• Study programme: Title: Computing; Study programme type: university; Study level: graduate; Academic / professional title: magistar/magistra inženjer/inženjerka računarstva (magistar/magistra inženjer/inženjerka računarstva)
• Type of resource: Text
• File origin: Born digital
• Access conditions: Closed access
• Created on: 2024-10-12 20:41:02