Sinteza novih pogleda na predmet iz dvodimenzionalnih slika korištenjem neuronskih mreža

diplomski rad

• Naslov (engleski): Generating new perspectives of an object from two-dimensional images using neural networks
• Autor: Iva Hrastnik
• Mentor: Matko Orsag (mentor)
• Član povjerenstva: Matko Orsag (član povjerenstva)
• Član povjerenstva: Tamara Petrović (član povjerenstva)
• Član povjerenstva: Frano Petric (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2024-02-27, Hrvatska

Sažetak

Provedeno je istraživanje Neural Radiance Fields metode i pixelNeRF okvira za učenje
koji korištenjem neuronskih mreža provodi sintezu novih pogleda na predmet iz jedne
ili nekoliko ulaznih slika. Korišten je PixelNeRF model treniran na ShapeNet skupu slika
automobila prilagođen ulazu stvarnih fotografija automobila. Provedeno je testiranje
modela s jednom do nekoliko ulaznih slika koristeći fotografije različitih automobila, kao
i sintetički generiran skup slika. Kvaliteta novih pogleda na predmet očekivano raste s
povećanjem broja ulaznih slika automobila, no već odlične rezultate prezentira i sinteza
pogleda iz dvije te četiri ulazne fotografije.

Sažetak (engleski)

Research was conducted on the Neural Radiance Fields method and the pixelNeRF
learning framework, which uses neural networks to synthesize new views of the subject
using one or several input images. A PixelNeRF model trained on a ShapeNet set of car
images and adapted to the input of real car photos was used. The model was tested with
one to several input images using photos of different cars as well as a synthetically generated
set of images. As expected, the quality of new views of the subject increases with
the number of input car images, but excellent results are also presented by the synthesis
of views from only two or four input photos.

• Ključne riječi: Neuronska polja zračenja; NeRF; PixelNeRF; Neuronska mreža; Sinteza novih pogleda; Računalni vid; Pozicija kamere; 3D rekonstrukcija; Osvjetljenje; 3D Model; Rezolucija slike
• Ključne riječi (engleski): Neural radiance fields; NeRF; PixelNeRF; Neural network; Synthesis of new views; Computer vision; Camera pose; 3D reconstruction; Illumination; 3D Model; Image resolution
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:168:677019
• Studijski program: Naziv: Informacijska i komunikacijska tehnologija; Vrsta studija: sveučilišni; Stupanj studija: diplomski; Akademski / stručni naziv: magistar/magistra inženjer/inženjerka informacijske i komunikacijske tehnologije (mag. ing. inf. et comm. techn.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Otvoreni pristup
• Datum i vrijeme pohrane: 2024-03-28 07:47:14