Postupci pretraživanja slika matematičkih zadataka po sličnosti

diplomski rad

• Naslov (engleski): Methods for Searching Mathematical Problems Images by Similarity
• Autor: Vlado Galić
• Mentor: Tomislav Hrkać (mentor)
• Član povjerenstva: Tomislav Hrkać (predsjednik povjerenstva)
• Član povjerenstva: Zoran Kalafatić (član povjerenstva)
• Član povjerenstva: Jan Šnajder (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2021-07-02, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: TEHNIČKE ZNANOSTI; Računarstvo

Sažetak

Pretraživanje slika matematičkih zadataka po sličnosti je prilično zahtjevan i kom-
pleksan problem. Mogli bismo ga usporediti s jednim poznatim problemom kao što
je dohvat slike (engl. Image retrieval). Problem dohvata slike predstavlja izazov u ra-
čunarskoj znanosti već dosta vremena i još nemamo neku generalnu metodu koja će
raditi odlično za sve probleme dohvata slike. U ovom radu smo predložili metodu
koja kombinira tekst i sliku, te smo pomoću suvremenih modela za enkodiranje slike i
teksta uspjeli objediniti najbolje iz oba svijeta i stvoriti model koji jako dobro rješava
problem pronalaska sličnih matematičkih zadataka.

Sažetak (engleski)

Searching images of mathematical problems by similarity is a rather demanding
and complex problem. We could compare it to a well-known problem such as image
retrieval. The problem of image retrieval has been a challenge in computer science for
quite some time and we do not yet have any general method that will work great for
all image retrieval problems. In this paper, we proposed a method that combines text
and image, and with the help of contemporary models for encoding image and text
we were able to combine the best from both worlds and create a model that solves the
problem of finding similar mathematical problems.

• Ključne riječi: Transformer; BERT; RoBERTa; ResNet; FAISS; ImageRetrival
• Ključne riječi (engleski): Transformer; BERT; RoBERTa; ResNet; FAISS; ImageRetrival
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:168:055983
• Studijski program: Naziv: Računarstvo; Vrsta studija: sveučilišni; Stupanj studija: diplomski; Akademski / stručni naziv: magistar/magistra inženjer/inženjerka računarstva (mag.ing.comp.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Zatvoreni pristup
• Datum i vrijeme pohrane: 2023-01-13 12:17:01