Detekcija aktivnosti učenika za vrijeme rada s edukacijskim robotima na temelju audio snimaka

diplomski rad

• Naslov (engleski): Detection of Student's Activity During Working With Education Robots From Audio Recordings
• Autor: Ivan Bagarić
• Mentor: Ana Sović Kržić (mentor)
• Član povjerenstva: Ana Sović Kržić (predsjednik povjerenstva)
• Član povjerenstva: Davor Petrinović (član povjerenstva)
• Član povjerenstva: Marko Subašić (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2022-07-04, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: TEHNIČKE ZNANOSTI; Računarstvo

Sažetak

Interakcija učenika s robotom pobuđuje mnoga osjetila: opip, vid i sluh. Koristeći opip učenici npr. otkrivaju jesu li ispravno sastavili robota, a pomoću vida mogu utvrditi je li
robot izvršio zadanu radnju. Zvukovi se mogu dodati kao indikatori izvršenja nekog zadatka. U ovom diplomskom radu, koristeći metode dubokog učenja detektirani su događaji u
zvukovima koji su zabilježeni tijekom edukacijske radionice.

Sažetak (engleski)

Students' interaction with the robot stimulates many senses such as: touch, sight and hearing. For example, students can use their touch senses to discover if they have assembled a robot correctly, and with the help of sight senses they can determine whether the robot performed a given action. Furthermore, different sounds can also be added as indicators of task completion. This thesis used deep learning methods which allowed for detection of events in recorded sounds during the educational workshop.

• Ključne riječi: detekcija događaja u zvukovima; python; TensorFlow; umjetna inteligencija; strojno učenje; duboko učenje; umjetne neuronske mreže; duboke neuronske mreže; klasifikacija podataka; ručno labeliranje podataka
• Ključne riječi (engleski): sound event detection; python; TensorFlow; artificial intelligence; machine learning; deep learning; artificial neural networks; deep neural networks; data classification; data labeling
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:168:451998
• Studijski program: Naziv: Računarstvo; Vrsta studija: sveučilišni; Stupanj studija: diplomski; Akademski / stručni naziv: magistar/magistra inženjer/inženjerka računarstva (mag.ing.comp.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Zatvoreni pristup
• Datum i vrijeme pohrane: 2023-01-13 14:25:07