Primjena skrivenih Markovljevih modela za raspoznavanje gesti u funkcionalnoj i simboličkoj imitaciji

diplomski rad

• Naslov (engleski): Application of Hidden Markov Models for Gesture Recognition in Functional and Symbolic Imitation
• Autor: Luka Malovan
• Mentor: Zdenko Kovačić (mentor)
• Član povjerenstva: Zdenko Kovačić (predsjednik povjerenstva)
• Član povjerenstva: Stjepan Bogdan (član povjerenstva)
• Član povjerenstva: Matko Orsag (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2016-07-14, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: TEHNIČKE ZNANOSTI; Elektrotehnika

Sažetak

U ovome radu opisana je implementacija funkcionalnosti potrebnih za evaluaciju interakcije NAO robota i djeteta kao pomoć pri dijagnostici autizma. Evaluacija interakcije između robota i djeteta vrši se prema ADOS protokolu (Autism Diagnostic Observation Schedule). Interakcija se svodi na pokazivanje geste te praćenja reakcije djeteta kada se od njega očekuje imitacija iste. Funkcionalna i simbolička imitacija sastoji se od nekoliko cjelina. Iz tog razloga protokol je implementiran kao automat s konačnim brojem stanja. Protokol počinje inicijalizacijom robota i programa te se zatim izvršava detekcija predmeta, njegovih dimenzija i oblika te poznavajući te informacije robot izvodi manipulaciju predmetom. Zadnja cjelina protokola je prepoznavanje geste iz trajektorije predmeta pomoću skrivenih Markovljevih modela. U svrhu preciznijeg praćenja predmeta implementiran je Kalmanov filtar čime je poboljšano prepoznavanje gesti. Dobiven je protokol imitacije koji je robustan i s velikom preciznošću prepoznaje geste. Ovime su ostvarene funkcionalnosti pomoću kojih je moguće evaluirati interakciju. Dobiveni su dobri rezultati u laboratorijskim uvjetima testiranja što je dovelo do uspješnog ostvarenja početne faze evaluacije interakcije robota i djeteta.

Sažetak (engleski)

This work presents implementation of evaluation software for interaction between a
NAO robot and a child in robot assisted autism diagnostic. Evaluation of interaction
between a robot and a child is done through the ADOS (Autism Diagnostic Observation
Schedule) protocol. Interaction is based on a played scenario where the robot is
performing a certain gesture and it observes the child’s response when the imitation
of the same gesture is expected. Functional and symbolic imitation consists of several
parts. This is why it is implemented as a finite state machine. The protocol starts by robot and program initialization which is followed by object detection, assessment of its shape and dimensions which is information crucial for object manipulation. The last part of the protocol is gesture recognition of the object trajectory using Hidden Markov Models(HMM). Kalman filter is implemented in order to achieve better gesture recognition. The result is an imitation protocol which is robust and very precise.Functionalities that enable evaluation of interaction are developed. They have provided good results in laboratory testing conditions which led to successful accomplishment of the first phase of robot and child interaction evaluation.

• Ključne riječi: Autizam; robotom potpomognuta dijagnostika; automat s konačnim brojem stanja; strojno učenje; skriveni Markovljevi modeli; Kalmanov filtar; NAO robot
• Ključne riječi (engleski): Autism; robot assisted diagnosis; Finite state machine; machine learning; Hidden Markov Models; Kalman filter; NAO robot
• Jezik: engleski
• URN:NBN: urn:nbn:hr:168:634955
• Studijski program: Naziv: Elektrotehnika i informacijska tehnologija; Vrsta studija: sveučilišni; Stupanj studija: diplomski; Akademski / stručni naziv: magistar/magistra inženjer/inženjerka elektrotehnike i informacijske tehnologije (mag. ing. el. techn. inf.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Zatvoreni pristup
• Datum i vrijeme pohrane: 2018-02-06 10:17:23