Analiza utjecaja odabira hiperparametara na kolaborativno učenje

diplomski rad

• Naslov (engleski): Analyzing the Influence of Hyperparameters on Federated Learning
• Autor: Ivan Pikelj
• Mentor: Damir Pintar (mentor)
• Član povjerenstva: Damir Pintar (predsjednik povjerenstva)
• Član povjerenstva: Luka Humski (član povjerenstva)
• Član povjerenstva: Boris Vrdoljak (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2020-07-09, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: TEHNIČKE ZNANOSTI; Računarstvo

Sažetak

Kolaborativno učenje je novi pristup treniranju modela umjetne inteligencije na distribuiranim podacima i uređajima. Ovakvim pristupom podaci ostaju pohranjeni lokalno i time se čuva privatnost. Treniranje modela u tako heterogenom sustavu dovodi do novih izazova različitih od već dobro utvrđenih metoda. U radu su opisane uobičajene metode kolaborativnog procesa, a dokaz koncepta ukazuje na utjecaj hiperparametara na proces. Dokaz koncepta pokazuje izazove koji se mogu pojaviti u procesu treniranja nad akademskim podacima kategorizacije MNIST brojeva i kako ih se može ublažiti dobrim odabirom hiperparametara, ovisno o problemu.

Sažetak (engleski)

Federated learning is a new approach to train models of artificial intelligence on distributed data and devices. With this approach data can be left stored locally and will preserve privacy. Training models in such elaborate system induces new challenges in contrast to well established methods. Paper describes common methods to achieve such process as well gives proof of concept to demonstrate significance of hyperparameters on the process. Proof of concept demonstrates challenges models might occur in process of training on academic data of categorizing MNIST numbers and how it can be alleviated via good hyperparameter selection depending on problem.

• Ključne riječi: Kolaborativno učenje; Federirano učenje; strojno učenje; distribuirani sustav
• Ključne riječi (engleski): Federated Learning; Collaborative learning; machine learning; distributed system
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:168:102235
• Studijski program: Naziv: Računarstvo; Vrsta studija: sveučilišni; Stupanj studija: diplomski; Akademski / stručni naziv: magistar/magistra inženjer/inženjerka računarstva (mag.ing.comp.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Zatvoreni pristup
• Datum i vrijeme pohrane: 2023-01-13 10:36:31