Segmentacija i lokalizacija zaklonjenosti lica uporabom dubokih neuronskih mreža

master's thesis

• Title (english): Deep network for face segmentation and occlusion localisation
• Author: Simon Knežević
• Mentor: Slobodan Ribarić (mentor)
• Committee member: Slobodan Ribarić (predsjednik povjerenstva)
• Committee member: Siniša Šegvić (član povjerenstva)
• Committee member: Ante Đerek (član povjerenstva)
• Granter: University of Zagreb; Faculty of Electrical Engineering and Computing; Zagreb
• Defense date and country: 2018-07-16, Croatia
• Scientific / art field, discipline and subdiscipline: TECHNICAL SCIENCES; Computing

Abstract

U ovom je radu uporabom dubokih neuronskih mreža ostvaren sustav za segmentaciju lica i lokalizaciju zaklonjenih područja koji radi bez ograničenja na pozu lica i vrstu zaklonjenosti. Razvijeni sustav omogućuje detekciju, procjenu 3D poze, segmentaciju, lokalizaciju zaklonjenosti i u konačnosti deidentifikaciju lica koja je provedena na područjima koja nisu bila zaklonjena. Za segmentaciju i lokalizaciju zaklonjenosti lica primijenila se metoda koja koristi duboke konvolucijske neuronske mreže. Lokalizirani su objekti koji zaklanjaju određene dijelove lica, a segmentirani vidljivi dijelovi lica iz svojih okolina. U konačnici se deidentifikacija lica u svrhu zaštite privatnosti provela metodom zamjene lica. Navedena metoda zatim je implementirana na video sekvence te je testirana na videozapisima koji variraju u broju lica, pozama, osvjetljenju i zaklonjenosti lica.

Abstract (english)

Deep neural network is used for face segmentation and occlusion localisation. The system works in unconstrained to occlusion and in arbitrary face poses. System is developed to detect faces, estimate 3D pose, localise occlusions, segment faces and deidentify them. For segmentation and localization deep neural networks are used. Objects that occlude faces are localised, and visible parts of faces are segmented. Deidentification method for privacy preservation developed is face swap system. Method is implemented on video sequences and tested for many faces, poses, lighting and occlusion conditions.

• Keywords: segmentacija lica; lokalizacija zaklonjenosti lica; 3D modeli lica; deidentifikacija lica
• Keywords (english): face segmentation; occlusion localisation; 3D face models; face deidentification
• Language: croatian
• URN:NBN: urn:nbn:hr:168:734882
• Study programme: Title: Computing; Study programme type: university; Study level: graduate; Academic / professional title: magistar/magistra inženjer/inženjerka računarstva (magistar/magistra inženjer/inženjerka računarstva)
• Type of resource: Text
• File origin: Born digital
• Access conditions: Closed access
• Created on: 2019-03-13 21:36:33