Prijenos umjetničkog stila optimiranjem konvolucijskog modela

završni rad

• Naslov (engleski): Artistic style transfer by training a convolutional model
• Autor: Lucija Ivković
• Mentor: Siniša Šegvić (mentor)
• Član povjerenstva: Siniša Šegvić (predsjednik povjerenstva)
• Član povjerenstva: Petra Bevandić (član povjerenstva)
• Član povjerenstva: Ivan Krešo (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2017-07-10, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: TEHNIČKE ZNANOSTI; Računarstvo

Sažetak

Rad obuhvaća dva temeljna pristupa za razvoj modela teksture i sintezu teksture na slici. Prvi pristup razvija neparametrizirani model teksture i oslanja se na preoblikovanje piksela ili skupine piksela ulaznog predloška teksture u svrhu generiranja novog, većeg primjerka. U poglavlju 2.1 ovog rada, opisana su dva algoritma bazirana na ovom pristupu. Drugi pristup sintezi teksture je nešto složeniji pošto se temelji na eksplicitnom parametriziranom modelu koji se sastoji od preciznih matematičkih reprezentacija određenih statističkih značajki. Veći dio rada usmjeren je prema ovom pristupu i detaljno obrađuje algoritam koji koristi konvolucijsku neuronsku mrežu kao model teksture. Za evaluaciju rezultata algoritma kao predlošci teksture, tj. stila odabrane su umjetničke slike poznatih svjetskih slikara, a zadatak algoritma je prenijeti stil s umjetničke slike na digitalnu fotografiju tako da objekti koje fotografija sadrži ostanu prepoznatljivi, ali da se stil u kojem su prikazani promjeni po uzorku na umjetničku sliku. Provedena je analiza rezultata uz različite vrijednosti parametara konvolucijske mreže. Uz izvorni kod algoritma u Pythonu i TensorFlowu priložene su i završne slike analize algoritma.

Sažetak (engleski)

This work presents two main approaches for building a texture model used for texture synthesis. The first approach is based on non-parametrized model and it relies on bare pixel resampling of an input image. Chapter 2.1 has a description of two algorithms based on this approach. The second approach is somewhat more advanced since it is based on an explicit parametrized model composed of detailed mathematical represetations of certain statistical features. Most of this work deals with the algorithm that uses deep convolutional neural network as a texture model. Results of this algorithm have been evaluated by utilizing paintings by various artists as texture samples. The main task is to trasfer the texture (that is, style) from the artwork onto the digital photograph. While the objects shown on the photograph should be preserved, the style in which they are displayed should alter to resemble the artwork. The experimental part analyses the results of this algorithm with different variations of the convolutional model and the implementation itself. The work is accompanied with the source code in Python and TensorFlow and the obtained images.

• Ključne riječi: računalni vid; konvolucijska neuronska mreža; TensorFlow; Python; sinteza teksture; numerička optimizacija; prijenos stila
• Ključne riječi (engleski): computer vision; convolutional neural network; TensorFlow; Python; texture synthesis; numerical optimization; style transfer
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:168:871162
• Studijski program: Naziv: Računarstvo; Vrsta studija: sveučilišni; Stupanj studija: preddiplomski; Akademski / stručni naziv: sveučilišni/a prvostupnik/ prvostupnica (baccalaureus/baccalaurea) inženjer/inženjerka računarstva (univ.bacc.ing.comp.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Zatvoreni pristup
• Datum i vrijeme pohrane: 2019-03-13 21:03:42