Paralelno dohvaćanje web-stranica koristeći programski jezik Java

završni rad

• Naslov (engleski): Parallel Web Spider Implementation Using the Java Programming Language
• Autor: Pavao Blažević
• Mentor: Klemo Vladimir (mentor)
• Član povjerenstva: Klemo Vladimir (predsjednik povjerenstva)
• Član povjerenstva: Adrian Satja Kurdija (član povjerenstva)
• Član povjerenstva: Lucija Šikić (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2019-09-17, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: TEHNIČKE ZNANOSTI; Računarstvo

Sažetak

Ovaj završni rad opisuje razvoj Web pauk aplikacija sa primjenom utvrđivanja veza između portala na temelju poveznica koje se mogu pronaći u HTML dokumentima koje primamo na upućeni zahtjev. Pri izradi ovog rada korišten je programski jezik Java u razvojnoj okolini NetBeans, kao temeljni jezik za funkcionalnosti cijelokupne aplikacije uz metode parallelStream i korištenjem razreda klase Thread za paralelno izvođenje aplikacije u usporedbi sa sekvencijskim izvođenjem, korišteni si alati iz knjižnice Jsoup za rad i upravljanje nad dohvaćenim HTML dokumentima, korišteni su alati Neo4j za izradu grafičke baze podataka i u konačnici za vizualizaciju rezultata izvođenog programa korišten je alat Neo4j Desktop.

Sažetak (engleski)

This Bachelor thesis describes development of Web spide application which is applied for identifying relations between Web portals on basis of links that can be found in HTML document which we fetch as a result of our request. In making of this thesis as a base Java programming language was used in NetBeans developing enviournment for functionality of application with methods parallelStream i use of Thread class for parallelism in comparison with sequental running of application. As additional tools we used Jsoup library which provides methods for extracting and manipulating data within HTML document, we also used Neo4j tools for creating graphic data base and finally for visualising final result we used Neo4j Desktop.

• Ključne riječi: Web pauk; Paralelizam; Neo4j; grafička baza podataka; višedretvenost
• Ključne riječi (engleski): Web Spyder; Pallelism; Neo4j; Graphic Data Base; Multithreading
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:168:248991
• Studijski program: Naziv: Računarstvo; Vrsta studija: sveučilišni; Stupanj studija: preddiplomski; Akademski / stručni naziv: sveučilišni/a prvostupnik/ prvostupnica (baccalaureus/baccalaurea) inženjer/inženjerka računarstva (univ.bacc.ing.comp.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Zatvoreni pristup
• Datum i vrijeme pohrane: 2020-01-07 16:50:17