Obrada toka senzorskih podataka korištenjem platforme Apache Apex

završni rad

• Naslov (engleski): Sensor Datastream Processing with Apache Apex Platform
• Autor: Borna Bezjak
• Mentor: Krešimir Pripužić (mentor)
• Član povjerenstva: Krešimir Pripužić (predsjednik povjerenstva)
• Član povjerenstva: Martina Marjanović (član povjerenstva)
• Član povjerenstva: Damjan Katušić (član povjerenstva)
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet elektrotehnike i računarstva; Zagreb
• Datum i država obrane: 2018-07-13, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: TEHNIČKE ZNANOSTI; Računarstvo

Sažetak

U radu je opisana platforma za obradu velike količine podataka Apache Apex. Prikazana je integracija s platformom Apache Hadoop, osnovni koncepti rada s platformom Apache Apex. Opisan je proces validiranja aplikacije, te kako se platforma Apache Apex nosi s ograničenim resursima i kako se oporavlja od pogrešaka. Uz opis platforme prikazan je proces izrade aplikacije za obradu tokova podataka s temperaturnih senzora. Aplikacija čita zapise iz datoteke i dinamički računa maksimalnu, minimalnu i srednju vrijednost pristiglih podataka. Dobiveni rezultati zapisuju se u pripadne datoteke.

Sažetak (engleski)

In this paper is described Apache Apex, platform for big data processing. Reader can see how Apache Apex integrates with Hadoop and basic concepts of Apache Apex, as well as how Apache Apex handles situations when computer resources are limited and how Apex recovers from errors. Reader can also see the process of constructing an application for processing data from temperature sensors. Application reads CSV file with collected data, and dynamically calculates minimum, maximum and mean value of processed values. After processing, results are stored in associated files.

• Ključne riječi: Java; Apache; Apex; Malhar; CSV; Hadoop; Obrada tokova podataka; Maven; senzori temperature
• Ključne riječi (engleski): Java; Apache; Apex; Malhar; CSV; Hadoop; stream processing; Maven; temperature sensors
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:168:230417
• Studijski program: Naziv: Računarstvo; Vrsta studija: sveučilišni; Stupanj studija: preddiplomski; Akademski / stručni naziv: sveučilišni/a prvostupnik/ prvostupnica (baccalaureus/baccalaurea) inženjer/inženjerka računarstva (univ.bacc.ing.comp.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Zatvoreni pristup
• Datum i vrijeme pohrane: 2019-03-13 19:03:59