DZB - Zverejnená bakalárska práca

Využitie Apache Spark na detekciu a ošetrenie obchodne relevantných udalostí

Autor
Pekarovič, Stanislav
Školiteľ
Fabšič, Tomáš
Oponent
Rástocký, Martin
Škola
Slovenská technická univ. v Bratislave FEI ÚIM (FEI)
Rok odovzdania
2020
Trvalý odkaz - CRZP
https://opac.crzp.sk/?fn=detailBiblioForm&sid=64930206F366C8E34104E4C607D8
Primárny jazyk
slovenčina

Typ práce
Bakalárska práca

Študijný odbor
2511 | aplikovaná informatika

Dátum zaslania práce do CRZP
30.05.2020

Dátum vytvorenia protokolu
30.05.2020

Dátum doručenia informácií o licenčnej zmluve
17.07.2021

Práca je zverejniteľná od
ihneď

Elektronická verzia
 Stiahnuť prácu (pdf)
 Prehliadať
Cieľom práce bolo zoznámenie sa s technológiami Apache Kafka, Apache Spark a ich základnými konceptmi. V prípade Apache Spark bolo potrebné porovnať jednotlivé programovacie jazyky ako Java a Scala a taktiež bolo potrebné preveriť možnosti zaintegrovania kódu modelu v jazyku Python. V práci sme do značnej miery popísali spracovanie dátových tokov a to tak ako z pohľadu Apache Kafka tak i Apache Spark. Pri Apache Spark sme do detailov popísali Apache Spark Streaming a taktiež aj Apache Spark Structured Streaming, ktorý sme využili aj počas implementácie. V rámci práce boli identifikované dve obchodne prínosné udalosti, na ktoré má význam reagovať s krátkym oneskorením, a bolo implementované riešenie pre tieto problémy. Konkrétne sa jednalo o aplikáciu na detekciu fraudulentných platieb a aplikáciu, ktorá pomocou nástroja Drools vie filtrovať platby na základe biznis pravidiel.

Verzia systému: 6.2.61.5 z 31.03.2023 (od SVOP)