Podatkovno inženjerstvo

Repozitorij

Repozitorij je prazan

Anketa

Na ovoj stranici trenutno nije odabrana niti jedna anketa!

Podatkovno inženjerstvo

Šifra: 274975
ECTS: 5.0
Nositelji:
Prijava ispita: Studomat
Opterećenje:

1. komponenta

Vrsta nastaveUkupno
* Opterećenje je izraženo u školskim satima (1 školski sat = 45 minuta)
Opis predmeta:
CILJ KOLEGIJA:
- Rad s alatima za razvoj kompleksnih data pipeline-a
- Razvoj agregacijskih frameworka s obzirom na razinu apstrakcije prema korisniku sustava
- Razumijevanje teorije tokova podataka te implementaciju sustava za obradu toka podatak u realnom vremenu
- Konfiguraciju relacijskih i ne relacijskih baza podataka za skalabilnu pohranu i čitanje podataka
- Objektno orijentiranu implementaciju naprednih komponenata za pretraživanje relacijskih i ne relacijskih baza podataka
- Dizajniranje i implementaciju podatkovnih rješenja u oblaku

NASTAVNI SADRŽAJI:
- Razvoj data pipelinea i agregacijskih frameworka. Transformacije. Vrste data pipeline sustava. State machine u data pipelineu. Workflow Monitoring. Razine korištenja sustava za procesiranje. Sadržaj pomoćnih paketa. Razine paralelizacije u obradi podataka.
- Obrada tokova podataka. Motivacija i osnove tokova podataka. Sustavi poruka. Operacije s prozorima. Okidači i watermarkovi. Sustavi za obradu tokova podataka. Kappa, Lambda i hibridne arhitekture.
- Pohrana analitičkih rezultata. Vrste agregata i rezultata analiza. Optimizacije pri pohrani velike količine podataka. Sustavi za pretraživanje podataka. Sučelja za generiranje slika i izvještaja.
- Podatkovno inženjerstvo u oblaku. Osnove inženjerstva u oblaku. Infrastruktura u oblaku. Sigurnost u oblaku. Implementacija sustava za obradu podatak u oblaku.
Literatura:
Termini konzultacija:
  • Za termin konzultacija obratite se predmetnim nastavnicima.

Obavijesti