Data Engineer (31903)

« zpět
Bratislava, Zilina, Kosice
4/2023
Kontrakt Klient
90%
6 800 EUR
Tato pozice není aktuálně dostupná

Hľadám skúseného Senior Data Engineera s viac ako 6 rokmi skúseností, ktorý sa bude podieľať na novom projekte zameranom na návrh, vývoj a nasadenie dátových pipeline v prostredí S3, RedShift, AWS Glue, DBT a Astronomer. Práca zahŕňa aj údržbu existujúceho ETL systému a spoluprácu s ostatnými tímami a odborníkmi. Požadujem bakalársky titul v obore informatika alebo ekvivalentnej praxi, znalosť data warehousing a dimenzionálneho modelovania dát, skúsenosti s extrakciou dát z relačných databáz a skúsenosti s vývojom v Jave, Pythone, C# alebo C++.

🚀 Projekt
- návrh, vývoj a deploy batch a streaming datových pipelines
- návrh a tvorba náhradného systém ETL na S3 + RedShift + AWS Glue + DBT + Astronomer (greenfield development)
- údržba staršího systému ETL postaveného na SqlServer + SSIS + Airflow
- monitorovanie a zabezpečenie prevádzkovej stability datových pipelines
- tvorba a udržiavanie dokumentácie technického návrhu, prevádzkovej podpory a postupov údržby pre všetky data pipelines
- zabezpečenie kvality údajov a súladu s vývojovými, architektonickými, reportovacími a regulačnými štandardmi v data pipeline
- spolupráca s ostatnými členmi engineering tímu, odborníkmi na danú problematiku a vedúcimi oddelení

🎯 Skills
- alokácia SVK kvôli obmedzeniam VPN
- bakalárske vzdelanie v oblasti informatiky alebo ekvivalentné skúsenosti
- 6+ rokov skúseností s návrhom a vývojom data pipelines a tasks
- Java, Python, C# alebo C++
- znalosť data warehousing platforiem (Redshift, Snowflake, SQL Server...)
- skúsenosti so version control system (Git, Mercurial, SVN ...)
- modelovanie (tranzakčné/relačné databazy...)
konzumácia dát cez protokol HTTP a vo formátoch HTML, XML a JSON
- extrahovanie údajov z relačných a dokumentových databáz
- riešenie problémov s výkonom a fine tuning queries
- pochopenie data warehousing konceptov a dimenzionálneho data modelovania
- AJ B2

💡 Plus
- Amazon / AWS, EC2, VPC, ECS/EKS, RDS, EBT, Azure / Google Cloud Suites
- vytvorenie, prevádzka a správa Docker a Kubernetes, On-premise, EKS/ECS
- podpora a riešenie problémov u Jenkins, GoCD, Nagios/ElasticSearch/Splunk/ Kibana, Apache httpd/Tomcat/Nginx, MySQL/Postgres, Couchbase/Mongo, LDAP
- budovanie a údržba sietí založených na protokole IP (Cisco)
- vývoj F5 LTM / DNS / iRule
- skúsenosti s programom Nagios a vytváraním vlastných skriptov na monitorovanie všetkých aspektov aplikačnej infraštruktúry
- VMWare / vCenter / Openstack

💯 Benefity
- systematické prehodnocovanie platov, bonusy
- vertikálny a horizontálny kariérny postup
- koučovanie, profesionálny rozvoj, výučba angličtiny
- poukážky, fitness členstvo, športové aktivity, joga v kancelárii
- teambuldingy, zdravé snacky

Podobné pozice