ETL Engineer (43164)

Hledám zkušeného ETL Engineera, který bude navrhovat a rozvíjet ETL workflow v prostředí Databricks a AWS a podílet se na vývoji produkčních datových řešení. Očekávám minimálně tři roky zkušeností s Pythonem, ETL procesy, relačními databázemi, cloudovými službami AWS a vývojem CI/CD pipeline.

🚀 Projekt
- vývoj a údržba ETL workflow v Pythonu s využitím Databricks a cloud-native technologií
- návrh a implementace ETL procesů pomocí nástrojů AWS Batch, AWS Step Functions, AWS Lambda nebo Apache Airflow
- návrh a implementace relačních databázových schémat v PostgreSQL, Oracle, SQL Server nebo MySQL
- vývoj a správa datových řešení v prostředí AWS (EC2, Athena, S3)
- návrh a implementace CI/CD pipeline s využitím GitHub Actions nebo obdobných nástrojů
- vývoj, nasazování a správa kontejnerizovaných aplikací pomocí Docker nebo Singularity
- implementace Infrastructure as Code (IaC) pro automatizaci infrastruktury
- vývoj modulárních řešení založených na REST/GraphQL API a integrace se systémy třetích stran
- spolupráce na návrhu, implementaci a provozu produkčních datových řešení

🎯 Skills
- minimálně 3 roky praktických zkušeností s Pythonem
- znalost objektově orientovaného programování (OOP)
- minimálně 3 roky zkušeností s návrhem, vývojem a správou ETL procesů
- zkušenost s Databricks a/nebo cloud-native ETL technologiemi
- zkušenost s ETL orchestrace nástroji (AWS Batch, AWS Step Functions, AWS Lambda, Apache Airflow)
- zkušenost s návrhem a implementací relačních databázových schémat v PostgreSQL (preferováno), Oracle, SQL Server nebo MySQL
- minimálně 2 roky praktických zkušeností se službami AWS (EC2, Athena, S3)
- zkušenost s tvorbou CI/CD pipeline pomocí GitHub Actions nebo obdobných nástrojů
- zkušenost s vývojem a nasazováním kontejnerizovaných aplikací (Docker, Singularity)
- zkušenost s Infrastructure as Code (IaC)
- zkušenost s vývojem API (REST, GraphQL apod.)
- zkušenost s integrací produkčních workflow s platformami externích dodavatelů

💡 Nice to have
- minimálně 1 rok praktických zkušeností
- zkušenost se Streamlit, R Shiny, React nebo jiným frontend frameworkem
- zkušenost s vývojem výpočetně náročných HPC analytických modulů nebo úloh pro zpracování dat
- zkušenost s kontejnerizačními platformami Kubernetes a Helm
- zkušenost s end-to-end testovacími frameworky (Robot Framework, Selenium)
- zkušenost s bioinformatickými workflow (ideálně v oblasti *omics dat)
- zkušenost s nerelačními databázemi (např. Elasticsearch)
- zkušenost s buildem a troubleshootingem C/C++ knihoven a jejich závislostí v prostředí Linux (např. Maven, Make)

#LI-KH2