e strumenti di Change Data Capture per la sincronizzazione continua dei dati tra microservizi e sistemi esterni Progettare soluzioni di data lake su S3, definendo strategie di partizionamento e integrazione con servizi AWS come Athena ed Event Bridge...
and Cloud environments (AWS is nice to have)
• Experience with ETL / ELT processes
• Basic data modeling knowledge
• Knowledge:
• Fluent English
• knowledge of AWS data services, such as S3, Glue, Lambda, Redshift, Athena, EMR, Kinesis, Lake Formation, RDS...
con servizi Amazon Web Services (AWS), come: Lambda, Aurora DB (My SQL), S3, Glue, Athena, Kinesis, ed altri data service.
Responsabilità:
Implementazione e mantenimento di Data Pipeline aventi la reportistica come target, in Python
Progettazione...
dello sviluppo delle pipeline di ingestion (Batch/Streaming), di refactoring del codice ETL legacy in script Python/Glue e di ottimizzazione delle performance su S3/Athena.
Requisiti principali:
• Solida esperienza, di almeno 3 anni, nello sviluppo Python...