BigData Test Automation Specialist
- Tipo di contratto
- Tempo pieno
- Percentuale
- 100%
- Luogo
- Zürich
- Azienda
- EPAM Systems (Switzerland) GmbH, Boulevard Lilienthal 2, 8152 Glattpark (Opfikon)
- Lingue
- Inglese (fluente)
- Prima pubblicazione
Siamo alla ricerca di un BigData Test Automation Specialist da inserire nel nostro team a Zurich. Questo ruolo si concentra sulla progettazione e l'implementazione di una strategia di test robusta e multi-livello per una moderna piattaforma big data nel settore bancario. Lavorerai con tecnologie all'avanguardia tra cui Trino, Kafka, Iceberg e Dataiku per garantire la qualità dei dati, la resilienza della piattaforma e l'integrità complessiva del sistema.
Responsabilità
Progettare e implementare strategie complete di automazione dei test per una piattaforma big data
Sviluppare e mantenere framework di test scalabili
Implementare controlli dichiarativi della qualità dei dati per gli schemi
Creare e gestire test automatizzati per trasformazioni SQL complesse
Testare e validare gli schemi Hive metastore e l'integrità dei dati
Sviluppare test per pipeline di dati in streaming utilizzando Kafka e Testcontainers
Automatizzare gli scenari Dataiku DSS e integrarli nelle pipeline CI/CD
Costruire e ottimizzare l'infrastruttura CI/CD per test big data efficienti
Eseguire test di resilienza e chaos testing per garantire la stabilità della piattaforma
Utilizzare pattern di versionamento dei dati come Write-Audit-Publish per test isolati e sicuri
Requisiti
Forte esperienza con Python e il framework Pytest per l'automazione dei test
Esperienza pratica con tecnologie big data come Trino, Hive, Kafka o S3
Competenza con strumenti di qualità e validazione dei dati
Esperienza con strumenti di containerizzazione e mocking come Docker, Testcontainers
Comprovata capacità di testare applicazioni in streaming e architetture event-driven
Conoscenza dello scripting per l'interazione con cloud object storage
Esperienza con piattaforme MLOps, preferibilmente Dataiku
Comprovata esperienza nella costruzione e gestione di pipeline CI/CD (ad es. GitHub Actions, GitLab CI)
Conoscenza di strumenti di trasformazione SQL come dbt o SQLMesh
Comprensione dei concetti di versionamento dei dati
Fluente in inglese
Nice to have
Esperienza nel settore bancario o dei servizi finanziari
Tradotto automaticamente dall’originale.
Pubblicato 1 settimana fa