Trino Power User / Analyst 100%
- Tipo di contratto
- Tempo pieno
- Percentuale
- 100%
- Luogo
- Zürich
- Azienda
- AARK Tech Solutions GmbH, Seestrasse 11, 8805 Richterswil
- Lingue
- Inglese (intermedio)
- Prima pubblicazione
Job Title: Trino Power User / Analyst
- Descrizione del Ruolo
- Progettare, distribuire e gestire cluster Trino su Kubernetes on-prem
- Configurare e mantenere cataloghi e connettori Trino per sorgenti dati eterogenee (Hive, Iceberg, Kafka, object storage)
- Ottimizzare le prestazioni di esecuzione delle query attraverso il tuning di memoria, CPU, spill e partizionamento
- Implementare la gestione del carico di lavoro utilizzando resource groups, prioritizzazione delle query e limiti di concorrenza
- Garantire alta disponibilità, scalabilità e tolleranza ai guasti dei cluster Trino
- Monitorare le prestazioni del cluster, la latenza delle query e lo stato del sistema utilizzando strumenti di osservabilità
- Risolvere problemi a livello di sistema, fallimenti delle query e contesa delle risorse
- Collaborare con Data Engineers e Analyst per definire le best practice per un accesso efficiente ai dati
- Contribuire alle decisioni architettoniche riguardanti data lakehouse, federated query e analytics distribuita
- Esperienza
- Oltre 5 anni di esperienza in sistemi di dati distribuiti, piattaforme di dati o infrastrutture big data
- Esperienza pratica con la distribuzione e le operazioni di cluster Trino (o Presto)
- Esperienza con Kubernetes, containerizzazione o sistemi distribuiti basati su VM
- Esperienza nell'integrazione di sorgenti dati come Hive Metastore, Iceberg e Kafka
- Comprovata esperienza nel tuning delle prestazioni e nell'ottimizzazione di query distribuite
- Esperienza con strumenti di monitoraggio e osservabilità (Prometheus, Grafana, Dynatrace)
- Familiarità con gli standard di sicurezza e i meccanismi di controllo dell'accesso (LDAP, Kerberos, RBAC)
- Esperienza di lavoro in ambienti Agile con team cross-funzionali
- L'esperienza nei servizi finanziari o in ambienti regolamentati è un plus
- Competenze
- Forte comprensione dell'architettura Trino (coordinator/worker, modello di esecuzione, pianificazione delle query, resource groups)
- Esperienza in performance tuning (joins, partition pruning, predicate pushdown, utilizzo delle risorse)
- Conoscenza delle moderne architetture di dati (data lakes, lakehouses, data mesh)
- Esperienza pratica con i formati di tabella aperti Iceberg
- Esperienza in infrastruttura e platform engineering (Kubernetes, Linux, networking)
- Familiarità con i sistemi basati su Java/JVM
- Esperienza con monitoraggio, alerting e risoluzione di problemi in sistemi distribuiti
- Competenze base di scripting/programmazione (Python, Bash) per l'automazione
- Forti capacità di problem-solving e di debugging a livello di sistema
Location: Zurich, minimo 3-4 giorni di lavoro in ufficio
Start Date: Immediate
Travel Required: Mostly No. On Exceptional basis- if client demands
AARK Tech Solutions GmbH
Seestrasse 11
8805 Richterswil
Tradotto automaticamente dall’originale.
Pubblicato oggi