Azure Databricks Data Engineer (Vitoria-Gasteiz)

Bluetab, an IBM Company, is a leading force in Data, Cloud, Machine Learning and AI, helping key enterprises accelerate and optimize strategies across data and cloud platforms.

We are seeking a Data Engineer with 4‑5 years of experience in Scala, Python or PySpark, capable of designing, building, and optimizing large‑scale data pipelines on Spark and Databricks in cloud environments.

Responsabilidades

• Desarrollar y optimizar pipelines de datos en Scala, Python o PySpark sobre Spark o Databricks, garantizando rendimiento, calidad y escalabilidad.
• Diseñar y construir arquitecturas Data Lake y Data Warehouse en entornos Cloud (Azure, AWS o GCP).
• Transformar datos a gran escala mediante Spark, aplicando buenas prácticas de procesamiento distribuido.
• Optimizar queries y almacenamiento en Databricks, asegurando eficiencia en el consumo de datos y reducción de costos.
• Integrar múltiples fuentes de datos, asegurando su calid...