DESCRIPCIóN
Simplificamos la vida de las personas con tecnología y queremos que tu seas parte de ese reto constante. Analizamos, diseñamos, desarrollamos, implementamos y operamos tecnología con el mejor talento humano. Nosotros hacemos transformación de negocios.
Ubicación: MÉXICO
Tiempo completo
Buscamos Technical Lead especializado en Azure Databricks para diseñar, desarrollar, mantener y gobernar pipelines de datos en entornos cloud, aplicando mejores prácticas de arquitectura, seguridad, CI/CD y gobierno de datos.
REQUISITOS
-
Experiencia mayor a 5 años en ingeniería de datos, arquitectura de datos o liderazgo técnico.
-
Experiencia práctica trabajando con Azure Databricks.
-
Conocimiento en Unity Catalog para gobierno de datos, control de acceso, linaje y administración de datos.
-
Experiencia con RBAC y definición de permisos dentro de plataformas de datos.
-
Experiencia diseñando, desarrollando y manteniendo pipelines de datos en Databricks.
-
Conocimiento de arquitectura de datos en Azure.
-
Experiencia con Azure Data Lake Storage Gen2 — ADLS Gen2.
-
Experiencia en procesamiento de datos en cloud y arquitecturas Data Lake / Lakehouse.
-
Desarrollo de procesos ETL / ELT usando PySpark, Python, SQL y Scala.
-
Conocimiento en Delta Lake, modelado de datos, particionamiento y optimización de consultas.
-
Experiencia en orquestación de pipelines con Azure Data Factory o herramientas equivalentes.
-
Experiencia en CI/CD usando Azure DevOps o GitHub Actions.
-
Experiencia en despliegue de soluciones Databricks mediante Databricks Asset Bundles — DABs.
-
Conocimiento de patrones de diseño y Clean Architecture.
-
Capacidad para definir lineamientos técnicos, mejores prácticas y estrategia de gestión de datos.
-
Experiencia liderando equipos técnicos o células de desarrollo.
-
Liderar técnicamente el diseño e implementación de soluciones de datos sobre Azure Databricks.
-
Diseñar y mantener pipelines de ingesta, transformación y procesamiento de datos.
-
Implementar buenas prácticas de gobierno de datos usando Unity Catalog.
-
Definir controles de acceso, permisos y seguridad mediante RBAC.
-
Diseñar soluciones escalables sobre ADLS Gen2, Delta Lake y arquitectura Lakehouse.
-
Optimizar procesos, particionamiento, consultas y rendimiento de pipelines.
-
Integrar Databricks con Azure Data Factory para la orquestación de procesos.
-
Automatizar despliegues mediante CI/CD y Databricks Asset Bundles.
-
Asegurar la aplicación de patrones de diseño, arquitectura limpia y estándares de desarrollo.
-
Acompañar técnicamente al equipo en decisiones de arquitectura, desarrollo y operación.