Data Engineer
Full TimeJob Overview
El Data Engineer es un especialista en la construcción y optimización de pipelines de datos, infraestructura y servicios en la nube, con foco en escalabilidad, seguridad y eficiencia de costos. Domina el uso de componentes de GCP como Cloud SQL, Dataflow, Pub/Sub e IAM para levantar entornos robustos y gobernados.
Utiliza Python para desarrollar pipelines, automatizaciones y APIs eficientes y escalables, siguiendo siempre buenas prácticas de ingeniería. Se enfoca en la optimización continua de consultas, memoria, procesamiento y costos de infraestructura, garantizando la máxima eficiencia. Además, diseña y expone APIs y microservicios para ingesta, orquestación y consumo de datos, asegurando contratos estandarizados, seguridad mediante IAM/OAuth y un consumo confiable para productos y equipos de negocio.
Utiliza Python para desarrollar pipelines, automatizaciones y APIs eficientes y escalables, siguiendo siempre buenas prácticas de ingeniería. Se enfoca en la optimización continua de consultas, memoria, procesamiento y costos de infraestructura, garantizando la máxima eficiencia. Además, diseña y expone APIs y microservicios para ingesta, orquestación y consumo de datos, asegurando contratos estandarizados, seguridad mediante IAM/OAuth y un consumo confiable para productos y equipos de negocio.
Principales Responsabilidades
Diseñar y desarrollar pipelines eficientes, optimizando rendimiento y costos sobre bigquery.
Implementar y mantener modelos de datos analíticos (Data Warehouse / Data Marts) en BigQuery.
Desarrollar y versionar código de transformación usando Dataform.
Integrar fuentes de datos desde sistemas internos, APIs y flujos en tiempo real (Pub/Sub, etc.).
Implementar controles de calidad, pruebas automáticas y monitoreo de datasets.
Automatizar procesos mediante Cloud Functions / Cloud Run / Composer / Dataform.
Gestionar seguridad y gobernanza de datos, asegurando cumplimiento de políticas internas (IAM, policy tags, policy row, etc ).
Colaborar con equipos de negocio para entender requerimientos y traducirlos en soluciones de datos.
Documentar procesos, estructuras y flujos de datos siguiendo estándares de ingeniería.
Implementar y mantener modelos de datos analíticos (Data Warehouse / Data Marts) en BigQuery.
Desarrollar y versionar código de transformación usando Dataform.
Integrar fuentes de datos desde sistemas internos, APIs y flujos en tiempo real (Pub/Sub, etc.).
Implementar controles de calidad, pruebas automáticas y monitoreo de datasets.
Automatizar procesos mediante Cloud Functions / Cloud Run / Composer / Dataform.
Gestionar seguridad y gobernanza de datos, asegurando cumplimiento de políticas internas (IAM, policy tags, policy row, etc ).
Colaborar con equipos de negocio para entender requerimientos y traducirlos en soluciones de datos.
Documentar procesos, estructuras y flujos de datos siguiendo estándares de ingeniería.
Technical & Power Skills
- Python
- Apache Beam
- Bases de datos no relacionales
- Bases de datos relacionales
- Cloud Engineer / Modernización CMDB
- Implementaciónn y Mantenimiento
- Conceptos de analítica - Data Analytics
- Docker
- Data Modeling
- GCP
- GIT
- SQL
Make Your Resume Now