Ingeniero de Datos GCP

Descripción

Data Engineer será responsable de diseñar, construir y mantener pipelines de ingesta y transformación de datos en GCP (Google Cloud Platform), optimizando los procesos y consultas en BigQuery, asegurando la calidad y eficiencia de los pipelines de datos, y colaborando con el equipo en la mejora continua de la arquitectura y las mejores prácticas de versionado y despliegue.

Responsabilidades:
Diseñar, construir y mantener pipelines de ingesta y transformación de datos en GCP.

Brindar soporte a desarrollos de data pipelines en entornos de prueba y producción.

Optimizar consultas y procesos en BigQuery.

Resolver incidencias, errores o cuellos de botella en procesos ETL.

Participar en mejoras de la arquitectura de datos, versionado y despliegue con CI/CD.

Documentar soluciones técnicas, flujos y dependencias entre componentes.

Participar activamente en ceremonias ágiles del equipo (dailys, retrospectivas, refinamientos).

Requisitos:
Experiencia en Google Cloud Platform (GCP): BigQuery, Cloud Storage, Pub/Sub, Composer (Airflow).

Lenguajes de programación: Python (scripts, ETL, integración API), Java (preferencia para conectores y SDKs).

Contenedores y Orquestación: Docker, Kubernetes (GKE o general).

Frameworks / Herramientas: Apache Beam (con Dataflow), Apache Airflow, Git / GitLab CI/CD.

Conocimientos avanzados en bases de datos y formatos: SQL avanzado, NoSQL (Firestore, MongoDB), formatos AVRO, JSON, Parquet.

Otros conocimientos valorados: Monitoreo y observabilidad (Cloud Logging), buenas prácticas DevOps / Infraestructura como Código (Terraform opcional).

Enviar Cv a mserrano@bctecnologia.com
Asunto Ingeniero de datos

Beneficios