Data Engineer (GCP & BigQuery)

Empresa: Michael Page
Provincia: hibrido
Población: 
Descripción: La persona se incorporará al equipo de Data Engineering dentro del área de Technology Architecture y reportará al Data and AI Engineering Manager. Sus principales responsabilidades serán: • Diseñar, desarrollar y mantener pipelines de datos sobre Google Cloud Platform. • Crear procesos de ingesta, transformación y activación utilizando Python y SQL. • Desarrollar modelos de datos y datasets curados en BigQuery. • Construir procesos ETL y ELT mediante dbt. • Orquestar workflows y pipelines mediante Prefect o herramientas similares. • Trabajar con procesos batch, near real-time y event-driven. • Desarrollar pipelines en tiempo real mediante Dataflow y Pub/Sub. • Integrar información procedente de CRM, ecommerce, campañas digitales, Google Ads, plataformas de consumidor y sistemas internos. • Participar en proyectos de migración de datos y creación de nuevas capacidades. • Optimizar consultas, modelos y procesos en BigQuery, teniendo en cuenta rendimiento y costes. • Implementar controles de calidad, monitorización, alertas y gestión de errores. • Aplicar buenas prácticas de seguridad, trazabilidad, metadata y gobierno del dato. • Documentar pipelines, modelos, dependencias y procedimientos operativos. • Colaborar con equipos de Data Factory, Consumer Data, Digital Analytics, AI Engineering e Integration Engineering. • Participar en revisiones de código, diseño técnico y definición de estándares. • Proyectos globales de Data e IA sobre GCP • Stack moderno con BigQuery, Python, dbt, Prefect y Dataflow Buscamos una persona con al menos tres años de experiencia en Data Engineering, Cloud Data Engineering o Analytics Engineering. Será necesario aportar: • Experiencia sólida trabajando con Python y SQL. • Experiencia desarrollando pipelines de ingesta y transformación. • Conocimientos de ETL, ELT, modelado de datos y data warehousing. • Experiencia práctica con Google Cloud Platform, especialmente BigQuery. • Experiencia con dbt o herramientas similares. • Conocimiento de herramientas de orquestación como Prefect, Airflow o Cloud Composer. • Experiencia trabajando con múltiples fuentes de datos. • Conocimientos de monitorización, calidad del dato y gestión de incidencias. • Nivel de inglés avanzado. Se valorará especialmente: • Experiencia con Dataflow, Pub/Sub, Cloud Storage, Cloud Run o Cloud Functions. • Experiencia con pipelines en tiempo real. • Conocimientos de Terraform o infraestructura como código. • Experiencia en data governance, metadata, lineage y seguridad. • Experiencia con datos de consumidor, CRM, ecommerce o campañas digitales. • Experiencia previa en consultoría tecnológica o grandes entornos corporativos. • Certificaciones de Google Cloud. También podrán valorarse perfiles con experiencia sólida en AWS o Azure y motivación por especializarse en Google Cloud Platform. Multinacional internacional especializada en los sectores retail y gran consumo, con sede en Barcelona y presencia...
Tecnologías: Google Cloud Platform, Python, SQL, BigQuery, dbt, Prefect,
Tipo de Contrato: Indefinido
Salario: Sin especificar
Experiencia: 3 años
Funciones: Big Data - Programador
Descubre más: https://www.tecnoempleo.com/data-engineer-gcp-bigquery-michael-page/google-cloud-platform-python/rf-e61f1893e27a23f5174c