← All jobs

Data Engineer – Migración de Cloudera a GCP

TECDATA ENGINEERING · Spain

Remote Full-time Posted

Found on Himalayas, which is where the application goes.

Buscamos un Data Engineer – Migración de Cloudera a GCP

Requisitos imprescindibles:

  • Experiencia con HDFS y Google Cloud Storage.

  • Experiencia avanzada con Apache Spark, Scala y PySpark, y migración de workloads a Dataproc y Dataproc Serverless.

  • Experiencia en Spark Streaming y Apache Kafka, incluyendo servicios gestionados de Kafka en GCP.

  • Conocimientos de Kudu y soluciones de destino como Cloud SQL, Google Spanner y Bigtable.

  • Experiencia con Hive Metastore, Apache Ranger y gobierno del dato, incluyendo Dataplex, Cloud IAM y BigQuery Policy Tags.

  • Experiencia en migración, validación y optimización de pipelines de datos en entornos cloud.

Originally posted on Himalayas