Jobless Developer
TECDATA ENGINEERING logo

Posted 14 days ago

Desarrollador Big DataTECDATA ENGINEERING · Madrid

Desarrollador Big Data

MadridHybrid

AI Summary

Designs and develops batch and real-time big data pipelines with Apache Spark on Cloudera and Google Cloud Platform, building BigQuery models and Kafka-based streaming with CI/CD and Scrum delivery.

About this role

Buscamos un Desarrollador Big Data

Requisitos

Big Data (imprescindible) Más de 3 años diseñando y desarrollando procesos batch y real time con Apache Spark en el ecosistema Cloudera.

Alto nivel de Scala sobre Apache Spark; Java. Modelado en Apache HDFS/Hive, Apache Kudu yApache Solr.

Conocimiento profundo de Apache Kafka, a nivel de arquitectura y de desarrollo.

Cloud (GCP) Experiencia desarrollando sobre Google Cloud Platform. BigQuery (modelado), dbt/SQL y Python. Pub/Sub, Dataflow, Cloud Functions y Cloud Storage.

Transversal CI/CD con Git/Bitbucket y Jenkins.

Planificación de procesos con Control-M.

Trabajo en equipos Scrum.

Autonomía, capacidad de decisión y buena comunicación con perfiles técnicos y de negocio. Se valorará Experiencia como arquitecto/a en plataformas híbridas on-premise y cloud. Data Fusion, Cloud Bigtable (NoSQL) y GKE.

Experiencia en el sector retail.

Experiencia en toma de requisitos y análisis funcional en proyectos Big Data / BI.


Skills

Apache HDFSApache HiveApache KafkaApache KuduApache SolrApache SparkBigQueryBitbucketCloud FunctionsCloud StorageControl-MDataflowDbtGCPGitJavaJenkinsPub/SubPythonScalaSQL

Explore related jobs

Browse these categories

Market data for this role

All reports →