Jobless Developer
TECDATA ENGINEERING logo

Posted 2 days ago

Fullstack.Net Cloud AWSTECDATA ENGINEERING

Fullstack.Net Cloud AWS

RemoteRemote

AI Summary

Designs, builds and maintains high-volume data pipelines (ETL/ELT) on AWS for a billing and financial data project, working with SingleStore and Snowflake databases. Requires strong Python, SQL and Airflow skills.

About this role

Competencias técnicas principales

Sólidos conocimientos de Python, especialmente aplicado a ingeniería de datos: desarrollo de pipelines, procesos ETL/ELT y tareas similares.

SQL avanzado: capacidad para trabajar con consultas complejas, optimización del rendimiento y diferentes entornos de bases de datos.

Experiencia práctica con Apache Airflow, concretamente en la creación y programación de DAGs en AWS.

Buenos conocimientos generales de AWS.

Experiencia en bases de datos y plataformas de datos

SingleStore: es la plataforma principal del proyecto, por lo que sería ideal tener experiencia con ella, especialmente en diseño de esquemas, optimización de consultas y pipelines de ingesta de datos.

Snowflake: se valoran conocimientos o experiencia, ya que actualmente cuentan con varios proyectos que utilizan esta plataforma.

Rendimiento de bases de datos: conocimientos de indexación, particionamiento y optimización de consultas en entornos de gran volumen de datos.

Ingeniería de datos y experiencia en sistemas

Experiencia demostrable diseñando y manteniendo pipelines de datos complejos y de alto volumen.

Se valorará especialmente la experiencia con sistemas de facturación o datos financieros, debido a la naturaleza del proyecto, que requiere un alto nivel de precisión, trazabilidad y capacidad de auditoría.

Capacidad para incorporarse y comprender de forma autónoma sistemas ya existentes, sin necesitar que toda la documentación esté preparada desde cero.

Skills

Apache AirflowAWSDAG DevelopmentDatabase IndexingDatabase PartitioningData IngestionETL/ELT PipelinesPythonQuery OptimizationSchema DesignSingleStoreSnowflakeSQL

Explore related jobs

Browse these categories

Market data for full-stack engineer roles

All reports →