Dados
Data Engineer. Constrói os pipelines e as plataformas que deixam os dados prontos para analytics e AI.
Perfil
- Área
- Dados
- Competências
- SQL, Python, Modelagem de dados, ETL / ELT, Streaming, Qualidade e governança de dados, Plataformas de dados em nuvem, Engenharia de dados para AI
- Tecnologias
- Apache Spark, Databricks, Snowflake, BigQuery, dbt, Airflow, Kafka, Delta Lake / Iceberg
O que fazem
- Desenhar pipelines em lote e em streaming
- Modelar data lakes, data warehouses e lakehouses
- Garantir qualidade, linhagem e governança dos dados
- Preparar dados para ML e RAG (chunking, embeddings)
- Migrar e modernizar plataformas de dados para a nuvem
- Otimizar o custo de armazenamento e processamento