RemoteLeaf Logo
Log in Sign up

[Job-31997] Senior Engenheiro(a) de Dados- Governança e Linhagem de Dados, Brasil

2 hours, 30 minutes ago
Brazil
Full-time
Senior
Data Engineer
Software Development
Apache Airflow AWS CI/CD Git LLM PostgreSQL Python REST API Snowflake SQL Trino
Apply Now
CI&T

CI&T

CI&T is a global digital technology agency empowering agile growth for leading companies through advanced technologies with a team of 2000 experts worldwide.

Internet Software & Services
5K-10K
Founded 1995
View All Jobs 149

Description

  • Mapear pipelines Airflow, scripts Python, metadados, funções, packages e views SQL para inventariar ativos, dependências e consumidores.
  • Construir e publicar linhagem de dados e componentes de TI em nível de objeto e coluna para PostgreSQL e Snowflake.
  • Integrar metadados técnicos, linhagem e ownership ao OpenMetadata por meio de APIs.
  • Implementar automações de Governance as Code em pipelines de CI/CD, mantendo catálogos e linhagens atualizados.
  • Definir e implementar regras de qualidade e monitoramento para tabelas críticas.
  • Colaborar com equipes de dados, DevOps, plataforma e responsáveis de negócio.
  • Documentar objetos de dados, incluindo entradas, saídas, dependências e finalidade.
  • Utilizar agentes de IA e LLMs para acelerar análise de código, geração de metadados e documentação, com validação humana.

Requirements

  • Sólida experiência com Python e SQL avançado.
  • Experiência consistente com Apache Airflow, incluindo desenvolvimento e troubleshooting de DAGs.
  • Experiência com PostgreSQL, Snowflake e AWS, incluindo RDS e EC2.
  • Experiência com Git e pipelines de CI/CD.
  • Experiência com LLMs ou agentes de IA aplicados à análise de código e automação, como Claude, OpenAI, Bedrock, LiteLLM ou MCP.
  • Capacidade de interpretar e fazer engenharia reversa de pipelines e códigos existentes.
  • Conhecimento de modelagem de dados, gestão de metadados e linhagem de dados.
  • Experiência com OpenMetadata, DataHub, Collibra ou ferramentas similares é desejável.
  • Experiência com Astronomer, migrações de Airflow, Trino ou governança do Snowflake é desejável.
  • Experiência no mercado financeiro, certificações AWS/Snowflake e inglês intermediário ou avançado (B2+) são diferenciais.

Benefits

  • Plano de saúde e odontológico.
  • Vale-alimentação e vale-refeição.
  • Auxílio-creche e licença parental estendida.
  • PLR e seguro de vida.
  • Parcerias com academias, profissionais de saúde e plataformas de bem-estar.
  • Plataformas de aprendizagem contínua, cursos online e idiomas.
  • Clube de descontos e programas de saúde física e mental.
  • Presença obrigatória nos escritórios de Campinas para residentes da Região Metropolitana, conforme a política vigente.

Interested in this position?

Apply directly on the company website

Apply Now

Similar Roles

Coforge

Senior Data Engineer

Coforge 10K-50K IT Services

Coforge is seeking a remote Senior Data Engineer in Brazil to design, build, and improve an AWS- and Snowflake-based data platform with strong quality, reliability, and governance.

Brazil Senior Data Engineer
Apache Airflow Apache Spark AWS Azure CI/CD dbt Docker Grafana InfluxDB OpenSearch Python REST API Snowflake Terraform
2 hours, 15 minutes ago
WISEcode

Software Developer & Data Engineer

WISEcode 11-50 Internet Software & Services

WISEcode is hiring a senior Software Developer & Engineer to help build and operate The Pantry, its Python-based food data lakehouse that transforms fragmented product data into reliable, traceable information.

United States Full-time Senior Data Engineer Software Engineer
Apache Airflow Apache Spark AWS Dagster Databricks dbt DynamoDB GitHub Actions Kubernetes PostgreSQL Prefect Python Snowflake SQL Terraform
2 hours, 30 minutes ago
phData

Senior Data Engineer

phData 251-1K IT Services

phData is seeking a Data Engineer in India to design, build, and productionize secure, scalable cloud data solutions for enterprise clients while collaborating with global delivery teams.

India Full-time Mid Level Data Engineer
Apache Airflow Apache Spark AWS Azure Cassandra Databricks dbt Elasticsearch GCP Hadoop HDFS Kafka Luigi Python REST API Scala Snowflake SQL
1 day, 1 hour ago
Gather AI

Software Development Engineer II – Data Engineer

Gather AI 11-50 Air Freight & Logistics

Gather AI is hiring a remote SDE II, Data Engineer for its India-based Cloud Services team to build the company’s foundational warehouse, transformation, semantic, and data-quality platform for robotics-driven warehouse intelligence.

India Full-time Mid Level Data Engineer
Apache Airflow Apache Spark Azure CI/CD Dagster Databricks dbt Docker Git Kafka Kubernetes PostgreSQL Python Snowflake SQL Terraform
1 day, 3 hours ago

You're on a roll! Sign up now to keep applying.

Sign Up

Already have an account? Log in

Used by 14,729+ remote workers