[Job-31441] Mid Level Data Developer (Databricks - Spark, PySpark), Brasil

2 days, 16 hours ago
Full-time
Mid Level
Software Development
CI&T

CI&T

CI&T is a global digital technology agency empowering agile growth for leading companies through advanced technologies with a team of 2000 experts worldwide.

Internet Software & Services
5K-10K
Founded 1995

Description

  • Participar do assessment técnico do ambiente atual e definir o roadmap de migração para a nuvem.
  • Projetar, desenvolver e otimizar pipelines escaláveis usando SQL, Python e PySpark.
  • Criar e manter modelos de dados analíticos com Star Schema, Snowflake Schema e camadas Bronze, Silver e Gold.
  • Construir tabelas analíticas de alto desempenho, incluindo modelos OBT.
  • Implementar e liderar testes, validações e rotinas de governança de dados.
  • Atuar como referência técnica, traduzindo requisitos de negócio em soluções de dados e removendo impedimentos.
  • Criar e gerenciar o roadmap técnico, suas dependências, entregas e mudanças.
  • Colaborar com equipes técnicas e de negócio para garantir dados íntegros, consistentes e confiáveis.

Requirements

  • Experiência sólida com bancos relacionais, especialmente SQL e Oracle.
  • Experiência prática com Databricks, Apache Spark, PySpark e Azure Data Factory (ADF).
  • Experiência na implementação das camadas Bronze, Silver e Gold e dos modelos Star Schema, Snowflake Schema e OBT.
  • Conhecimento de qualidade de dados, governança, operações MERGE em Data Lakehouse, CDC e Change Data Feed (CDF).
  • Domínio de SQL para consultas complexas e Python/PySpark para transformação e manipulação de dados.
  • Experiência na criação e gestão de roadmaps técnicos.
  • Capacidade de trabalhar com tarefas pouco especificadas, investigando requisitos e comunicando-se com clareza.
  • Uso de inteligência artificial e agentes para acelerar o desenvolvimento.
  • Certificações Databricks ou Azure são diferenciais, incluindo Azure Data Engineer e Databricks Certified Data Engineer.
  • Experiência com Airflow, Power BI, Tableau e metodologias ágeis é desejável.

Benefits

  • Plano de saúde e odontológico.
  • Vale alimentação e refeição.
  • Auxílio-creche e licença parental estendida.
  • PLR e seguro de vida.
  • Parcerias com academias e serviços de saúde e bem-estar, incluindo Wellhub e TotalPass.
  • Plataformas de aprendizagem contínua, cursos online e idiomas.
  • Programas de apoio à saúde física, mental e bem-estar.
  • Para residentes na Região Metropolitana de Campinas, presença obrigatória nos escritórios conforme a política vigente.

Interested in this position?

Apply directly on the company website

Apply Now

Similar Roles

Senior Data Engineer (Databricks)

Livefront 11-50 Internet Software & Services

Livefront is hiring a Senior Databricks Data Engineer to build production-grade data and AI foundations that power clients’ digital products, analytics, and intelligent experiences.

Apache Spark AWS Azure CI/CD Databricks dbt GCP Git Go Java Kafka MLflow MLOps Python Scala SQL
15 hours, 56 minutes ago

Senior Consulting Engineer

MongoDB 1K-5K Internet Software & Services

MongoDB is hiring a remote Data Migration Consultant in Germany to lead enterprise migrations from relational and NoSQL platforms to MongoDB while developing scalable delivery frameworks and tooling.

Apache Spark AWS Azure C# GCP Go Java Kafka MongoDB MySQL Node.js Oracle PostgreSQL Python SQL Server
16 hours, 26 minutes ago

Software Engineer IV, Datastore

Beacon Biosignals 11-50 Biotechnology

Beacon Biosignals is hiring a Software Engineer IV for its Datastore team to design and scale backend data infrastructure supporting brain-data clinical studies, scientific workflows, and digital health products.

AWS GraphQL Helm JavaScript Julia Kafka Kubernetes Node.js PostgreSQL Python RabbitMQ SQL Terraform TypeScript
1 day, 16 hours ago

Data Governance and Platform Manager

LawnStarter 11-50 Professional Services

LawnStarter is hiring a Data Governance Platform Manager to build and operate the governance systems that keep data, analytics, AI, and reporting trustworthy across its home-services marketplace.

Apache Airflow dbt Metabase Segment SQL Tableau
1 day, 16 hours ago

You're on a roll! Sign up now to keep applying.

Sign Up

Already have an account? Log in

Used by 14,729+ remote workers