RemoteLeaf Logo
Log in Sign up

[Job-30124] Engenheiro de Dados Mid Level , Brazil

1 hour, 14 minutes ago
Brazil
Full-time
Mid Level
Data Engineer
Data Science and Analytics
Apache Spark CI/CD Databricks GitHub Machine Learning MLflow MLOps Python SQL
Apply Now
CI&T

CI&T

CI&T is a global digital technology agency empowering agile growth for leading companies through advanced technologies with a team of 2000 experts worldwide.

Internet Software & Services
5K-10K
Founded 1995
View All Jobs 151

Description

  • Participar da migração de processos e soluções analíticas de SAS para Databricks.
  • Desenvolver e manter pipelines de dados ETL/ELT usando Python, PySpark e Databricks.
  • Analisar códigos e processos existentes em SAS e propor alternativas e melhorias na nova plataforma.
  • Automatizar processos de ingestão, transformação e disponibilização de dados.
  • Apoiar a elaboração de desenhos de solução e arquitetura de dados.
  • Interagir com áreas de negócio para entendimento de requisitos e validação de resultados.
  • Elaborar e manter documentação técnica e funcional das soluções migradas.
  • Garantir a qualidade, performance e confiabilidade dos dados durante e após a migração.

Requirements

  • Experiência sólida em Azure Data Services e Databricks.
  • Conhecimento ou experiência relevante com SAS.
  • Experiência com Databricks e PySpark.
  • Domínio de Python e SQL para manipulação e transformação de dados.
  • Conhecimento em CI/CD e versionamento com GitHub.
  • Experiência em modelagem de dados conceitual, lógica e física.
  • Vivência em projetos de migração para cloud.
  • Experiência em ETL/ELT e integração de grandes volumes de dados.
  • Experiência com deploy de modelos de IA e uso de ferramentas como Azure ML.
  • Experiência com projetos de IA e automação de pipelines.
  • Produtização de modelos de Machine Learning no Databricks com MLOps.
  • Conhecimento em arquiteturas orientadas a dados e boas práticas de governança, como diferencial.
  • Participação em iniciativas de MDM (Master Data Management), como diferencial.
  • Familiaridade com Databricks MLflow para gestão de modelos, como diferencial.
  • Atuação em ambientes Data Lake e Data Warehouse, como diferencial.

Benefits

  • Plano de saúde e odontológico.
  • Vale alimentação e refeição.
  • Auxílio-creche.
  • Licença parental estendida.
  • Parcerias com academias e profissionais de saúde e bem-estar via Wellhub (Gympass) e TotalPass.
  • Participação nos Lucros e Resultados (PLR).
  • Seguro de vida.
  • Plataforma de aprendizagem contínua CI&T University.
  • Clube de descontos.
  • Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar.
  • Curso gestante e parentalidade responsável.
  • Parceria com plataformas de cursos online.
  • Plataforma para aprendizagem de idiomas.

Interested in this position?

Apply directly on the company website

Apply Now

Similar Roles

Marqeta

Senior Staff Software Engineer - Data Platform

Marqeta 251-1K Diversified Financial Services

Marqeta is hiring a software engineer to own the company’s data platform foundation, building the lakehouse and streaming ingestion systems that power its broader data and ML organization.

United States Full-time Lead Data Engineer
$200k-$275k
Apache Airflow Apache Spark AWS Go Java Kafka Python
14 minutes ago
Affirm

Software Engineer II, Machine Learning (Feature Platform)

Affirm 1K-5K Diversified Financial Services

Affirm is hiring a software engineer for its ML Feature Platform team to build the self-serve data and feature infrastructure that powers machine learning and decisioning across the company.

United States Full-time Junior Data Engineer Machine Learning Engineer
$146k-$225k
AWS Kotlin Kubernetes Machine Learning MySQL Python
29 minutes ago
Samsara

Senior Data Engineer

Samsara 1K-5K IT Services

Samsara is hiring a Senior Data Engineer in Canada to build and evolve its enterprise data platform, powering analytics, automation, and AI-enabled data workflows across the company.

Canada Full-time Lead Data Engineer
$89k-$105k
Agile Apache Spark API Gateway AWS Azure Databricks Datadog dbt GCP LLM MySQL PostgreSQL Python Serverless Snowflake Splunk SQL SQL Server
29 minutes ago
Penumbra

Clinical Data Analyst II

Penumbra 1K-5K Health Care Providers & Services

Penumbra, Inc. is hiring a Clinical Data Analyst II to support clinical study data analysis, reporting, and data management activities that improve operational processes.

United States Full-time Junior Data Analyst Data Engineer
C# MATLAB Python R SQL
44 minutes ago

You're on a roll! Sign up now to keep applying.

Sign Up

Already have an account? Log in

Used by 14,729+ remote workers