Data Engineer Senior
EvcomX | Porto Alegre - RS | Remoto
O time de engenharia de dados da EvcomX é responsável por
construir e manter toda a infraestrutura que permite aos nossos cientistas de
dados e clientes transformarem dados brutos em valor de negócio. Trabalhamos
com arquitetura medallion em ambientes Databricks, processando grandes volumes
de dados industriais e garantindo que pipelines críticas de produção operem com
alta disponibilidade.
Nossos engenheiros de dados atuam próximos aos cientistas de
dados, apoiando desde a experimentação até a operacionalização de modelos em
produção, incluindo pipelines de inferência em near-real-time que impactam
diretamente as operações dos nossos clientes.
Faixa salarial
A combinar
Regime de contratação
CLT, PJ, Cooperado
Benefícios
- Definir e evoluir a arquitetura de dados da empresa, tomando decisões técnicas estratégicas sobre design de sistemas, padrões e tecnologias;
- Estabelecer e documentar padrões técnicos, guidelines e boas práticas para o time de dados;
- Mentorar engenheiros(as) júnior e pleno, apoiando seu crescimento técnico e de carreira;
- Colaborar com times de produto, ciência de dados e engenharia de software para alinhar soluções de dados às necessidades de negócio;
- Projetar e desenvolver pipelines de dados complexos e de alta performance utilizando Spark, Delta Lake, Iceberg e Kafka;
- Arquitetar soluções de data quality, observabilidade e governança de dados;
- Otimizar performance e custos das pipelines existentes.
- 5+ anos de experiência em engenharia de dados, com histórico comprovado de entrega de projetos complexos;
- Domínio de Apache Spark (preferencialmente PySpark) e otimização de performance;
- Experiência sólida com arquiteturas de Data Lakehouse, formatos colunares (Delta, Parquet, Iceberg) e padrões como medallion;
- Conhecimento profundo de modelagem de dados e design de sistemas distribuídos;
- Experiência com cloud (Azure ou AWS) e infraestrutura como código.
- Familiaridade com Databricks (Jobs, Workflows, Unity Catalog);
- Experiência com processamento de dados em streaming (Kafka, Spark Streaming);
- Experiência com ferramentas de data quality (Great Expectations, dbt tests) e observabilidade;
- Experiência com ferramentas de modelagem de dados (dbt, delta live tables, etc).
A Evcomx é vanguardista no avanço da Indústria 4.0 e estamos
comprometidos em construir o futuro com ciência de dados, trabalhando
lado a lado com grandes empresas do Rio Grande do Sul e de todo o Brasil para
impulsionar a inovação e transformar o cenário. Na Evcomx, você terá a
oportunidade de trabalhar em projetos desafiadores e impactantes,
contribuindo para a construção de soluções de ponta em ciência de dados.
Junte-se a nós e faça parte do futuro da tecnologia!
Data Engineer Senior
EvcomX | Porto Alegre - RS | Remoto
Descrição da vaga
O time de engenharia de dados da EvcomX é responsável por
construir e manter toda a infraestrutura que permite aos nossos cientistas de
dados e clientes transformarem dados brutos em valor de negócio. Trabalhamos
com arquitetura medallion em ambientes Databricks, processando grandes volumes
de dados industriais e garantindo que pipelines críticas de produção operem com
alta disponibilidade.
Nossos engenheiros de dados atuam próximos aos cientistas de
dados, apoiando desde a experimentação até a operacionalização de modelos em
produção, incluindo pipelines de inferência em near-real-time que impactam
diretamente as operações dos nossos clientes.
Responsabilidades e atribuições
- Definir e evoluir a arquitetura de dados da empresa, tomando decisões técnicas estratégicas sobre design de sistemas, padrões e tecnologias;
- Estabelecer e documentar padrões técnicos, guidelines e boas práticas para o time de dados;
- Mentorar engenheiros(as) júnior e pleno, apoiando seu crescimento técnico e de carreira;
- Colaborar com times de produto, ciência de dados e engenharia de software para alinhar soluções de dados às necessidades de negócio;
- Projetar e desenvolver pipelines de dados complexos e de alta performance utilizando Spark, Delta Lake, Iceberg e Kafka;
- Arquitetar soluções de data quality, observabilidade e governança de dados;
- Otimizar performance e custos das pipelines existentes.
Requisitos e qualificações
- 5+ anos de experiência em engenharia de dados, com histórico comprovado de entrega de projetos complexos;
- Domínio de Apache Spark (preferencialmente PySpark) e otimização de performance;
- Experiência sólida com arquiteturas de Data Lakehouse, formatos colunares (Delta, Parquet, Iceberg) e padrões como medallion;
- Conhecimento profundo de modelagem de dados e design de sistemas distribuídos;
- Experiência com cloud (Azure ou AWS) e infraestrutura como código.
Requisitos desejáveis
- Familiaridade com Databricks (Jobs, Workflows, Unity Catalog);
- Experiência com processamento de dados em streaming (Kafka, Spark Streaming);
- Experiência com ferramentas de data quality (Great Expectations, dbt tests) e observabilidade;
- Experiência com ferramentas de modelagem de dados (dbt, delta live tables, etc).
Faixa salarial
A combinar
Regime de contratação
CLT, PJ, Cooperado
Sobre a empresa
A Evcomx é vanguardista no avanço da Indústria 4.0 e estamos
comprometidos em construir o futuro com ciência de dados, trabalhando
lado a lado com grandes empresas do Rio Grande do Sul e de todo o Brasil para
impulsionar a inovação e transformar o cenário. Na Evcomx, você terá a
oportunidade de trabalhar em projetos desafiadores e impactantes,
contribuindo para a construção de soluções de ponta em ciência de dados.
Junte-se a nós e faça parte do futuro da tecnologia!