7 дней назад
Senior Data Engineer (AI)
Мэтч & Сопровод
Для мэтча с этой вакансией нужен Plus
Описание вакансии
Текст:
TL;DR
Senior Data Engineer (Databricks/PySpark): Desenvolvimento, manutenção e otimização de pipelines de dados financeiros para reconciliação, rotinas de P&L e processos globais de fechamento com um accent on qualidade, rastreabilidade e escalabilidade. Focus on integração de novas fontes, otimização de Delta Lake e Lakehouse, suporte à produção e integração de modelos de AI em fluxos de dados.
Localização: Brasil, trabalho remoto. Para residentes da Região Metropolitana de Campinas, a presença nos escritórios da cidade é obrigatória conforme a política vigente.
Empresa
A CI&T desenvolve soluções de transformação tecnológica com foco em AI Deployment, modernização de aplicações, Data & AI, martech e estratégia de negócios.
O que fazer
- Desenvolver, manter e aprimorar pipelines de dados com Databricks, PySpark, Python e SQL.
- Integrar novas fontes de dados e transformar dados financeiros brutos em conjuntos curados e confiáveis.
- Apoiar reconciliações financeiras, rotinas de P&L e processos globais de fechamento.
- Processar grandes volumes de dados estruturados e semiestruturados, otimizando transformações, armazenamento e consultas com Delta Lake e arquitetura Lakehouse.
- Monitorar, solucionar problemas e oferecer suporte a pipelines existentes, garantindo processamento diário e mensal confiável.
- Colaborar com engenharia de dados, finanças, áreas de negócio e tecnologia em iniciativas de qualidade, governança e integração de AI.
Requisitos
- Experiência sólida com Databricks, incluindo notebooks, jobs, workflows, clusters e boas práticas.
- Domínio de PySpark, Python e SQL para processamento e transformação de dados.
- Experiência com Delta Lake, tabelas Delta, processamento incremental e arquitetura Lakehouse.
- Conhecimento do ecossistema Azure, especialmente Azure Data Lake Storage e padrões de integração de dados.
- Experiência com pipelines financeiros, reconciliação, P&L, fechamento ou processos críticos de negócio.
- Inglês necessário para interação com equipes globais, discussões técnicas e documentação.
Bom ter
- Experiência com otimização de Delta Lake, Databricks Workflows, Databricks Apps ou Streamlit.
- Conhecimento de qualidade e observabilidade de dados, incluindo validações, reconciliações, monitoramento, logs, alertas e métricas de execução.
Cultura e vantagens
- Ambiente colaborativo e analítico, com atuação junto a equipes globais e multifuncionais.
- Atuação em soluções de dados escaláveis com impacto em processos financeiros estratégicos.
- Benefícios disponíveis conforme as políticas da CI&T no Brasil.
- Suporte para obtenção de laudo caracterizador e adaptações necessárias durante o processo seletivo.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Похожие вакансии
14 дней назад
Senior Data Engineer, Data Lake
9 дней назад
Senior Data Platform Engineer (Azure/Databricks)
4 900 - 6 700$
8 дней назад
Data Architect
Databricks
12 дней назад
Sr Designated Support Engineer (Apache Spark)
13 дней назад
Senior Data Engineer (Snowflake)
8 дней назад