ANALISTA DADOS SR
Descrição da vaga
Estamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar em um projeto estratégico de migração de dados, realizando a transição de tabelas, pipelines e processos do ambiente Cloudera Hadoop para a AWS. O profissional atuará de ponta a ponta no projeto, desde o levantamento do ambiente atual até a implantação e estabilização das soluções em produção.
Responsabilidades e atribuições
- Realizar o levantamento e análise do ambiente atual em Cloudera Hadoop, identificando tabelas, pipelines, jobs e queries em HQL.
- Mapear e documentar rotinas de orquestração desenvolvidas em Shell Script.
- Migrar queries HQL para serviços AWS, utilizando Amazon Athena, AWS Glue ou Amazon EMR, conforme critérios de custo, performance e necessidade do negócio.
- Redesenhar processos de orquestração baseados em Shell Script para serviços gerenciados da AWS, como AWS Step Functions, AWS Lambda, Amazon EventBridge e Amazon MWAA (Airflow).
- Projetar e implementar a arquitetura do Data Lake em Amazon S3, estruturando as camadas Raw, Trusted e Refined.
- Modelar e implementar estruturas analíticas em Amazon Redshift, quando necessário.
- Desenvolver, testar e validar pipelines de dados, garantindo integridade, qualidade e performance.
- Atuar na implantação, homologação e estabilização das soluções em produção.
- Trabalhar em conjunto com equipes de arquitetura, infraestrutura e negócios para garantir uma migração eficiente e segura.
- Documentar processos, arquiteturas e fluxos desenvolvidos durante o projeto.
Requisitos e qualificações
O que precisamos que você tenha de conhecimento:
Experiência como Engenheiro(a) de Dados.
Vivência em projetos de migração de ambientes de dados.
Conhecimento em Cloudera Hadoop e desenvolvimento de queries em HQL (Hive Query Language).
Experiência com desenvolvimento e manutenção de Shell Script.
Conhecimento sólido dos serviços AWS voltados para engenharia de dados, especialmente:
- Amazon Athena;
- AWS Glue;
- Amazon EMR;
- Amazon S3;
- Amazon Redshift;
- AWS Step Functions;
- AWS Lambda;
- Amazon EventBridge;
- Amazon MWAA (Airflow).
Experiência com modelagem de Data Lake e pipelines de dados.
Conhecimento em SQL e boas práticas de modelagem de dados.
Experiência com processos de ETL/ELT.
Diferenciais:
- Certificações AWS.
- Conhecimento em Python para desenvolvimento de pipelines e automações.
- Experiência com CI/CD aplicado à engenharia de dados.
- Vivência em projetos de modernização de plataformas de dados e migração para Cloud.
Informações adicionais
🍛 Vale-alimentação ou vale-refeição;
👨🏼🎓 Desconto em cursos, universidades e instituições de idiomas;
📚 Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado;
🗣 Mentoring;
💉 Clube de vantagens para consultas e exames;
🏥 Assistência médica;
🦷 Assistência odontológica;
💰 Clube de vantagens e descontos nos melhores estabelecimentos;
🛫 Clube de viagens;
🐶 Convênio para pets.
Etapas do processo
- Etapa 1: Cadastro
- Etapa 2: Mapeamento Comportamental
- Etapa 3: Entrevista Comportamental
- Etapa 4: Entrevista Cliente
- Etapa 5: Contratação
Stefanini: Acreditar para Cocriar 🌟
No Grupo Stefanini, acreditamos que o futuro não acontece sozinho: ele é construído por pessoas que têm atitude para transformar ideias em realidade. Há quase 40 anos, conectamos tecnologia, inovação e talento para criar soluções que transformam negócios e impactam pessoas.
Somos um dos maiores ecossistemas de tecnologia da América Latina, com mais de 35 mil pessoas em mais de 40 países. Ao longo dessa jornada, evoluímos constantemente — e seguimos acreditando que são as nossas pessoas que fazem essa transformação acontecer. 🌎✨
Nosso jeito de ser é guiado por cinco Atitudes Empreendedoras, que fazem parte do nosso DNA e orientam a forma como trabalhamos e construímos o futuro juntos:
🎯 Comprometimento com o cliente — entendemos o que realmente importa e buscamos soluções com excelência e propósito.
🚀 Liderança pelo exemplo — agimos com ética, coerência e protagonismo, fazendo da nossa atitude um exemplo para quem está ao nosso lado.
🤝 Respeito pelas pessoas — valorizamos diferentes perspectivas, cultivamos diálogos abertos e contribuímos para o crescimento uns dos outros.
💡 Coragem para inovar — questionamos o convencional, propomos soluções e temos iniciativa para transformar desafios em novas possibilidades.
🌱 Humildade para aprender — reconhecemos que nunca partimos do zero, aprendemos uns com os outros e sabemos que grandes conquistas não são construídas sozinhas.
Mais do que competências técnicas, buscamos pessoas que se identifiquem com esse jeito de fazer acontecer. Pessoas que tenham vontade de aprender, coragem para inovar, respeito para construir junto e atitude para transformar.
Quer conhecer mais sobre o Grupo Stefanini, nossa cultura e as pessoas que fazem parte dessa história?
▶️ Assista ao nosso vídeo institucional e venha construir o futuro com a gente!
Confira nossas redes sociais