<p>Estamos em busca de um(a) <strong>Engenheiro(a) de Dados Pleno</strong> para atuar em um projeto estratégico de migração de dados, realizando a transição de tabelas, pipelines e processos do ambiente <strong>Cloudera Hadoop</strong> para a <strong>AWS</strong>. O profissional atuará de ponta a ponta no projeto, desde o levantamento do ambiente atual até a implantação e estabilização das soluções em produção.</p><ul> <li>Realizar o levantamento e análise do ambiente atual em Cloudera Hadoop, identificando tabelas, pipelines, jobs e queries em HQL.</li> <li>Mapear e documentar rotinas de orquestração desenvolvidas em Shell Script.</li> <li>Migrar queries HQL para serviços AWS, utilizando <strong>Amazon Athena</strong>, <strong>AWS Glue</strong> ou <strong>Amazon EMR</strong>, conforme critérios de custo, performance e necessidade do negócio.</li> <li>Redesenhar processos de orquestração baseados em Shell Script para serviços gerenciados da AWS, como <strong>AWS Step Functions</strong>, <strong>AWS Lambda</strong>, <strong>Amazon EventBridge</strong> e <strong>Amazon MWAA (Airflow)</strong>.</li> <li>Projetar e implementar a arquitetura do Data Lake em <strong>Amazon S3</strong>, estruturando as camadas <strong>Raw</strong>, <strong>Trusted</strong> e <strong>Refined</strong>.</li> <li>Modelar e implementar estruturas analíticas em <strong>Amazon Redshift</strong>, quando necessário.</li> <li>Desenvolver, testar e validar pipelines de dados, garantindo integridade, qualidade e performance.</li> <li>Atuar na implantação, homologação e estabilização das soluções em produção.</li> <li>Trabalhar em conjunto com equipes de arquitetura, infraestrutura e negócios para garantir uma migração eficiente e segura.</li> <li>Documentar processos, arquiteturas e fluxos desenvolvidos durante o projeto.</li> </ul><h3>O que precisamos que você tenha de conhecimento:</h3><p>Experiência como <strong>Engenheiro(a) de Dados</strong>.</p><p>Vivência em projetos de migração de ambientes de dados.</p><p>Conhecimento em <strong>Cloudera Hadoop</strong> e desenvolvimento de queries em <strong>HQL (Hive Query Language)</strong>.</p><p>Experiência com desenvolvimento e manutenção de <strong>Shell Script</strong>.</p><p>Conhecimento sólido dos serviços AWS voltados para engenharia de dados, especialmente:</p><ul> <li>Amazon Athena;</li> <li>AWS Glue;</li> <li>Amazon EMR;</li> <li>Amazon S3;</li> <li>Amazon Redshift;</li> <li>AWS Step Functions;</li> <li>AWS Lambda;</li> <li>Amazon EventBridge;</li> <li>Amazon MWAA (Airflow).</li> </ul><p>Experiência com modelagem de Data Lake e pipelines de dados.</p><p>Conhecimento em SQL e boas práticas de modelagem de dados.</p><h3>Experiência com processos de ETL/ELT.</h3><h3></h3><p></p><p><strong>Diferenciais:</strong></p><ul> <li><strong>Certificações AWS.</strong></li> <li><strong>Conhecimento em Python para desenvolvimento de pipelines e automações.</strong></li> <li><strong>Experiência com CI/CD aplicado à engenharia de dados.</str