Engenheiro de Dados II – Rio de Janeiro

Engenheiro de Dados II – Grupo Soma – Rio de Janeiro

Responsabilidades e atribuições
A atuação irá ocorrer em diferentes etapas do pipeline de dados e as principais responsabilidades serão:

Planejar e executar a ingestão e estruturação de dados de diferentes fontes;
Tratamento dos dados seguindo as regras de negócio;
Garantir a manutenção de um pipeline estruturado e funcional;
Buscar novas soluções para a evolução do nosso pipeline;
Documentar algoritmos desenvolvidos no código;
Desenvolver documentação para consulta e exploração dos dados

Requisitos e qualificações
Ensino superior: Engenharias, Sistemas da Informação, Ciências da Computação, Análise de Sistemas, Estatística e afins;
Experiência em programação com linguagens voltadas para dados (ex: Python, R, Scala, etc);
Experiência em boas práticas de engenharia de software (ex: documentação, versionamento, testes automatizados, código limpo, etc);
Experiência com arquitetura e modelagem de dados em Data Lake, preferencialmente GCP;
Experiência na implementação, manutenção e orquestração de pipelines de dados (Airflow);
Conhecimento de bancos de dados relacionais, por exemplo: MySql, Sql Server, PostgreSQL e afins;
Conhecimento de processos e ferramentas de ETL;
Buscar sempre o autodesenvolvimento em novas técnicas, ferramentas, etc;
Solução de problemas complexos apoiado em raciocínio lógico;
Habilidade de se comunicar e trabalhar em equipe;
Vontade de aprender coisas novas e adquirir novas habilidades no dia a dia

Diferenciais:
Experiência com BigQuery ou Kubernetes