REMOTO PJ
Sobre a empresa:
O nosso cliente é referência na construção de serviços de Dados em Cloud, Big Data Analytics (desde Dashboars/BI a algoritmos de IA),Data Literacy e consultoria. Ajudam seus clientes a alcançarem grandes resultados através da transformação dos dados em informações.
Estamos em busca de um Engenheiro de Dados altamente qualificado e especializado para se juntar à nossa equipe.
Requisitos:
- Apache Beam (Python)
- GCP (Cloud Storage, Bigquery, Dataflow, Airflow)
- Docker e desenvolvimento com devcontainer
- Versionamento de código (Git)
- Conceitos de Datalake, Datawarehouse, modelagem de dados, modelagem dimensional e snowflake
- Conceitos de Desenvolvimento de software
- Scrum
- Streaming de dados
- Kubernetes
Resumo das Atividades
- Modelar e coletar conjuntos de dados alinhados com as necessidades de negócios.
- Desenvolver algoritmos para transformar dados em informações úteis e acionáveis.
- Criar, testar e manter arquiteturas de pipeline de dados.
- Colaborar com a equipe para entender os objetivos dos clientes.
- Criar métodos de validação de dados e ferramentas de análise.
- Garantir a conformidade com a governança de dados e políticas de segurança.