Hub do DataEngineer.Help

Experiência com engenharia de software em Python (ter desenvolvido e/ou mantido uma aplicação em Python);
Experiência com testes automatizados;
Experiência com arquitetura de código (ex: arquitetura limpa, arquitetura hexagonal, etc)
Experiência com ferramentas de transformação de dados, sobretudo dbt;
Experiência prática com Spark, Airflow e Deltalake;
Experiência prática com Terraform aplicado em fluxos automáticos (CI/CD);
Experiência com nuvem, em especial AWS e seus serviços;
Conhecimento sobre conteinerização de serviços (Docker, docker compose, kubernetes, etc);

Desenvolver pipelines de ingestão e transformação de dados com AWS Glue, Lambda e EMR. Otimizar armazenamento e consultas utilizando Amazon S3, Redshift, RDS e DynamoDB. Automatizar processos com Step Functions e scripts Python. Monitorar workloads com CloudWatch e aplicar boas práticas de segurança e compliance. Participar de decisões técnicas junto aos times de engenharia, arquitetura e produto. Contribuir com a evolução da arquitetura em AWS e disseminar boas práticas de engenharia de dados.

Atuação híbrida: Faria Lima- SP.