No nosso time de Engenharia de Dados, buscamos alguém com expertise em design de estruturas de dados, definição de modelos e padrões logidos de dados como unica fonte de informação (data lake com governança de dados ); Alguém que tenha experiência em arquitetura de Dados; Desenvolvimento Python; Experiência em coleta, transformação e carga de dados (ferramentas de ETL); Experiência em trabalhar com grandes volumes de dados; Modelagem de Banco de Dados (SQL, Hadoop, MySQL, Redshift, ); Conhecimento em bancos NoSQL (MongoDB, DynamoDB ); Integração de dados com outros sistemas Plataforma AWS; Experiência em workloads de missão crítica; Containers (Docker, ECS, Kubernetes, EKS Openshift); DevOps (Gitlab; Gitlab CI, Puppet); Cloudformation (Code Build, CodePipeline) Softwares Necessários: API Gateway. Kafka. AWS Lake Formation. AWS Banco de Dados (Redshift, MySQL, Dynam DB,..). AWS Athena. AWS GLUE ( Crawlers, Jobs, workflow). AWS Quick Sigth. AWS EMR. AWS Lambda.
Aqui está uma visão geral dos requisitos da vaga:
* Inglês Avançado;
* Experiência em arquitetura de Dados;
* Desenvolvimento Python;
* Experiência em coleta, transformação e carga de dados (ferramentas de ETL);
* Experiência em trabalhar com grandes volumes de dados;
* Modelagem de Banco de Dados (SQL, Hadoop, MySQL, Redshift, );
* Conhecimento em bancos NoSQL (MongoDB, DynamoDB );
* Integração de dados com outros sistemas Plataforma AWS;
* Experiência em workloads de missão crítica;
* Containers (Docker, ECS, Kubernetes, EKS Openshift);
* DevOps (Gitlab; Gitlab CI, Puppet);
* Cloudformation (Code Build, CodePipeline)