Teclógica São Bernardo do Campo, São Paulo, Brazil
Engenheiro(a) de Dados
Junte-se ao nosso time como Engenheiro(a) de Dados! Se você é apaixonado por construir pipelines robustos, trabalhar com grandes volumes de dados e entregar soluções inteligentes para apoiar áreas de negócio, BI e ciência de dados, essa é a sua oportunidade! Buscamos um profissional experiente, organizado e com visão arquitetural para desenvolver, otimizar e sustentar estruturas de dados de alta performance.
Atuação no formato híbrido (4x1) no cliente em São Bernardo do Campo-SP.
Responsabilidades
Construir pipelines de dados eficientes, escaláveis e seguros, garantindo coleta, processamento e disponibilização de dados brutos para diversos consumidores (cientistas de dados, analistas, sistemas, dashboards etc.).
Compreender requisitos de negócio e soluções arquiteturais para implementar pipelines alinhados às diretrizes de Big Data.
Otimizar pipelines existentes, garantindo disponibilidade, performance e redução de custos.
Montar conjuntos de dados grandes e complexos, atendendo requisitos funcionais e não funcionais.
Automatizar processos manuais e implementar melhorias contínuas em fluxos internos de dados.
Contribuir para padrões e diretrizes de ingestão, governança e qualidade de dados.
Realizar testes, garantir integridade, aplicar boas práticas de segurança e acompanhar pipelines em produção.
Trabalhar em parceria com cientistas de dados, analistas e demais equipes para resolver problemas técnicos e evoluir soluções.
Documentar fluxos, arquiteturas e processos, garantindo rastreabilidade e governança.
Requisitos e Qualificações
Experiência com Spark e PySpark para processamento distribuído.
Conhecimento em SQL avançado e bancos relacionais/NoSQL.
Vivência com Airflow para orquestração de pipelines.
Experiência com mensageria e streaming utilizando Kafka.
Experiência com AWS (S3, Glue, Lambda, EMR, CloudFormation etc.).
Domínio de Python e/ou Scala para manipulação e engenharia de dados.
Experiência em ETL, processamento de Big Data, modelagem de dados estruturados e não estruturados.
Conhecimento em pipelines CI/CD, automação e práticas DevOps.
Vivência com ferramentas como Git, Jenkins, DBT, além de tecnologias Big Data (Hive, HBase, Parquet, Sqoop, Flume etc.).
Capacidade de análise, troubleshooting, documentação e comunicação clara com áreas técnicas e de negócio.
Desejável experiência com metodologias ágeis, segurança de dados e arquitetura de dados.
Desejável formação em Ciências da Computação, Engenharia de Software, Sistemas de Informação ou áreas correlatas.
Benefícios
️VR e/ou VA disponibilizado no cartão Flash (bandeira VISA), sem desconto em folha de pagamento. O benefício é mantido em férias e licenças.
PPLR - Programa de Participação nos Lucros e Resultados.
Auxílio Saúde com a mensalidade por nossa conta.
Day Off como presente de aniversário.
Auxílio Home Office.