Descrição da vaga
Qual perfil nós buscamos?
Na Confidencial (Apenas para Cadastrados) os nossos projetos são elaborados de acordo com a necessidade de cada cliente de maneira customizada proporcionando assim o verdadeiro IMPACTO por onde passamos.
Como Data Engineer Senior, você trabalhará desenhando e modelando novas soluções de arquitetura de dados seguras, confiáveis, disponíveis e escaláveis, desenvolvendo estratégias de aquisição de dados, recuperação de informação, implementação de pipelines de processamentos de dados e armazenamento de dados dentre outras possibilidades para produzir análises detalhadas sobre produtos e usuários.
Responsabilidades e atribuições
Como será o seu dia a dia:
- Desenhar e modelar novas soluções de arquitetura de dados seguras, confiáveis, disponíveis e escaláveis;
- Criar e definir modelagens de repositórios de dados da instituição tais como (Data Lakes, Data Warehouses, Bases relacionais e não relacionais);
- Desenvolver estratégias de aquisição de dados, recuperação de informação, implementação de pipelines de processamentos de dados e armazenamento de dados;
- Manter repositórios de dados seguros e pipelines de integração confiáveis e escaláveis;
- Planejar e modelar estruturas de comunicação de dados entre sistemas legados e repositórios de dados;
- Implementar as melhores práticas de segurança e criptografia para ambiente Big Data.
Requisitos e qualificações
O que precisamos que você tenha:
- Experiência sólida com programação Python;
- Experiência com banco de dados SQL e NoSQL;
- Experiência com Cloud Computing, preferencialmente AWS nas seguintes ferramentas (S3, EC2, IAM, VPC, Lambda, SNS, SQS);
- Experiência com sistema de controle de versões (Git);
- Experiência com Linux e Shell script;
- Experiência no desenvolvimento de pipelines de ETL e ELT utilizando ferramentas como Apache Airflow, Apache NiFI, Apache Spark e EMR;
- Experiência na criação de infraestrutura utilizando frameworks como Terraform, CloudFormation e/ou Serverless;
- Experiência com IaC (terraform, cloudformation)
- Experiência com automação de processos (CI/CD);
- Inglês no mínimo intermediário.
Será um diferencial se você tiver:
- Experiência com Data Science;
- Experiência com programação Scala;
- Experiência com Cloud Computing, preferencialmente AWS nas seguintes ferramentas (Redshift, RDS, CloudWatch, EMR);
- Experiência com ferramentas de streaming de dados (Kafka, Kinesis);
- Experiência comprovada na criação e manutenção de Data Lake;
- Experiência com DataViz (PowerBI, Tableau).
Informações adicionais
Quer saber sobre os nossos benefícios?
Aqui vai…
- Temos um mega cartão de benefícios flex com várias categorias, refeição, alimentação, mobilidade, saúde, cultura e educação, (R$2.000,00/mês) o nosso famoso DS Flex!
- Plano de Saúde com cobertura nacional e acomodação em apartamento, sem desconto para o funcionário (com coparticipação).
- Clima leve e descontraído;
- Horário flexível (8 horas por dia);
- Ambiente criativo e inovador;
- Trabalho remoto: você pode trabalhar de qualquer lugar do Brasil;
- Caso queira trabalhar presencial temos a nossa sede sob demanda em Belo Horizonte ou São Paulo com um ambiente super descontraído e acolhedor;
- Acessos (sem nenhum custo) aos cursos da AcademyDS;
- Investimento em Cursos e Certificações (Amazon AWS, Google GCP, Microsoft Azure, Snowflake etc.);
- Seguro de Vida;
Pensa que acabou??? Ainda não...
- Possibilidade de trabalhar e ter contato com alguns do maiores projetos de engenharia e ciências de dados em execução no país;
- Ter mentoria e apoio de grandes profissionais que trabalham de players como Netflix, Magalu, Microsoft, entre outras;
- Ser parte ativa da jornada de uma empresa que, de fato, veio para mudar os paradigmas da Engenharia e Analytics;
A Confidencial (Apenas para Cadastrados) se orgulha de:
Ser uma empresa que não só valoriza, mas também cultiva um ambiente diverso. Nós celebramos todas as diferenças e batalhamos diariamente para tornar nosso time cada vez mais inclusivo. Nós não compactuamos com NENHUMA CONDUTA DISCRIMINATÓRIA. Aqui, todos são sempre bem-vindos!
E AÍ, SE IDENTIFICOU COM A NOSSA CULTURA? ENTÃO CORRE PARA SE INSCREVER