Engenheiro de Dados Junior
Descrição da vaga
Seu dia a dia...
Como um (a) engenheiro(a) de dados na Big Data você terá o papel de implementar produtos de dados: soluções em software, cujo principal foco está nos dados. Sua responsabilidade será desde o entendimento do problema e conhecimento dos clientes, até a escolha de tecnologias, implementação da arquitetura, seu provisionamento em nuvem, implementação do código de aplicação que faz as manipulações necessárias, e tarefas de deploy dessa solução.
O contexto vai desde os produtos que a empresa comercializa, até outros cujo principal uso é interno.
Trabalhamos com dados de negócio e também com a coleta e processamento de inúmeras fontes de dados públicas para criação de features de modelos de machine learning.
Responsabilidades e atribuições
- Modelagem de dados
- Realizar rotinas de consulta, atualização e inserção em banco de dados;
- Otimização de consultas (criação de índices, views, constraints, triggers, etc.)
- Manutenção de bancos de dados
- Utilizar de serviços open-source, e gerenciados pela AWS, na área de engenharia de dados. Realizar manutenções no uso dos mesmos;
- Automação de processos com Airflow
- Implementação e manutenção de pipelines de dados
- Modularização e empacotamento de aplicações para serem utilizadas pelo time ou demais projetos
- Implementar testes para garantir a robustez dos códigos;
- Seguir boas práticas de programação (documentação, clean code, SOLID, etc).
- Revisão de código
- Orientar e auxiliar estagiários em suas tarefas.
Requisitos e qualificações
Python:
- Iteradores e geradores
- Manipulação de estruturas de dados: list, set, dict
- Tratamento de exceções: blocos try/except
- Orientação a objetos: definição, herança, métodos estáticos
- Organização de projetos: uso de imports e gestão de dependências com pip
- Familiaridade com algumas das bibliotecas: scrapy, selenium, pandas, numpy, boto3
- Adequação a estilos de código e boas práticas: PEP8, DRY etc.
- Testes unitários
- Capacidade de trabalhar colaborativamente com Git, seguindo normas de contribuição
SQL:
- Buscas de dados com filtros e ordenação
- Atualização de dados
- Funções de Agregação de dados
- União de Tabela de forma lateral e vertical
- Criação de Tabelas, e constraints para construção
- Modelagem Relacional (normalização, relacionamentos, chaves)
- Views e materialized views
- Noções básicas em Linux
- Noções em Cloud
- Conteinerização de aplicações simples com docker
- Experiência com Airflow ou outras plataformas de orquestração
- Scripts básicos em bash
- Experiência com pipelines de ETL
Será um diferencial…
- Construção de pipelines de CI/CD (GitLab CI / GitHub Actions)
- Implementação de infraestrutura em nuvem como código (Terraform)
- Familiaridade com programação paralela
Informações adicionais
O que você encontrará aqui:
Ambiente informal e de muita troca e amizade;
Pessoas apaixonadas pelo que fazem;
Um aprendizado novo por dia;
Local que está buscando seu melhor todos os dias;
Crescimento e oportunidades mil ao seu redor;
Salário competitivo e benefícios flexíveis.
O Que Oferecemos:
🛒 Vale-refeição/Alimentação – Caju
🩺 Plano médico – Amil
⏰ Flexibilidade nos seus horários, nosso time é 100% remoto, você pode trabalhar onde quiser;
💻 Auxílio home office
🚴🏻♀️ Auxílio Atividade Física
📚 Auxílio Educacional
🎁Day Off no Aniversário
💰Participação nos Lucros PLR
Se identificou? Se inscreva! Esperamos por você! #VemSerBigDater
Etapas do processo
- Etapa 1: Cadastro
- Etapa 2: Prova Técnica
- Etapa 3: Bate Papo com People
- Etapa 4: Entrevista Técnica
- Etapa 5: Cultura
- Etapa 6: Carta Proposta
- Etapa 7: Contratação
Somos a Big Data!
Somos líderes de mercado no segmento de Inteligência Artificial no Brasil, desde 2012!🚀
Transformamos dados em inteligência de negócio e impulsionamos resultados dos nossos clientes através de recomendações assertivas e otimização de preço de venda. Aqui, nossos desafios não somente são cumpridos, mas abraçados com entusiasmo para construir produtos que geram valor e um impacto real.
Valorizamos pessoas com mentalidade empreendedora, daquelas que não se contentam com o funcionalismo e buscam constantemente maneiras de fazer a diferença! Como dizemos por aqui, “saia dos máximos locais e alcance os melhores resultados possíveis!”
Nosso ambiente é para quem busca protagonismo, força e proatividade. Queremos embarcar em desafios juntos, crescendo e evoluindo como time, sempre com foco no que realmente importa: sermos donos do nosso destino e protagonistas da nossa história!
Junte-se a nós e faça parte de uma equipe que valoriza a iniciativa e a vontade de fazer a diferença.
Estamos empolgados para receber você e juntos alcançarmos novos horizontes! 💙
E olha só alguns dos clientes que já cresceram com a gente: Dexco, Haleon, Kimberly Clark, Eagle Rock, Liberty Coca-Cola, Nivea, Jonhson & Jonhson, Sanofi & Medley, Germed, Natura, Kraft Heinz, P&G, Nestlé, WP Lab, Colgate Palmolive, Banco Santander, Red Bull e muitos outros.
MAIS DA BIG DATA POR AÍ