Sr Data Engineer
Remoto
Tech – Tech /
CLT/ Full Time /
Remote
Sobre a Trela
Nossa missão é ajudar as pessoas a se alimentarem melhor. Para isso, nós selecionamos apenas os melhores produtores e marcas de alimentos em São Paulo e estamos construindo um supply chain que permite vender esses alimentos sem estoque — maximizando seu frescor e eliminando desperdício. Na Trela, você encontra a maior variedade de alimentos saudáveis, entregues na porta da sua casa, aos preços mais competitivos.
Somos uma startup que cresce 40% ao mês e tem o apoio de alguns dos principais investidores em tecnologia da América Latina e do mundo, como Kaszek, SoftBank, General Catalyst e Y Combinator.
Vem fazer parte!
Nossa Stack
O time de Dados da Trela trabalha utilizando Python e SQL em uma plataforma quase totalmente open source, fazendo uso apenas do Snowflake como data warehouse. Para o nosso processo de ELT, utilizamos Apache Kafka para enviarmos os dados para o Snowflake e o dbt para transformá-los em tabelas para serem consumidas pelos nossos usuários internos no Metabase. Tudo isso é orquestrado e gerenciado pelo dagster.
A missão da pessoa Engenheira de Dados Sênior será de manter e evoluir nossa data stack, onde temos 11 componentes, +100 tabelas, arquitetura near real time e integrações com softwares terceiros em parceria com o nosso Senior Data Engineer. Você terá autonomia e responsabilidade sobre a disponibilidade dos dados na camada raw em <5 minutos, apoiar todas as áreas da empresa criando tabelas ouro de acordo com as necessidades garantindo a qualidade e integridade.
Se você é uma pessoa engenheira de dados altamente organizada, autônoma e que prospera em um ambiente de startup de ritmo acelerado, ficaremos felizes em conhecer você!
Responsabilidades e atribuições:
- Diminuir alertas do Dagster pela metade;
- Implementar CI/CD do Dagster para termos as boas práticas de Engenharia de Software;
- Centralizar as 5 principais regras de negócio utilizadas nas métricas comuns à empresa dentro de um modelo gerenciado e mantido pelo time de dados.
- Propor e aplicar uma estrutura de segurança e governança de dados na Trela.
Requisitos e qualificações:
- SQL Avançado e Python;
- Orquestradores (Airflow, Dagster, etc) e Kafka;
- Modelagem de dados;
- Medallion Architecture;
- Processamento de dados near real time;
- Habilidade de resolução de problemas e análise.
Benefícios:
Vale-refeição;
Vale-transporte;
Seguro de vida;
Plano de Saúde e Odontológico;
Totalpass.