Especialista de Dados | Engenharia de Plataforma de Dados

Sobre esta vaga

Nossa área de Engenharia de Dados

Nossa área é responsável pelo desenvolvimento e manutenção da Plataforma de Dados, assim como pela malha de ingestão de dados provenientes de sistemas transacionais, operacionais, de relacionamento com clientes, entre outros. Armazenamos todos os dados carregados pelos pipelines no Data Lake, essenciais para a tomada de decisões do negócio. Monitoramos continuamente os pipelines de extração de dados para garantir a funcionalidade de leitura e carga, além de otimizar sua performance e eficiência.

Suas atividades como CSixer

• Programar de verdade: desenvolver e evoluir frameworks, bibliotecas, APIs e ferramentas internas em Python e Golang para sustentar a nossa plataforma de dados;

•
Arquitetura e Cloud: projetar e implementar arquiteturas de software robustas e escaláveis no Google Cloud Platform (GCP), gerenciando a infraestrutura subjacente de ferramentas como Airflow, Dataflow e clusters Kubernetes;

•
Automação e CI/CD: criar e manter esteiras complexas de CI/CD, garantindo qualidade, testes automatizados e implantações contínuas (Infrastructure as Code);

•
Evolução da Plataforma: pesquisar, propor e implementar novas tecnologias e padrões de arquitetura que otimizem o consumo de recursos na nuvem e melhorem a resiliência dos nossos ecossistemas;

•
Engenharia de Confiabilidade: atuar na observabilidade, monitoramento e performance da plataforma como um todo, não apenas dos pipelines individuais.

Requisitos e experiência

• Mindset de Engenheiro de Software: sólida experiência em desenvolvimento de software backend/plataforma (Esta não é uma vaga para criação de pipelines de ETL ou modelagem em SQL);

• Linguagens: domínio profundo em Python (obrigatório) e experiência/vivência com Golang (muito desejável e será um diferencial de peso);

• Boas práticas: domínio em arquitetura de software, Clean Code, Design Patterns, SOLID e forte cultura de testes (unitários, integração e e2e);

• DevOps & infra: conhecimento profundo em CI/CD, ambientes conteinerizados (Docker/Kubernetes) e Infrastructure as Code (Terraform, etc.);

• Cloud & orquestração: experiência com administração e deploy de orquestradores (como Airflow em larga escala), arquitetura orientada a eventos e forte base em Cloud Computing (GCP é o nosso ambiente principal);

• Disponibilidade para atuar de forma presencial na região central de São Paulo (Av. 9 de Julho);

• Diferenciais:
Certificações de Arquitetura ou Engenharia no Google Cloud Platform (GCP);
Experiência prévia criando ferramentas internas (Developer Tooling) para times de dados.

Nossos benefícios

•
Vale-refeição;

• Vale-alimentação;

•
Plano de saúde e odontológico;

•
Auxílio-creche;

•
Seguro de vida;

•
WellHub |…