Data Engineer Sênior

Como você contribuirá para a Qi Network:

Buscamos pessoa data engineer sênior, para fazer parte do nosso time de engenharia de dados, que será responsável pelo desenvolvimento, manutenção e otimização de pipelines de dados escaláveis, garantindo a qualidade, confiabilidade e segurança dos dados.

Que competências esperamos de você:

 PRINCIPAIS RESPONSABILIDADES DO CARGO

• Projetar, desenvolver e manter pipelines de dados escaláveis e eficientes na Google Cloud Platform (GCP);
• Trabalhar com diferentes fontes de dados e arquiteturas para garantir a ingestão, transformação e disponibilização de dados para análise e consumo;
• Implementar boas práticas de engenharia de dados, incluindo versionamento, testes automatizados e monitoramento;
• Atuar na otimização de performance e escalabilidade dos processos de ETL/ELT;
• Desenvolver e gerenciar infraestrutura de dados utilizando Terraform ou outras ferramentas de infraestrutura como código;
• Garantir a governança, segurança e conformidade dos dados de acordo com boas práticas e requisitos regulatórios;
• Colaborar com times multidisciplinares para entender requisitos de negócio e traduzir em soluções de dados eficientes;
• Explorar novas tecnologias e ferramentas para melhorar continuamente a arquitetura de dados;
• Trabalhar ocasionalmente com AWS e Azure para atender a demandas específicas de clientes e projetos;
• Disponibilidade para viagens conforme necessidade do projeto.
• Conhecimento em CI/CD aplicado a Data Engineering;

Requisitos:

Vivência sólida em engenharia de dados, atuando com processamento, transformação e ingestão de dados em larga escala;

Profundo conhecimento em Google Cloud Platform (GCP), incluindo BigQuery, Dataflow, Airflow, Composer, Pub/Sub, Cloud Storage, entre outros serviços;

Vivência com AWS e Azure (nível intermediário para integração e suporte a soluções);

Conhecimento avançado em bancos de dados relacionais e não relacionais, como PostgreSQL, MySQL, MongoDB, Cassandra etc.;

Vivência com Apache Airflow e orquestração de pipelines de dados;

Proeficiência em Python e SQL para manipulação e transformação de dados;

Vivência com ferramentas de infraestrutura como código (IaC), como Terraform;

Diferenciais:

Certificações em GCP, AWS ou Azure;

Vivência com Kafka, Spark ou outras tecnologias de streaming;

Vivência em ferramentas de visualização de dados (Tableau, Power BI);

Vivência com metodologias DevOps aplicadas a dados.

Quem é a Qi Network:

A Qi Network é especialista em inovação na nuvem nas áreas de Produtividade, Modernização de Infraestrutura e Inteligência de Dados e é parceira Premier da Google no Brasil. Somos certificados como especialistas em Transformação do Trabalho, além de possuir profissionais certificados em Google Cloud nas áreas de arquitetura de soluções, infraestrutura de TI e projetos de análise de dados. Desde 2011 já ajudamos mais de 1.000 empresas a evoluírem e transformarem seus negócios com a computação em nuvem.