Senior Data Engineer (exp. DBA)
Zallpy
Tue, Aug 06, 2024, 5:52 PM
R$15K - R$18K
Technology
4 years | Java
4 years | AWS
4 years | SQL
4 years | Python
3 years | Google Cloud Platform (GCP)
required
Job Description
Muito prazer, somos a Zallpy!
Somos muito mais que uma empresa de tecnologia; somos uma comunidade diversa, plural e talentosa. Nosso propósito é liderar a transformação digital, com excelência e agilidade, promovendo crescimento mútuo e genuíno em relações éticas e duradouras. Flexibilidade é uma de nossas marcas registradas, atuamos em diferentes modelos e formatos de equipe, mantendo nossa cultura leve, colaborativa e integrada, proporcionando equidade de oportunidades em um espaço onde todos se sintam seguros e ouvidos.
Responsibility and Attributions
- Desenvolver e manter pipelines de dados estruturados e desestruturados, seguindo as melhores práticas de ETL;
- Realizar modelagem dimensional para otimizar o armazenamento e recuperação de dados;
- Trabalhar com feature engineering para criar variáveis relevantes e significativas;
- Gerenciar bancos de dados relacionais e chave-valor;
- Construir data pipelines para coleta, transformação e carga de dados;
- Extrair dados de APIs e sistemas externos;
- Lidar com filas e streaming para processamento de dados em tempo real;
- Utilizar ferramentas de ETL/ELT para automatizar processo
- Desenvolver soluções de engenharia de dados em Python, Java ou Scala;
- Ter conhecimento sobre arquitetura de Data Plataforma, Data Warehouse e Data Lake;
- Trabalhar com bancos de dados SQL e NoSQL e com plataformas em nuvem;
- Implementar práticas de DataOps para melhorar a eficiência do ETL e permitir self-service analytics.
Requirements and Qualifications
- Curso Superior ou pós-graduação em Matemática, Estatística, Tecnologia da Informação ou semelhantes;
- Habilidades de comunicação oral e escrita em inglês;
- Atuação prévia como DBA;
- Experiência em SQL para manipulação e transformação de dados;
- Experiência em Modelagem dimensional;
- Experiência em feature engineering
- Experiência em gerenciamento de bancos de dados relacionais e chave-valor;
- Experiência em construção de data pipelines;
- Experiência em manipulação de APIs para extração de dados;
- Experiência em manipulação de Filas/Streaming para extração de dados;
- Experiência com ferramentas de ETL/ELT;
- Experiência com Python e/ou Java para desenvolvimento de soluções de engenharia de dados;
- Experiência com Scala para desenvolvimento de soluções de engenharia de dados;
- Experiência com ferramentas de versionamento;
- Experiência com arquitetura de Data Plataforma, Data Warehouse e Data Lake;
- Experiência em bancos de dados SQL e NoSQL;
- Experiência com serviços em nuvem GCP (BigQuery, Cloud Storage, Cloud Functions);
- Experiência com serviços em nuvem AWS (Athena, S3 EMR, Lambda, State Machines, IAM);
- Experiência em ferramentas de DataOps para aprimoramento de ETL, Self Service Analytics;
- Conhecimento sobre a Lei Geral de Proteção de Dados (LGPD).
About the company
Zallpy
Since 2019, Outsourcing/Offshoring, Brazil.
Somos especialistas em desenvolver soluções digitais customizadas, com tecnologia de ponta e de alto valor agregado. Somos parceiros estratégicos de grandes players internacionais, entregando inovação e inteligência a multinacionais de diversos segmentos. Atuamos como uma extensão do cliente, com alto grau de envolvimento no negócio e foco em resultados. E o nosso ambiente de trabalho é incrível! Colaborativo, integrado e inspirador, sempre incentivando a troca de experiências e a criatividade. Além disso, trabalhamos com diferentes modelos, com flexibilidade e agilidade para montar equipes sob medida e oferecer o melhor perfil e expertise técnicos para cada desafio.
Port
501-1.000 employees
Segment
Outsourcing/Offshoring
Type
Private company
Principal
Av. Farrapos,3857,Floresta,Porto Alegre (RS)
Zallpy
Do not waste time and apply for this vacancy! Easy and simple!
You are being indicated by