Engenharia de Dados - Pleno (Híbrido SP) - 122499
GFT Technologies
O que buscamos:
Buscamos uma pessoa Engenheira de Dados Pleno com experiência em PySpark, AWS, Airflow e Iceberg, além de habilidades em integração de dados com CRMs, especialmente Salesforce. Atuação em modelo híbrido no bairro Itaim Bibi, em São Paulo.
Requisitos e qualificações:
Experiência prática em AWS, incluindo serviços como S3, Lambda, EMR e Redshift; Proficiência em PySpark para processamento de grandes volumes de dados; Experiência com Airflow para orquestração de pipelines de dados; Sólidos conhecimentos em SQL para manipulação e transformação de dados; Experiência com Iceberg para gerenciamento de grandes volumes de dados; Vivência com Salesforce ou outros CRMs para integração de dados com sistemas de BI e análise; Capacidade de identificar, diagnosticar e resolver problemas em pipelines de dados; Experiência com ferramentas como Apache Kafka, RabbitMQ e NiFi para processamento de dados em larga escala; Monitoramento e otimização de performance de sistemas de dados.
Responsabilidades:
Desenvolver e otimizar pipelines de dados utilizando PySpark para processamento distribuído e transformação de grandes volumes de dados; Trabalhar com Airflow para orquestração e automação de processos de dados; Projetar soluções de armazenamento e consulta eficientes utilizando Iceberg e AWS, garantindo escalabilidade e integridade dos dados; Criar e otimizar consultas SQL para manipulação e análise de dados em diferentes fontes (relacionais e não relacionais); Integrar dados de diferentes sistemas, com experiência em CRMs (especialmente Salesforce); Colaborar com equipes de dados, negócios e TI para entender requisitos e implementar soluções adequadas; Assegurar qualidade, consistência e segurança dos dados, promovendo boas práticas de governança e compliance;
Descrição comportamental:
Procuramos uma pessoa que:
Goste de trabalhar em equipe e seja colaborativa em suas atribuições; Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento; Transforme ideias em soluções criativas e busque qualidade em toda sua rotina; Tenha habilidades de resolução de problemas; Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo; Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.
Big enough to deliver – small enough to care.
#VempraGFT
#VamosVoarJuntos
#ProudToBeGFT
Confirm your E-mail: Send Email
All Jobs from GFT Technologies