e atribuições Desenvolver e manter pipelines de dados eficientes e escaláveis, utilizando AWS Glue ; Criar e otimizar processos... modelagem, administração e otimização; Experiência com AWS DMS e SQL CDC para replicação e sincronização de dados em tempo real...
de AtuaçãoDiversos / Outros O que você irá fazer Se você tem paixão por dados, busca soluções robustas e escaláveis e quer... de pipelines e catalogação. Domínio em tecnologias como AWS Redshift, DynamoDB, S3, EMR, Glue, Athena, Lambda...
volume de dados. Desejáveis: Experiência com cloud (Azure, AWS ou GCP). Noções de arquitetura de dados (Data lake, Data.... Responsabilidades Desenvolver pipelines de dados eficientes e escaláveis em PySpark para substituir processos ODI. Criar e manter...
). Habilidade em otimizar processamento de dados para desempenho e custo. Familiaridade com arquitetura de nuvem (AWS) / Databricks na AWS... com PySpark. Proficiência em SQL para manipulação de grandes volumes de dados Experiência com arquiteturas de dados...
de processamento de dados em larga escala. Experiência sólida em ferramentas e estruturas de processamento em larga escala..., como Spring Batch, Apache Nifi ou similares. Experiência com integração de dados e processos ETL. Experiência com bancos de dados...
em modelos de precificação e uso. Conhecimento em Python para automações e análise de dados. Diferenciais: Certificação AWS... o índice FTSE 100. Job Description Estamos em busca de uma pessoa Engenheira de Dados Pleno (PCD) para atuar com foco...
em modelos de precificação e uso. Conhecimento em Python para automações e análise de dados. Diferenciais: Certificação AWS... o índice FTSE 100. Job Description Estamos em busca de uma pessoa Engenheira de Dados Pleno (PCD) para atuar com foco...
soluções de arquitetura e plataforma de dados utilizando AWS, Spark, Python, KAFKA, CI/CD, SQL/NoSQL e IaC; Trabalhar..., Modelagem de Dados, Visualização de Dados, DevOps e DataOps; Habilidade para trabalhar em equipe e se comunicar de forma clara...
pipelines de ingestão, transformação e entrega de dados em tempo real e batch. Desenvolver e otimizar consultas e índices no... Elasticsearch. Configurar e manter dashboards e visualizações com Kibana. Integrar o Elastic Stack com outras fontes de dados...
com Google Cloud Platform (GCP) e/ou Amazon Web Services (AWS). Experiência com arquitetura, ingestão e transformação de dados... Desenvolver e manter processos de ingestão, tratamento, controle, segurança, qualidade e disponibilização de dados em Data Lakes...
e Lakehouse Architecture. Certificações em Databricks, AWS/Azure/GCP. Experiência com Kafka, Event Hubs ou outras soluções..., Kanban). Projeto inicial de 3 meses Atividades: Desenvolver, otimizar e manter pipelines de dados escaláveis...
de dados ✅ Armazenamento e Cloud Experiência com bancos Cloud SQL (AWS RDS, Azure SQL, Google Cloud SQL) Familiaridade...Requisitos Técnicos ✅ Bancos de Dados Relacionais (SQL) Domínio em SQL Server, PostgreSQL ou MySQL Criação...
; Liderar como referência soluções técnicas de Data Analytics; Criar e definir modelos de repositórios de dados; Desenvolver... estratégias de aquisição de dados, recuperação de informação, implementação de dutos de processamento e armazenamento; Apoiar...
; Liderar como referência soluções técnicas de Data Analytics; Criar e definir modelos de repositórios de dados; Desenvolver... estratégias de aquisição de dados, recuperação de informação, implementação de dutos de processamento e armazenamento; Apoiar...
como parte do time. Afinal, o futuro se faz juntos. 💜 Responsabilidades e atribuições: Definir e construir banco de dados... relacionais com arquitetura distribuída para processamento de Big Data. Extrair, transformar e carregar (ETL) dados de um banco...
; Conhecimentos em arquitetura de dados em nuvem na AWS; Conhecimento de outros bancos relacionais (Amazon Aurora, Amazon RDS, MySQL... atividade técnica de engenharia, arquitetura e governança referente à estrutura de dados da companhia. Projetos...
e Kafka; Arquitetura de Data Lakes, Data Warehouses e soluções em nuvem (AWS, Azure, GCP); Modelagem de dados e normalização... de uma grande transformação. Nossa área valoriza as pessoas e possui uma cultura leve, a area de dados não é apenas um setor...
de unificação de dados de diversas fontes e planejar um processo de higienização, unificação e preparação dos dados para um banco... único com tabelas relacionais. Projetar, implementar e gerenciar pipelines de dados robustos e escaláveis para ingestão...
; Orquestrador de pipelines; Experiência com Pyspark e Python; Conhecimento em AWS ou Azure....
; Orquestrador de pipelines; Experiência com Pyspark e Python; Experiência com Datastage; Conhecimento em AWS ou Azure...