Engenheiro de Dados

Gestor GFT : Keyla de Rozzo Delivery GFT: Claudio Gomes de Araújo Gestor Banco: Marcelo Suenaga  / Área: Risco (Banco Santander - Radar) KE: 044135-029 Modelo de Atuação: Híbrido 3x2 – Santo Amaro (Radar) Requisitos: 1.Conhecimento em Microsoft Azure:   •Familiaridade com os principais serviços da Microsoft Azure, incluindo o Azure Data Factory, VMs(Maquinas virtuais), Azure StorageAccounts, Azure Databricks, AKS(Azure Kubernetes),CosmosDB entre outros. 2.Processamento Batch e Streaming de Dados:   •Conhecimento em processamento de dados em lotes e em streaming, com a capacidade de projetar, implementar e manter pipelines de processamento de dados. 3.Habilidade em Databricks:   •Experiência em trabalhar com Apache Spark em Databricks, incluindo a criação e otimização de pipelines de dados. 4.Experiência em Pyspark e Python:   •Fortes habilidades de programação em Pyspark e Python para desenvolver, depurar e manter códigos de transformação de dados. 5.Vivência em Ambientes On-Premises (Cloudera):   •Desejavel Experiência anterior com a plataforma Cloudera ou outras soluções on-premises para big data, incluindo Hadoop, HBase e Hive. 6.Conhecimento em DevOps:   •Familiaridade com o uso do Jenkins para integração e entrega contínua (CI/CD), além de automação de tarefas de implantação e gerenciamento de pipelines. 7.Git:   •Proficiência em Git para controle de versão de código-fonte e colaboração eficaz em equipes de desenvolvimento. 8.Métodos Ágeis: 9.Conhecimento Opcional em Riscos de Crédito:   •Familiaridade com riscos de crédito é desejável, mas opcional, e pode ser uma vantagem adicional para a posição, dependendo das necessidades da equipe e da empresa. 10.Orquestração (por exemplo, Control-M ou outros): •Conhecimento em ferramentas de orquestração de processos, o que é importante para o agendamento e controle de fluxos de trabalho.