Data Engineer Platform
State of São Paulo, Brazil - Remote
Applications have closed
QuintoAndar
Encontre imóveis para alugar e comprar, agendamento de visitas online e contrato digital. Aluguel sem fiador e apoio em toda a compra de imóvel. Anuncie grátis!Proteja-se do Coronavirus
Com a propagação cada vez mais rápida do novo Coronavírus (Covid-19) nós priorizamos a segurança de colaboradores, parceiros, clientes e candidatos. Por isso, todos os nossos times estão trabalhando de casa. Além disso, adaptamos também o processo seletivo de todas as nossas oportunidades para que você possa realizar as etapas sem sair de casa e se mantendo em segurança.
Sobre o QuintoAndar:
O QuintoAndar é uma empresa de tecnologia que nasceu para simplificar a vida de quem busca um novo lar. Estamos revolucionando o mercado imobiliário com um modelo de negócios pioneiro no mundo. Contamos com muita gente bacana para garantir que milhares de pessoas pelo Brasil vivam melhor. Nosso time já conta com mais de mil pessoas e temos escritórios em São Paulo e Campinas. O serviço do QuintoAndar já está disponível em mais de 20 cidades brasileiras.
Sobre trabalhar no QuintoAndar:
- Possibilidade de aprendizado;
- Oportunidade de trabalhar em um time que busca utilizar as melhores práticas e ferramentas do mercado;
- Atuar em um ambiente informal com uma estrutura horizontal;
- Ser parte de um time que trabalha em um projeto de alto impacto e que afeta a vida de milhares de pessoas.
Sobre a posição
O(a) Data Platform Engineer tem uma sólida formação em ciência da computação aplicada a desafios de engenharia de dados.
O principal objetivo da equipe de engenharia de dados é identificar as necessidades da empresa relacionadas à análise de dados, ciência e engenharia, a fim de construir uma plataforma de alto desempenho e autoatendimento para Analytics Engineers, Data Analysts e Data Scientists, para que eles(as) possam construir excelentes pipelines de forma simples e com abstrações prontas para confiabilidade, escalabilidade, performance, segurança, qualidade, profiling, documentação, linhagem, entre outros.
Responsabilidades de um(a) Data Engineer no QuintoAndar:
- Construir e manter uma plataforma de dados de alto desempenho que atenda às necessidades da empresa, se conecte com soluções de produtos e lidere a inovação analítica, permitindo arquiteturas incríveis e plataformas eficientes;
- Alinhar com stakeholders para entender suas necessidades primárias, mas também ter uma visão holística do problema e propor soluções extensíveis, escaláveis e incrementais;
- Realizar PoCs e benchmarks para entender qual é a melhor ferramenta para determinado problema, bem como entender se devemos usar algo do mercado ou desenvolver internamente.
Requirements
O que estamos procurando:
- Compreender as tecnologias, soluções e conceitos de Big Data (Spark, Hadoop, Hive, MapReduce) e múltiplas linguagens (YAML, Python), enquanto entende como criar integração entre eles;
- Ter proficiência em Python, ou em uma das principais linguagens de programação, e ser apaixonado(a) por escrever código limpo e manutenível. Você pode até ser um(a) Software Engineer com foco ou paixão por soluções orientadas a dados;
- Ter fortes habilidades em SQL e se sentir confortável com SQL complexo.
Você vai se destacar se:
- É especialista na construção de plataformas de dados em grande escala para grandes conjuntos de dados e equipes, usando tecnologias de Big Data como Spark, Trino, Hive, Atlas, Ranger, etc;
- Conhece conceitualmente os recursos de nuvem da AWS e do GCP;
- Tem experiência com Apache Airflow ou outras ferramentas para data workflows;
- Te experiência com soluções de armazenamento colunar e/ou conceitos de data lakehouse;
- É curioso(a) sobre as tecnologias em rápida evolução no domínio da engenharia de dados e é ansioso(a) para aprender e dominá-las trazendo um grande impacto para o nosso time.
Benefits
- Salário competitivo (Contrato CLT);
- Remuneração variável
- Ticket refeição (vale-alimentação e/ou vale-refeição);
- Assistência médica;
- Assistência odontológica (opcional);
- Seguro de vida;
- Auxílio creche;
- Auxílio para prática de atividades físicas (Gympass);
- Licença maternidade e paternidade estendidas;
- Espaço para amamentação*;
- Desconto em estacionamento nos nossos escritórios*;
- Translado gratuito das estações Vila Madalena e Fradique Coutinho até o escritório*;
- Bicicletário gratuito no estacionamento*.
Localização & trabalho em casa
Nosso time de tecnologia trabalha no modelo "remote-first", o que significa que estamos trabalhando de casa com a possibilidade de morar em qualquer lugar do Brasil. Também temos a opção de utilizar os escritórios do QuintoAndar em São Paulo e Campinas ou utilizar os espaços de coworking de parceiros, ambos até duas vezes por semana.
Diversidade & Inclusão no QuintoAndar
No QuintoAndar, acreditamos que a diversidade de perspectivas e experiências garantem um ambiente diferenciado de trabalho, baseado no respeito e na valorização das diferenças. Fique à vontade para declarar as informações do formulário de inscrição. Caso você não se sinta confortável em respondê-las é só optar por não responder. Essas informações nos ajudam a criar um ambiente cada vez mais inclusivo e são utilizadas apenas para essa finalidade, são confidenciais e não impactarão no seu desempenho no processo seletivo.
Todas as nossas vagas estão abertas a pessoas com ou sem deficiência. Se você é PCD e não encontrou nenhuma vaga de seu interesse, deixe seu currículo em nosso banco, clicando aqui.
Política de Proteção a Dados
Os dados que você informar no formulário do processo seletivo são confidenciais e estão armazenados em ambiente seguro, nós adotamos medidas técnicas e administrativas aptas para proteger os seus dados.
Para exercer os seus direitos sobre os seus dados pessoais, como acesso aos dados, confirmação de tratamento, correção dos dados, anonimização, bloqueio ou eliminação e outros direitos com o QuintoAndar, entre em contato com a gente por quin.to/mensagem. Para saber mais sobre como tratamos os dados pessoais no QuintoAndar acesse nossa Política de Privacidade.
* Salary range is an estimate based on our AI, ML, Data Science Salary Index 💰
Tags: Airflow AWS Big Data GCP Hadoop Pipelines Python Spark SQL
Perks/benefits: Fitness / gym
More jobs like this
Explore more AI, ML, Data Science career opportunities
Find even more open roles in Artificial Intelligence (AI), Machine Learning (ML), Natural Language Processing (NLP), Computer Vision (CV), Data Engineering, Data Analytics, Big Data, and Data Science in general - ordered by popularity of job title or skills, toolset and products used - below.
- Open AI Engineer jobs
- Open Data Science Manager jobs
- Open Senior Business Intelligence Analyst jobs
- Open MLOps Engineer jobs
- Open Data Manager jobs
- Open Data Engineer II jobs
- Open Power BI Developer jobs
- Open Sr Data Engineer jobs
- Open Principal Data Engineer jobs
- Open Data Analytics Engineer jobs
- Open Business Intelligence Developer jobs
- Open Data Scientist II jobs
- Open Junior Data Scientist jobs
- Open Product Data Analyst jobs
- Open Senior Data Architect jobs
- Open Business Data Analyst jobs
- Open Sr. Data Scientist jobs
- Open Big Data Engineer jobs
- Open Data Analyst Intern jobs
- Open Manager, Data Engineering jobs
- Open Azure Data Engineer jobs
- Open Junior Data Engineer jobs
- Open Data Product Manager jobs
- Open Data Quality Analyst jobs
- Open Principal Data Scientist jobs
- Open Data quality-related jobs
- Open Business Intelligence-related jobs
- Open ML models-related jobs
- Open Data management-related jobs
- Open GCP-related jobs
- Open Java-related jobs
- Open Privacy-related jobs
- Open Finance-related jobs
- Open Data visualization-related jobs
- Open APIs-related jobs
- Open Deep Learning-related jobs
- Open PyTorch-related jobs
- Open Consulting-related jobs
- Open Snowflake-related jobs
- Open TensorFlow-related jobs
- Open PhD-related jobs
- Open CI/CD-related jobs
- Open Kubernetes-related jobs
- Open NLP-related jobs
- Open Data governance-related jobs
- Open Airflow-related jobs
- Open LLMs-related jobs
- Open Data warehouse-related jobs
- Open Hadoop-related jobs
- Open Databricks-related jobs