Senior/Staff Data Engineer

Careers Check out how you can participate in our journey to create a world with safe digital experiences. Sobre a área: O time de Engenharia de Dados da Incognia é responsável por melhorar e manter toda a infraestrutura de dados da empresa, desde clusters, serviços de dados e autenticação, até ETLs, notebooks e outras ferramentas necessárias que permitem que nossos colaboradores possam extrair métricas e inteligência de um vasto volume de dados ingeridos diariamente, de forma fácil, confiável, segura e respeitando a privacidade dos nossos usuários. O trabalho do time é essencial para para entregar um variedade de soluções baseadas em um grande volume de dados coletados, no intuito de proteger usuários de diversos clientes de golpes e fraude. Sobre a oportunidade: Precisamos de uma pessoa que tenha familiaridade com vários bancos de dados e engines de processamento distribuído, que consiga entender a fundo as ferramentas que usamos e que em caso necessário seja capaz de contribuir para os projetos opensource que rodamos em produção ou possa criar nossas próprias soluções para vencermos nossos desafios de dados. Buscamos alguém com aptidão para identificar problemas latentes (técnicos ou organizacionais) e disposto a resolver desafios de dados em larga escala ainda não devidamente solucionados pela indústria. Dia a dia da posição: Criar, implantar, manter e monitorar soluções de infraestrutura de dados para toda a empresa, incluindo deployments de ferramentas open source e soluções desenvolvidas internamente; Prover ferramentas como software, guidelines e templates que tornem o uso da infraestrutura de dados fluida e de fácil acesso aos colaboradores; Criar e manter pipelines de dados recorrentes e/ou em tempo real de alta performance para tratar grandes volumes de dados; Monitorar constantemente nossos sistemas para garantir alta disponibilidade, performance e redução de custos; Criar mecanismos que garantam as políticas de acesso aos dados; Requisitos: Graduação em Engenharia de Software ou relacionado; Experiência em kubernetes e deployment de sistemas em escala; Experiência com ETLs/Pipelines em larga escala; Experiência com o ecossistema Spark; Experiência com Data Warehousing, Data Lake e formatos de tabela open table como Apache Iceberg e Delta; Experiência com ferramentas de observabilidade; Familiaridade com diferentes bancos de dados; Conhecimentos sólidos em sistemas distribuídos, com destaque para engines de consulta distribuídas; Experiência com trabalho exploratório, demonstrando capacidade de investigar e solucionar problemas open-ended onde o desafio em si muitas vezes ainda não está bem especificado; Familiaridade com sistemas distribuídos; Experiência com modelagem, análise e visualização de dados; Capacidade de entender profundamente as ferramentas que vai utilizar a ponto de criar patches para adequação às nossas necessidades; Excelente comunicação – habilidade para articular conceitos técnicos claramente, facilitar tomadas de decisão e garantir a disseminação de conhecimento entre os times; Inglês avançado. Sobre o time: Primeiramente, valorizamos muito a nossa cultura. Nossa equipe compartilha os valores de Ambição, Excelência e Confiança, seja em relação aos nossos usuários, clientes ou membros da equipe. Não toleramos desrespeito, discriminação, egoísmo, politicagem, pessimismo, descrença e falta de responsabilidade. Respeitamos o direito de todos os membros da equipe de participar de expressões políticas e ativismo fora do ambiente de trabalho, mas para preservar a harmonia e o respeito mútuo em nosso ambiente de trabalho, debates políticos devem ser evitados em ambientes da Incognia. A Incognia também se abstém de fazer pronunciamentos institucionais sobre temas não diretamente relacionados com a sua atividade e Missão. Além disso, levamos muito a sério nosso desempenho. Por isso, oferecemos suporte através de nosso processo de onboarding, feedback frequentes com a liderança, ciclos de avaliação, feedba