[Neon] – Engenheiro de Dados

#Quem somos:

A #Neon é uma brasileira especializada em abertura e movimentação de contas-correntes digitais por aplicativo, simplificando a experiência das pessoas com o dinheiro.

#por que fazemos o que fazemos todos os dias:

Existimos para reduzir as desigualdades, mostrando caminhos mais simples e justos. Acreditamos que todos merecem ter um futuro brilhante !

#Seu desafio na #Neon:

• O #Neon está estruturando o seu time de dados, como uma célula estratégica para o negócio, atuando como parceira e especialista nos desafios de cada produto e área do negócio, facilitando  dados nas tomadas de decisão para uma experiência ainda mais simplificada das pessoas com o dinheiro
• Você será estimulado a pensar e jogar junto com as diferentes áreas de negócio, atuando como especialista em dados e parceiro do negócio/produto no desenvolvimento de soluções que destaquem o valor de tomadas de decisões orientadas por dados, pelo simples fato de conhecê-los, analisá-los e criticá-los.

#O que você vai fazer todos os dias:

• Minerar e extrair dados em diferentes repositórios
• Interagir com as diferentes áreas do negócio/produto para entender seus desafios e gerar insights na aplicação de dados para cada modelo de negócio/produto
• Explorar e preparar dados, modelar e implementar soluções em Python
• Verificar e propor as tecnologias que serão aplicadas na interpretação dos dados para cada modelo de negócio/produto
• Definir arquitetura na estrutura da ETL para cada modelo de negócio/produto
• Integrar os diferentes ETLs com os serviços de DataCenter na apresentação estruturada dos dados

#Estamos atraindo vivências e experiências em:

• Mineração e extração de dados em diferentes repositórios
• Modelagem e abstração de dados aplicadas a diferentes modelos de negócio
• Contar histórias a diferentes audiências do negócio e/ou projeto, utilizando dados
• Programação em Python, aplicados a grandes volumes de dados, dados em tempo real, dados não estruturados, modelos estatísticos como regressão, otimização, clustering, árvores de decisão
• Modelagem e consultas de dados em SQL, assim como desenvolver otimizações de queries e performance de consultas
• Processamento em batch e streaming utilizando ferramenta PySpark para facilitar mudanças no código
• Armazenamento e medição na capacidade de dados em ambiente em nuvem – GoogleCloud, AWS

#E se você souber também…sua curva de aprendizado será acelerada !

• Aplicação de Presto – emulador de SQL para facilitar a consulta no DataLake
• Ambiente em arquitetura Cloud – AWS / S3
• Aplicação da ferramenta Ranger para anonimização de dados por conta de LGPD
• Utilização de ferramentas de versionamento – Bitbucket e Git
• Ambiente de processamento de dados em Linux, utilizando scripts em Shell, JAVA ou Python
• Manipulação de diferentes fluxos de dados, ETLs utilizando Airflow como orquestrador
• Utilizando de Dockers como containers e kubernetes como ferramenta de observalidade