Data Engineer Senior
Lisboa · Publicado em 11 de novembro de 2024
Descrição
A Noesis procura um perfil que consiga desenvolver, operar e manter aplicações de análise de dados numa plataforma de big data na cloud AWS.
Principais Tarefas e Responsabilidades:
Desenvolver funcionalidades end-to-end em plataforma cloud (AWS) de big data, baseadas em análise/processamento de dados;
Participar ativamente na discussão da arquitetura da funcionalidade, definição de fluxos e processos de dados necessários a criar;
Criar prova de conceito;
Desenvolver versão de produção, testar, fazer deploy na cloud em ambientes de desenvolvimento/qualidade/produção, monitorizar o funcionamento inicial e fazer debug / manutenção evolutiva;
Documentar as funcionalidades criadas usando o Confluence;
Apoiar em extrações de dados e análises exploratórias.
Entregáveis:
Analisar e estruturar dados brutos;
Construir sistemas de dados e pipelines;
Avaliar as necessidades e objetivos das BUs;
Dar suporte à operação contínua de pipelines de dados;
Interpretar tendências e padrões;
Avaliar análises complexas de dados e explorar os resultados;
Preparar dados para modelagem prescritiva e preditiva;
Construir algoritmos e protótipos.
Requisitos:
Licenciatura em Engenharia de Software, Engenharia Informática ou similar;
Até 10 anos de experiência enquanto Data Engineer;
Experiência sólida e comprovada com Python, nomeadamente na manipulação e processamento de dados;
Experiência sólida com SQL;
Experiência em programação e debug;
Conhecimentos valorizados:
Experiência em cloud AWS (ex: S3, Lambda, Athena, EC2, Glue, CDK / Cloud formation, Step Functions, Batch, Fargate,…)
Spark / Pyspark, Git, Jupyter noteboks;
Experiência de desenvolvimento de aplicações e/ou trabalho em ambientes de produção;
Conhecimentos da metodologia Agile, ferramenta Jira e Confluence (valorizados);
Capacidade de trabalho em ambiente colaborativo e com equipas globais;
Capacidade de análise crítica e focada em resolução de problemas;
Compromisso de qualidade de entregas;
Boa capacidade de comunicação escrita e verbal;
Conhecimentos do mercado Energy & Utilities (valorizados);
Experiência em projetos (valorizado);
Conhecimentos de inglês (escrito e oral).
Se reúnes estas condições e gostarias de integrar uma organização inovadora, que aposta continuamente na formação dos seus talentos, envia-nos a tua candidatura.
Join us. Let's innovate together!
Todos os nossos processos de recrutamento e seleção baseiam-se na igualdade de oportunidades, valorizando a competência e o potencial de cada pessoa e garantindo que nenhum candidato ou candidata é discriminado com base em género, etnia, orientação sexual, idade, religião ou condição física.
#J-18808-Ljbffr