Hadoop Analyst

Hadoop Analyst
Empresa:

Planck Technologies



Função de trabalho:

Engenharia

Detalhes da Vaga

Sobre a vaga
A Planck Technologies, uma empresa inovadora e em crescimento no setor de tecnologia, está à procura de um(a) Hadoop Analyst (a) dinâmico(a) e motivado(a) para se juntar à nossa equipa.
Responsabilidades

Atuar como Hadoop Analyst em projetos de Datalakes baseados em soluções OnPrem ou em Cloud, utilizando a plataforma Hadoop para processar grandes volumes de dados de forma eficiente e escalável.
Desenvolver e gerenciar ETLs (processos de Extração, Transformação e Carga), utilizando PySpark para a transformação de dados, garantindo a qualidade, integridade e otimização no fluxo de dados através de pipelines robustos e automatizados.
Trabalhar com armazenamento de dados em larga escala, otimizando o uso de tecnologias associadas a Datalakes e soluções de Big Data, integrando diversas fontes de dados em um ambiente unificado.
Colaborar com equipas técnicas e de dados para garantir a eficiente ingestão, processamento e disponibilização de dados para análises avançadas e tomadas de decisão.
Monitorar e manter o ambiente Hadoop e PySpark, garantindo alta disponibilidade e performance das soluções de armazenamento e processamento de dados.
Se aplicável, participar de projetos de migração de Datalakes OnPrem para Cloud, contribuindo com seu conhecimento técnico para a transição de ambientes de infraestrutura tradicional para soluções em nuvem.
Utilizar Git e Github para controle de versão e gerenciamento do código, garantindo a rastreabilidade e a colaboração eficiente entre os membros da equipa.
Comunicar-se de forma clara e eficaz em português, inglês e, quando necessário, em espanhol (nível médio), para colaborar com equipas multinacionais e documentar processos e soluções.

Requisitos obrigatórios

Experiência avançada (5+ anos) com Datalakes baseados em Hadoop: Experiência sólida em arquitetura e implementação de Datalakes utilizando Hadoop, tanto em ambientes OnPrem quanto Cloud, com conhecimento profundo de suas capacidades e limitações.
Conhecimento de ETLs com PySpark: Experiência prática no desenvolvimento de pipelines de ETL utilizando PySpark para processar e transformar grandes volumes de dados de maneira eficiente, otimizada e segura.
Experiência em armazenamento de dados em larga escala: Conhecimento prático de tecnologias de armazenamento de dados em ambientes distribuídos, com foco em escalabilidade, segurança e alta disponibilidade.
Idiomas:

Português fluente (alto nível) para comunicações e interações com a equipa local.
Inglês fluente (alto nível) para comunicação internacional e documentação técnica.
Espanhol (nível médio) é um diferencial, embora não obrigatório, mas útil em equipas multinacionais.



Perfil e Competências

Aptidão técnica avançada: Capacidade de lidar com grandes volumes de dados utilizando tecnologias Hadoop e PySpark, garantindo eficiência em processos de transformação e armazenamento de dados.
Experiência comprovada em Big Data: Histórico de trabalho em ambientes de Big Data, com experiência sólida em projetos de Datalakes e processamento de dados distribuídos.
Orientação para resultados e inovação: Capacidade de otimizar processos de dados e sugerir melhorias contínuas, garantindo a escalabilidade e a confiabilidade das soluções de armazenamento e processamento de dados.
Colaboração e comunicação: Forte habilidade de trabalhar em equipas multifuncionais e comunicar-se de forma eficaz em português, inglês e, quando necessário, espanhol.

Diferenciais (Plus)

Experiência em migrações de Datalakes OnPrem para Cloud: Experiência prática em projetos de migração de Datalakes de ambientes OnPrem para a Cloud, compreendendo as complexidades e melhores práticas para a transição de grandes volumes de dados para a nuvem.
Conhecimento em Git e Github: Habilidade em utilizar Git para controle de versão de código e Github para colaborar com equipas de desenvolvimento, revisando, versionando e gerenciando código em repositórios.

Benefícios

Modelo de trabalho híbrido, proporcionando flexibilidade com 2 dias presenciais por semana em Lisboa.
Oportunidade de trabalhar em projetos de grande escala com tecnologias de ponta como Hadoop e PySpark.
Ambiente dinâmico e inovador, com oportunidades de crescimento e desenvolvimento contínuo em uma equipa de dados de alto desempenho.

Se estás pronto(a) para assumir este desafio e contribuir para o crescimento contínuo da Planck Technologies, envia o teu currículo para ****** com o assunto "Hadoop Analyst – (Seu Nome)".
Vem fazer parte de uma empresa que está a redefinir o futuro através da tecnologia!
NOTA: Segundo o Regulamento Geral de Proteção de Dados da UE nº 2016/679, informamos que, ao responder a este anúncio, concorda com o uso dos seus dados pela Planck Technologies pelo tempo que for necessário. Em caso de dúvida ou pedido de eliminação dos seus dados pessoais, por favor envie um email para ******.
#J-18808-Ljbffr


Função de trabalho:

Requisitos

Hadoop Analyst
Empresa:

Planck Technologies



Função de trabalho:

Engenharia

Traffic Engineer I Or Ii

The City of Cedar Rapids is seeking a highly motivated and innovative Traffic Engineer I or II to help continuously improve the connectivity of the community...


Desde City Of Cedar Rapids - Lisboa

Publicado 21 days ago

Steam Turbine Valve Specialist

```html Steam Turbine Valve Specialist About the Role Location: Portugal, Lisboa, Amadora Remote vs. Office: Hybrid (Remote/Office) Company: Siemens Energy U...


Desde Siemens Energy - Lisboa

Publicado 21 days ago

Junior Underwriter - Environmental

Junior Underwriter - EnvironmentalJoin us to take your career to the next level with a global market leader.At AIG, we are reimagining the way we help custom...


Desde American International Group - Lisboa

Publicado 21 days ago

Hvdc Commissioning Engineer (F/M/D) – Converter Control

```html HVDC Commissioning Engineer (f/m/d) – Converter Control About the Role Location: Portugal, Lisboa, Amadora Country/Region: Portugal State/Province/Co...


Desde Siemens Energy - Lisboa

Publicado 21 days ago

Built at: 2024-10-09T00:28:42.428Z