Problemas complexos exigem a experiência certa! Um dos maiores desafios da atualidade é o correto armazenamento e processamento de dados tendo em consideração estes três domínios (3Vs): Volume, Velocidade e Variedade.
Na Xpand IT, a área tecnológica de Big Data desenvolve e implementa arquiteturas e soluções de software que tratam da captura, ingestão, armazenamento e gestão de dados críticos de grandes clusters de informação onde os 3Vs estão sempre presentes. Tiramos partido de um conjunto de frameworks avançadas como Spark, Kafka, Hive/Impala, Azure Data Services ou MongoDB usando Java e Scala como linguagens de programação para interagir com estas frameworks.
Quais as principais responsabilidades?
Enquanto Platform Engineer, terás um papel fundamental nas várias fases de adoção de plataformas de dados de grande escala em contextos on-prem ou Cloud (Azure, AWS, GCP) e participar na análise, definição e sizing, setup, upgrade, securização e tuning dessas plataformas. Para estes sistemas, um foco especial em desempenho e segurança é fundamental bem como a implementação das melhores práticas de desenvolvimento de serviços para servirem de base para ferramentas de monitorização.
Vais trabalhar em estreita colaboração com as equipas de desenvolvimento no desenho , desenvolvimento e instalação das soluções aplicacionais, processamento e armazenamento de dados em grande escala.
Diariamente serás responsável por:
// Stacks: Cloudera, Confluent, Azure Data Services, MongoDB, Kerberos ou Windows Active Directory
Que Skills precisas de ter?
// Pontos extra para:
Para saberes mais sobre esta e outras oportunidades, visita já o site carreiras Xpand IT!