Data Platform Engineering Lead

📋 Descrição da Função

A Randstad Digital está a procurar um Data Platform Engineering Lead para o nosso cliente, uma empresa líder em setores de defesa e segurança a nível global. O candidato ideal terá uma combinação de expertise técnica, habilidades de liderança e uma visão estratégica.

🎯 Responsabilidades

• Desenvolver e manter a arquitetura da plataforma de dados, garantindo que atenda às necessidades de várias unidades de negócios e apoie o crescimento futuro.
• Definir a estratégia de tecnologia e padrões de arquitetura para a plataforma de dados, garantindo a alinhamento com as melhores práticas da indústria e tendências emergentes.
• Desenvolver estratégias para integrar fontes de dados diversificadas, garantindo um fluxo de dados sem problemas e alta qualidade de dados.
• Desenvolver soluções escaláveis que possam lidar com volumes de dados crescentes e garantir a otimização do desempenho da plataforma de dados.
• Implementar medidas de segurança robustas e garantir a conformidade com regulamentos e padrões da indústria relevantes.
• Trabalhar em estreita colaboração com cientistas de dados, analistas, gerentes de produtos e outros stakeholders para entender as necessidades de dados e entregar soluções eficazes.
• Manter documentação completa das pipelines de dados, processos ETL e decisões arquiteturais.

📋 Requisitos

• Grau de bacharel ou mestre em Ciência da Computação, Engenharia, Sistemas de Informação ou área relacionada.
• Experiência de 7+ anos em engenharia de dados ou função similar, com pelo menos 3 anos em uma posição de liderança.
• Conhecimento profundo de arquiteturas de referência de plataforma de dados (por exemplo, arquitetura Lambda, Data Mesh).
• Conhecimento profundo de tecnologias de big data (por exemplo, Hadoop, Spark, Kafka) e soluções de armazenamento de dados (por exemplo, Redshift, Snowflake).
• Experiência extensa com plataformas de nuvem (por exemplo, AWS, Azure, Google Cloud) e serviços de dados, com foco em Google Cloud.
• Certificação de Google Cloud é preferível.
• Experiência com migração de on-premise para nuvem e vice-versa.
• Conhecimento de frameworks e padrões de segurança relevantes.
• Proficiência em linguagens de programação como Python, Java ou Scala.
• Conhecimento sólido de sistemas de gerenciamento de banco de dados (por exemplo, SQL, NoSQL, NewSQL).
• Experiência com SQL e sistemas de gerenciamento de banco de dados (por exemplo, MySQL, PostgreSQL, SQL Server).
• Conhecimento de ferramentas e frameworks de integração de dados (por exemplo, Apache Nifi, Talend, Informatica).
• Familiaridade com práticas de modelagem de dados, armazenamento de dados e governança de dados.
• Experiência com Iaac (por exemplo, Ansible, Terraform), orquestração de pipelines de dados (por exemplo, Airflow), ferramentas de exploração de logs (por exemplo, Streamlit, Dash), extração de dados (por exemplo, PostGIS, Kafka, Airflow, FastAPI), pandas, scikit-learn, Docker.
• Conhecimento sólido de melhores práticas de DevOps e ferramentas: GIT, CI/CD, telemetria e monitoramento, etc.

💰 Condições

• Localização: Lisboa ou Oporto
• Tipo de emprego: Emprego a tempo completo
• Experiência: 7+ anos em engenharia de dados ou função similar, com pelo menos 3 anos em uma posição de liderança.