TECH LEAD DATABRICKS - 1FTE (REMOTE)
Portuguese company hires for remote work
FLUENT ENGLISH (C1/C2)
Description
Program Tech Lead Databricks – 1FTE
Highly skilled Tech Lead to spearhead Snowflake and Databricks migration pipelines. The ideal candidate needs to have extensive experience in data engineering, ETL orchestration, and database management, with a strong proficiency in programming and distributed computing.
Key Responsibilities:
• Lead the migration of data pipelines from Snowflake to Databricks.
• Design, develop, and optimize ETL workflows and data pipelines.
• Collaborate with cross-functional teams to understand database requirements and ensure successful migration.
• Implement best practices for data engineering and ensure high performance and reliability of data systems.
• Identify opportunities to optimize and reduce costs associated with data storage and processing.
Skills:
• Minimum of 4 years of professional experience in data engineering, business intelligence, or a similar role.
• Proficiency in programming languages such as Python.
• Over 7+ years of experience in ETL orchestration and workflow management tools like Airflow, Flink, Oozie, and Azkaban using AWS or GCP.
• Expertise in database fundamentals, SQL, and distributed computing.
• At least 4 years of experience with distributed data ecosystems (Spark, Hive, Druid, Presto).
• Experience working with Snowflake, Redshift, PostgreSQL, and/or other DBMS platforms.
• Lead and mentor a team of engineers, fostering a collaborative and productive work environment.
• Apply Scrum methodologies to manage project workflows and deliverables efficiently.
Note:
• Strong leadership and communication skills to manage and guide a team of engineers.
- Office hours
- Eastern Daylight Time
-- 14:30 PM - 22:30 PM ( Lisbon Time)
-- 09:30 AM- 17.30 PM ( Client Time)
- Pacific Daylight Time
-- 17:00 PM - 01:00 AM ( Client Time) - preferred time
-- 09:30AM - 16:00 PM ( Client Time)
Full remote
_____________________________________________________________________________
TECH LEAD DATABRICKS - 1FTE (REMOTO)
Empresa portuguesa contrata para trabalho remoto
INGLÊS FLUENTE (C1/C2)
Descrição
Programa Tech Lead Databricks – 1FTE
Líder técnico altamente qualificado para liderar os pipelines de migração da Snowflake e Databricks. O candidato ideal precisa ter ampla experiência em engenharia de dados, orquestração de ETL e gerenciamento de banco de dados, com forte proficiência em programação e computação distribuída.
Principais Responsabilidades:
• Liderar a migração de pipelines de dados do Snowflake para o Databricks.
• Projetar, desenvolver e otimizar fluxos de trabalho de ETL e pipelines de dados.
• Colaborar com equipes multifuncionais para entender os requisitos do banco de dados
e garantir uma migração bem-sucedida.
• Implementar as melhores práticas de engenharia de dados e garantir alta performance
e confiabilidade dos sistemas de dados.
• Identificar oportunidades para otimizar e reduzir custos associados aos dados
armazenamento e processamento.
Habilidades:
• Mínimo de 4 anos de experiência profissional em engenharia de dados, Business Intelligence, ou um papel semelhante.
• Proficiência em linguagens de programação como Python.
• Mais de 7+ anos de experiência em orquestração de ETL e gerenciamento de fluxo de trabalho
ferramentas como Airflow, Flink, Oozie e Azkaban usando AWS ou GCP.
• Conhecimentos em fundamentos de banco de dados, SQL e computação distribuída.
• Pelo menos 4 anos de experiência com ecossistemas de dados distribuídos (Spark,
Hive, Druid, Presto).
• Experiência em trabalhar com Snowflake, Redshift, PostgreSQL e/ou outros SGBD
Plataformas.
• Liderar e orientar uma equipe de engenheiros, promovendo uma ambiente produtivo de trabalho.
• Aplicar metodologias Scrum para gerenciar fluxos de trabalho e entregas de projetos
Eficientemente.
Nota:
• Fortes habilidades de liderança e comunicação para gerenciar e orientar uma equipe de
Engenheiros.
-Horário de funcionamento
- Horário de verão oriental
-- 14:30 - 22:30 (Hora de Lisboa)
-- 09:30 - 17:30 (Horário do Cliente)
- Horário de verão do Pacífico
-- 17:00 PM - 01:00 AM ( Hora do Cliente) - horário preferido
-- 09:30 - 16:00 (Horário do Cliente)
100% Remoto
#00256590
