Ingénieur de données Databricks / Data Engineer Databricks

Avanquest

$100K — $120K *
Information Technology
5 - 7 years of experience
Job Overview by Ladders

Qualifications

  • In-depth, proven experience with Databricks is required.
  • Minimum 5 years of experience in a similar data engineering role.
  • Degree in computer science, engineering, or a related field.
  • Strong proficiency in Python and SQL.
  • Good knowledge of lakehouse concepts and ETL tools.
  • Knowledge of dbt and cloud platforms is an asset.

Responsibilities

  • Design, develop, and implement robust and scalable data processing and ingestion pipelines.
  • Write, test, and maintain ETL and data cleaning scripts, particularly in Databricks.
  • Ensure continuous monitoring, maintenance, and optimization of existing data pipelines to guarantee performance and reliability.
  • Ensure data lineage and quality at every processing stage.
  • Explore and deploy data storage solutions and tools suited to the team's needs.
  • Write and maintain documentation for data engineering processes and standards.

Benefits

  • Flexible hybrid work model with option for remote work from abroad.
  • Competitive pay that recognizes your value and talent.
  • Full insurance package for you and your family.
  • Bonus program that rewards performance and drive.
  • Generous vacation and time-off policy for real rest.
  • Commitment to professional development and growth.
  • Stimulating, diverse, and multicultural work environment.
Full Job Description
Les responsabilités qui te seront confiées :
  • Concevoir, développer et mettre en œuvre des pipelines de traitement et d'ingestion de données robustes et évolutifs.
  • Écrire, tester et maintenir des scripts d'ETL et de nettoyage de données, dans Databricks notamment.
  • Assurer la surveillance, la maintenance et l'optimisation continue des pipelines de données existants pour garantir leur performance et leur fiabilité.
  • Garantir la traçabilité (data lineage) et la qualité des données à chaque étape du traitement.
  • Explorer et déployer les solutions et outils de stockage de données adaptés aux besoins de l'équipe.
  • Rédiger et maintenir la documentation des processus et des normes d'ingénierie des données.
Le profil qu'on cherche :
  • Expérience approfondie et démontrée de Databricks, impérative pour ce poste.
  • Minimum 5 ans d'expérience dans un rôle similaire en ingénierie de données.
  • Diplôme en informatique, en ingénierie ou dans un domaine connexe.
  • Maîtrise solide de Python et de SQL.
  • Bonne connaissance des concepts de lakehouse et des outils ETL.
  • Connaissance de dbt et des plateformes cloud, un atout apprécié.
Ce qu'on offre : Travailler chez Avanquest, c'est évoluer dans un environnement où performance et bien-être vont de pair. On croit à la flexibilité, à l'équilibre et au développement professionnel continu. Voici ce qui t'attend :
  • Un mode de travail hybride flexible (bureau en plein centre ville de Montréal), avec la possibilité de télétravailler depuis l'étranger.
  • Une rémunération compétitive qui reconnaît ta valeur et ton talent.
  • Un package d'assurances complet pour toi et ta famille.
  • Un programme de bonification qui récompense ta performance et ton ambition.
  • Une politique de vacances et de congés généreuse, parce qu'on croit au vrai repos.
  • On s'engage à maximiser ton potentiel et à investir dans ton développement professionnel.
  • Un environnement stimulant, diversifié et multiculturel, où chaque perspective compte.
What you'll be responsible for:
  • Design, develop, and implement robust and scalable data processing and ingestion pipelines.
  • Write, test, and maintain ETL and data cleaning scripts, particularly in Databricks.
  • Ensure continuous monitoring, maintenance, and optimization of existing data pipelines to guarantee their performance and reliability.
  • Ensure data lineage and data quality at every stage of processing.
  • Explore and deploy data storage solutions and tools suited to the team's needs.
  • Write and maintain documentation for data engineering processes and standards.
The profile we're looking for:
  • In-depth, proven experience with Databricks, required for this role.
  • Minimum 5 years of experience in a similar data engineering role.
  • Degree in computer science, engineering, or a related field.
  • Strong proficiency in Python and SQL.
  • Good knowledge of lakehouse concepts and ETL tools.
  • Knowledge of dbt and cloud platforms, an asset.
Here's what we offer: Working at Avanquest means thriving in an environment where performance and well-being go hand in hand. We believe in flexibility, balance, and ongoing professional growth. Here's what's waiting for you:
  • A flexible hybrid work model (office in Downtown Montreal), with the option to work remotely from abroad.
  • Competitive pay that recognizes your value and your talent.
  • A full insurance package for you and your family.
  • A bonus program that rewards your performance and your drive.
  • A generous vacation and time-off policy, because we believe in real rest.
  • We're committed to growing your potential and investing in your professional development.
  • A stimulating, diverse, and multicultural environment where every perspective counts.

Similar Jobs

More Jobs at Avanquest

More Information Technology Jobs

Find similar Ingénieur de données Databricks / Data Engineer Databricks jobs: