Ingénieur(e) de données principal(e) / Staff Data Engineer
Apply NowCompany: AppDirect
Location: Montreal, QC H1A 0A1
Description:
(English will follow)
propos d'AppDirecte
Devenez un citoyen du monde l're numrique et outillez une nouvelle gnration d'entrepreneurs branchs aux quatre coins du globe. AppDirecte offre une plateforme d'abonnement permettant de vendre n'importe quel produit en tant que service, et ce, par n'importe quel canal et sur n'importe quel appareil. Nous alimentons des millions d'abonnements pour le compte d'organisations de partout dans le monde. Notre action est toujours guide par nos valeurs et notre culture - une culture qui vous permet d'tre vu, de rester authentique et d'exceller.
Votre profil
Nous sommes la recherche d'une personne comptente et ambitieuse pour agir comme ingnieur de de donnes principal au sein de notre quipe responsable du framework de donnes. Nous adorons l'esprit entrepreneurial et les personnes dotes d'une approche des donnes comme produit. Vous tes passionn par l'ide de connecter les donnes et les retombes commerciales et vous avez l'expertise technique pour le faire? Ce poste est pour vous! L'un des principaux objectifs de ce poste est de garantir la livraison de solutions et de processus de donnes de haute qualit.
Ce que vous ferez et ce qui vous fera briller
Comptences requises
Chez AppDirecte, nous croyons que l'innovation est son meilleur dans un environnement favorisant la diversit de l'excellence, de l'exprience et de la pense. Nous accueillons chaque " AppDirecteur " et " AppDirectrice " pour l'empreinte unique qui est la sienne. Nous favorisons un environnement inclusif et sans discrimination l'gard de la race, de la religion, de l'ge, de l'orientation sexuelle et de l'identit de genre, afin de favoriser l'authenticit, la fiert et l'excellence. Dans cette optique, nous encourageons fortement les candidatures des personnes autochtones, des personnes handicapes, des personnes issues de la diversit des orientations sexuelles et des genres et/ou des personnes aux identits intersectionnelles.
Chez AppDirecte, nous prenons la protection de la vie prive trs au srieux. Pour plus d'informations sur notre utilisation et notre gestion des donnes personnelles des candidats, veuillez lire notre politique de confidentialit des candidats. Pour en savoir plus sur nos pratiques gnrales en matire de confidentialit, veuillez consulter l'avis de confidentialit d'AppDirecte: https://www.appdirect.com/about/privacy-notice
Veuillez noter que ce rle ncessite une bonne connaissance de l'anglais puisque le/la candidat.e slectionn.e devra collaborer avec des quipes situes, entre autres, aux tats-Unis, en Inde, en Argentine, ainsi que dans les provinces de l'Ontario et de l'Alberta.
About AppDirect
Become a digital, global citizen and enable the new generation of digital entrepreneurs around the world. AppDirect offers a subscription commerce platform to sell any product, through any channel, on any device - as a service. We power millions of subscriptions worldwide for organizations. We do this by our values-driven culture-one that enables you to Be Seen, Be Yourself, and Do Your Best Work.
About YouWe are seeking a highly skilled and ambitious Staff Data Engineer to join our Data Framework team. We value entrepreneurial spirit and a "Data as a Product" mindset. If you are technically proficient with a passion for learning and driving business outcomes through data, this is the opportunity for you! A key focus for this role is ensuring the delivery of high-quality data solutions and processes.
What You'll Do and How You'll Make an Impact
What You'll Need
At AppDirect, we believe that innovation thrives in an environment that houses diversity of excellence, experience and thought. We respect each AppDirector as their own fingerprint; unique with no one alike. We foster an environment of inclusion without regard to race, religion, age, sexual orientation, or gender identity enabling AppDirectors to embrace their uniqueness to do their best work. As such, we strongly encourage applications from Indigenous peoples, racialized people, people with disabilities, people from gender and sexually diverse communities, and/or people with intersectional identities.
At AppDirect we take privacy very seriously. For more information about our use and handling of personal data from job applicants, please read our Candidate Privacy Policy. For more information of our general privacy practices, please see AppDirect Privacy Notice: https://www.appdirect.com/about/privacy-notice
#LI-jobs
propos d'AppDirecte
Devenez un citoyen du monde l're numrique et outillez une nouvelle gnration d'entrepreneurs branchs aux quatre coins du globe. AppDirecte offre une plateforme d'abonnement permettant de vendre n'importe quel produit en tant que service, et ce, par n'importe quel canal et sur n'importe quel appareil. Nous alimentons des millions d'abonnements pour le compte d'organisations de partout dans le monde. Notre action est toujours guide par nos valeurs et notre culture - une culture qui vous permet d'tre vu, de rester authentique et d'exceller.
Votre profil
Nous sommes la recherche d'une personne comptente et ambitieuse pour agir comme ingnieur de de donnes principal au sein de notre quipe responsable du framework de donnes. Nous adorons l'esprit entrepreneurial et les personnes dotes d'une approche des donnes comme produit. Vous tes passionn par l'ide de connecter les donnes et les retombes commerciales et vous avez l'expertise technique pour le faire? Ce poste est pour vous! L'un des principaux objectifs de ce poste est de garantir la livraison de solutions et de processus de donnes de haute qualit.
Ce que vous ferez et ce qui vous fera briller
- Travailler avec le directeur de l'ingnierie des donnes, le chef de produit et les responsables techniques pour crer une plateforme de donnes moderne et volutive.
- Migrer les lots ETL actuels vers de nouveaux pipelines de donnes en continu toujours plus efficaces.
- Amliorer l'efficacit en outillant les parties prenantes l'interne avec des solutions de donnes en libre-service.
- Garantir la qualit des donnes en pilotant et en mettant en uvre des processus robustes de gouvernance et de validation des donnes.
- Trouver des solutions pour des problmes complexes et piloter la production des preuves de concept pour valuer les technologies mergentes.
- Rdiger et maintenir une documentation de haute qualit pour soutenir le partage des connaissances au sein de l'quipe.
- Livrer des solutions et des processus de premire qualit en utilisant les principes de l'intgration/dploiement continus, de l'automatisation et les meilleures pratiques en matire de gestion des donnes.
Comptences requises
- 7+ annes d'exprience en cration et en entretien de pipelines de donnes.
- 5+ annes d'exprience avec des plateformes infonuagiques comme AWS ou Azure.
- Exprience avec Databricks et Intelligent Data Management Cloud.
- Matrise d'au moins un des langages de programmation suivants : Java, Scala, Python et outils associs (p.ex., Gradle/Maven/SBT/Make).
- Matrise avance de SQL (niveau expert).
- Familiarit avec les plateformes de traitement de donnes distribues telles que Apache Spark, Apache Flink et Trino.
- Bonne comprhension du concept de lac de donnes (Data Lake) et de ses fondements (p.ex., Apache Ideberg, Delta Lake, Hudi).
- Expertise des schmas de donnes (p.ex., JSON, Avro, Protobuf) et en gestion de donnes volumineuses et complexes.
- Exprience en cration de solutions de donnes en temps rel l'aide de plateformes de diffusion continue comme Apache Kafka et Pulsar.
- Exprience en dploiement et maintien d'applications avec Docker et Kubernetes.
- Solide matrise des enjeux entourant la qualit, la gouvernance, la traabilit et les techniques de validation des donnes.
- Capacit avre aligner les solutions de donnes avec la structure commerciale et les cas d'utilisation oprationnels ou analytiques.
- Exprience en rvision de code et en animation de discussions sur la conception technique.
- Capacit d'autogestion et capacit grer plusieurs tches et projets simultanment et livrer des rsultats de manire autonome.
- Capacit communiquer clairement des ides complexes pour un auditoire technique ou non technique.
Chez AppDirecte, nous croyons que l'innovation est son meilleur dans un environnement favorisant la diversit de l'excellence, de l'exprience et de la pense. Nous accueillons chaque " AppDirecteur " et " AppDirectrice " pour l'empreinte unique qui est la sienne. Nous favorisons un environnement inclusif et sans discrimination l'gard de la race, de la religion, de l'ge, de l'orientation sexuelle et de l'identit de genre, afin de favoriser l'authenticit, la fiert et l'excellence. Dans cette optique, nous encourageons fortement les candidatures des personnes autochtones, des personnes handicapes, des personnes issues de la diversit des orientations sexuelles et des genres et/ou des personnes aux identits intersectionnelles.
Chez AppDirecte, nous prenons la protection de la vie prive trs au srieux. Pour plus d'informations sur notre utilisation et notre gestion des donnes personnelles des candidats, veuillez lire notre politique de confidentialit des candidats. Pour en savoir plus sur nos pratiques gnrales en matire de confidentialit, veuillez consulter l'avis de confidentialit d'AppDirecte: https://www.appdirect.com/about/privacy-notice
Veuillez noter que ce rle ncessite une bonne connaissance de l'anglais puisque le/la candidat.e slectionn.e devra collaborer avec des quipes situes, entre autres, aux tats-Unis, en Inde, en Argentine, ainsi que dans les provinces de l'Ontario et de l'Alberta.
About AppDirect
Become a digital, global citizen and enable the new generation of digital entrepreneurs around the world. AppDirect offers a subscription commerce platform to sell any product, through any channel, on any device - as a service. We power millions of subscriptions worldwide for organizations. We do this by our values-driven culture-one that enables you to Be Seen, Be Yourself, and Do Your Best Work.
About YouWe are seeking a highly skilled and ambitious Staff Data Engineer to join our Data Framework team. We value entrepreneurial spirit and a "Data as a Product" mindset. If you are technically proficient with a passion for learning and driving business outcomes through data, this is the opportunity for you! A key focus for this role is ensuring the delivery of high-quality data solutions and processes.
What You'll Do and How You'll Make an Impact
- Partner with the Data Engineering Director, Product Manager, and Tech Leads to build a modern, scalable data platform.
- Migrate existing batch ETL processes to new, efficient streaming data pipelines.
- Enable internal stakeholders with self-serve data solutions, improving overall efficiency.
- Ensure data quality by driving and implementing robust data governance and validation processes.
- Research solutions to complex problems and lead proof-of-concepts to evaluate emerging technologies.
- Author and maintain high-quality documentation to support knowledge sharing across the team.
- Deliver high-quality data solutions and processes through CICD, automation, and best practices in data management.
What You'll Need
- 7+ years of experience building and maintaining data pipelines.
- 4+ years of experience with cloud platforms such as AWS or Azure.
- Experience with Databricks and Informatica.
- Proficiency in modern programming languages like Scala, Java, SQL, and Python.
- Familiarity with technologies such as Apache Spark & Flink, AWS & Azure, Docker & Kubernetes, and Change Data Capture (CDC).
- Expertise in data schemas (e.g., SQL, JSON, Avro, Protobuf) and handling large datasets.
- Experience building real-time data solutions using streaming platforms like Kafka.
- A solid understanding of data quality, governance, and validation techniques to ensure accurate, reliable data delivery.
- Proven ability to align data solutions with Business Architecture and operational or analytics use cases.
- Experience in code reviewing and driving technical design discussions.
- Strong self-management skills with the ability to manage multiple tasks and projects autonomously.
- Ability to communicate complex technical concepts effectively to both technical and non-technical stakeholders.
At AppDirect, we believe that innovation thrives in an environment that houses diversity of excellence, experience and thought. We respect each AppDirector as their own fingerprint; unique with no one alike. We foster an environment of inclusion without regard to race, religion, age, sexual orientation, or gender identity enabling AppDirectors to embrace their uniqueness to do their best work. As such, we strongly encourage applications from Indigenous peoples, racialized people, people with disabilities, people from gender and sexually diverse communities, and/or people with intersectional identities.
At AppDirect we take privacy very seriously. For more information about our use and handling of personal data from job applicants, please read our Candidate Privacy Policy. For more information of our general privacy practices, please see AppDirect Privacy Notice: https://www.appdirect.com/about/privacy-notice
#LI-jobs