At a Glance
- Tasks: Design and deliver data models and frameworks for regulated financial institutions.
- Company: Join a leading firm focused on innovative data solutions.
- Benefits: Competitive salary, flexible work options, and opportunities for professional growth.
- Other info: Collaborative Agile environment with excellent career advancement potential.
- Why this job: Make a real impact in the financial sector with cutting-edge data technologies.
- Qualifications: Experience in large-scale data migration and strong data governance skills.
The predicted salary is between 90000 - 110000 $ per year.
Concevoir et livrer le modèle de données, le cadre de lignage des données en continu, l’approche de rapprochement ainsi que l’infrastructure de piste d’audit pour des plateformes de données gouvernées au sein d’institutions financières réglementées. Assurer la responsabilité des modèles sémantiques et physiques utilisés par les couches de production de rapports et de rapprochement, concevoir le cadre de lignage et définir les normes d’auditabilité pour l’équipe de livraison.
Responsabilités
- Concevoir et documenter les modèles de données pour les sources et les sorties confirmées, y compris les mappings source-cible, les exigences de transformation et le traitement des écarts de données.
- Diriger les travaux de migration des modèles de données en mappant les structures existantes vers les modèles cibles et en validant les résultats de rapprochement.
- Définir le modèle sémantique utilisé par les solutions de production de rapports.
- Concevoir et développer un cadre de lignage des données continu qui capture, stocke, met à jour et présente le lignage comme capacité essentielle.
- Intégrer la génération du lignage au cycle de déploiement afin d’assurer une mise à jour à chaque changement.
- Définir et mettre en œuvre l’approche de rapprochement entre les jeux de données sources, transformés et cibles.
- Mettre en place une infrastructure de piste d’audit enregistrant l’acteur, l’horodatage, l’état précédent, le nouvel état et le code de justification.
- Rédiger les spécifications de tests et intégrer des contrôles automatisés de qualité des données dans les pipelines de déploiement.
- Appliquer les normes de gouvernance des données du client concernant les données sensibles, la confidentialité et la gestion des accès.
- Participer activement aux cérémonies Agile et aux activités de livraison au sein de l’équipe intégrée du client.
Profil recherché
- Expérience démontrée dans des projets de migration de données à grande échelle avec validation de rapprochement.
- Expertise dans la conception de modèles de données sémantiques et physiques pour des plateformes gouvernées.
- Expérience dans la création de cadres de lignage continus plutôt que dans l’administration d’outils de lignage.
- Solide expérience en auditabilité et en contrôles de rapprochement dans des environnements réglementés.
- Expertise approfondie des plateformes AWS incluant Aurora PostgreSQL, S3, Glue, Athena, Iceberg, Lambda et les outils d’orchestration.
- Fort engagement envers la qualité logicielle, les tests automatisés et les contrôles de qualité des données.
- Expérience dans le secteur des services financiers réglementés.
- Capacité à communiquer avec des intervenants techniques, d’affaires et de gouvernance.
- Aisance à travailler comme membre intégré d’une équipe client.
Senior Data Engineer in Toronto employer: emergiTEL
emergiTEL is an exceptional employer, offering a dynamic work environment in the heart of Toronto's tech scene. With a strong focus on employee growth and development, we provide opportunities for continuous learning and innovation in the digital identity industry. Our collaborative culture fosters creativity and teamwork, ensuring that every team member contributes to meaningful projects that have a real impact on security and privacy.
