At a Glance
- Tasks: Design and develop robust data pipelines and platforms while ensuring data quality and performance.
- Company: Join a leading tech firm focused on innovative data solutions.
- Benefits: Competitive salary, flexible work options, and opportunities for professional growth.
- Other info: Collaborative environment with excellent career advancement opportunities.
- Why this job: Make a real impact in the data engineering field with cutting-edge technologies.
- Qualifications: 5-8 years of experience in Data Engineering and strong skills in Python and SQL.
The predicted salary is between 82800 - 101200 $ per year.
- CDI
- Québec
- Publié il y a 4 jours
RED TIC recrute pour l’un de ses partenaires un(e) Senior Data Engineer pour concevoir, développer et maintenir des plateformes et pipelines de données robustes et évolutifs, tout en garantissant la qualité, la disponibilité et la performance des données.
- Profil recherché
- Formation Bac+5 en informatique, Data Engineering, systèmes d’information ou équivalent
- Expérience de 5 à 8 ans en Data Engineering
- Solide expérience dans la conception et le développement de pipelines et plateformes Data
- Bonne maîtrise des architectures Data et des environnements distribués
- Expérience dans des environnements Cloud et/ou Big Data
- Compétences techniques
- Excellente maîtrise de Python et SQL
- Bonne maîtrise des technologies de traitement distribué telles que Apache Spark
- Expérience avec les solutions Big Data : Hadoop, Hive, Kafka ou équivalent
- Bonne connaissance des architectures Data Lake, Data Warehouse et Lakehouse
- Maîtrise des processus ETL/ELT et des outils d’intégration de données
- Bonne connaissance des bases de données relationnelles et No SQL
- Expérience avec les environnements Cloud : AWS, Azure ou GCP
- Bonne maîtrise de Git et des pratiques CI/CD
- Connaissance des outils d’orchestration tels qu’Airflow ou équivalent
- Connaissance de Docker et Kubernetes appréciée
- Bonne compréhension des problématiques de Data Quality, Data Governance et sécurité des données
- Connaissance des outils de BI et de visualisation appréciée
- Connaissance des pratiques Data Ops appréciée
- Missions principales
- Concevoir et développer des pipelines de données fiables, performants et évolutifs
- Participer à la conception et à l’évolution des architectures Data
- Développer et optimiser les traitements de données batch et/ou temps réel
- Mettre en œuvre les processus ETL/ELT et assurer l’intégration des différentes sources de données
- Garantir la qualité, la cohérence et la disponibilité des données
- Optimiser les performances des traitements et des infrastructures Data
- Mettre en place et maintenir les workflows d’orchestration et de planification
- Participer au déploiement et à l’industrialisation des solutions Data dans les environnements Cloud
- Mettre en œuvre les bonnes pratiques CI/CD et Data Ops
- Participer à la supervision et au monitoring des pipelines et plateformes Data
- Identifier et résoudre les incidents et problèmes liés aux traitements de données
- Collaborer avec les équipes Data Science, BI, Cloud, Dev Ops et métiers
- Documenter les architectures, pipelines, flux et processus de traitement
- Accompagner les développeurs et ingénieurs Data moins expérimentés
- Assurer une veille technologique sur les nouvelles technologies et pratiques du Data Engineering
- Qualités personnelles
- Excellent esprit d’analyse et de résolution de problèmes
- Rigueur et sens du détail
- Autonomie et capacité à prendre des décisions techniques
- Esprit d’équipe et bonnes capacités de communication
- Leadership technique et capacité à accompagner les équipes
- Curiosité et intérêt pour les technologies Data
- Sens des responsabilités et orientation qualité
- Esprit d’amélioration continue
- #J-18808-Ljbffr
Senior Data Engineer in Québec employer: RED TIC
Join a dynamic and innovative team in Montréal as a Senior Java Software Engineer, where you will have the opportunity to design and develop robust applications while contributing to architectural decisions and code quality. Our company fosters a collaborative work culture that values continuous improvement and offers ample growth opportunities for employees to enhance their skills and advance their careers. With a focus on cutting-edge technologies and Agile methodologies, we provide a stimulating environment that encourages creativity and teamwork, making it an excellent place for passionate developers to thrive.
