Data Engineer Sénior Spark Scala

Description de l'entreprise

ALTEN DELIVERY CENTER MAROC, Filiale du leader mondial de l’ingénierie et du conseil en technologie créé en 2008 et présent à Fès, Rabat, Tétouan et Casablanca, compte aujourd’hui plus de 2300 consultants et vise un centre d’excellence de 3100 consultants ALTENiens en fin 2027. Avec plus de 90 recrutements par mois, ALTEN Maroc est désormais un acteur majeur de l’insertion professionnelle des  ingénieurs. Nous accompagnons nos clients, leaders de l’Industrie dans leurs stratégies de développement dans les domaines de l’automobile, du ferroviaire, de l’IT, de la R&D et des Télécoms & Médias.

Description du poste

La Factory à pour objectif de digitaliser les activités commerciales et de marchandises dans le but de simplifier, d'harmoniser et d'automatiser les processus opérationnels de l'entreprise. Nous travaillons avec les équipes business, product management et design pour concevoir des outils ergonomiques et fiables.

Vous aurez comme responsabilité de :

• Concevoir, développer et maintenir des solutions de traitement de données à grande échelle, en utilisant des technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark.
• Travailler en étroite collaboration avec les équipes de développement et de production afin de garantir la qualité et la performance des solutions mises en place.

Qualifications

Diplômé d'un Bac+5 en informatique.

Expérience : 5 à 7 ans

• Solide expérience en développement avec des langages comme Scala et/ou Java, et une compréhension approfondie des concepts de programmation fonctionnelle.
• Compétences avérées dans l'utilisation de plateformes de streaming de données comme Apache Kafka, et de frameworks de traitement de données distribuées comme Apache Spark.
• Expérience significative dans le domaine de la Data et du Cloud (GCP ou AWS), en particulier les services tels que Cloud Storage, BigQuery, Dataproc, Kubernetes, et d'autres outils pertinents pour la gestion et le traitement de données à grande échelle
• Bonne maîtrise de BigQuery et du SQL avancé, avec une expérience sur des traitements de gros volumes de données.
• Maîtrise des outils de CI/CD, en particulier via GitLab CI/CD et Docker Compose, pour l’automatisation des workflows data.
• Bonne connaissance de l’environnement Linux et des outils de ligne de commande.
• Connaissance approfondie des concepts d'architecture microservices et des bonnes pratiques
• de développement.
• Expérience dans l'écriture de tests unitaires et d'intégration pour garantir la qualité du code.
• Excellente communication écrite et orale : Aptitude à produire des livrables et des reportings de haute qualité.
• Connaissance sur Kafka-stream, spring boot,
• Travail en méthodologie agile (Scrum), avec une capacité à collaborer efficacement dans des
• équipes pluridisciplinaires.

Informations supplémentaires

Au plaisir de vous lire !