Développeur Scala & Big Data | Finance | 100% Télétravail

Notre société, spécialisée dans les produits financiers de trading et d'investissement en ligne, recherche un Développeur Scala & Big Data expérimenté pour rejoindre notre équipe technique internationale. Dans ce rôle, vous concevrez et développerez des pipelines de données sophistiqués pour analyser des volumes importants de données financières et améliorer nos systèmes de trading. Responsabilités Principales - Concevoir, développer et maintenir des applications Big Data performantes utilisant Scala 3.3+ et l'écosystème Apache (Spark 3.5+, Hadoop 3.3+, Hive). - Implémenter et optimiser des pipelines de données évolutifs pour le traitement des données financières en temps réel et par lots. - Utiliser Apache Kafka pour la gestion des flux de données et garantir la haute disponibilité des systèmes. - Travailler avec diverses bases de données (RDBMS, Cassandra) et systèmes de stockage (HDFS, AWS S3) pour l'intégration et le traitement des données. - Collaborer avec les Data Scientists pour implémenter leurs modèles et algorithmes dans l'environnement de production. - Développer et maintenir des tests automatisés pour les applications Spark afin d'assurer la qualité et la fiabilité du code. - Participer à la conception d'architectures de données évolutives et performantes pour les applications financières. - Optimiser les requêtes SQL et les processus ETL pour améliorer les performances des systèmes d'analyse. Compétences Requises - Expérience professionnelle significative (3+ ans) en développement avec Scala dans un contexte Big Data. - Maîtrise approfondie de l'écosystème Big Data: Apache Spark, Hadoop, Hive et Airflow. - Expérience pratique avec Apache Kafka et les systèmes de messagerie distribués. - Compétences avancées en SQL et expérience avec différentes bases de données (relationnelles et NoSQL). - Expérience solide dans la conception et l'implémentation de pipelines de données complexes. - Maîtrise des services AWS, particulièrement S3, Athena, EMR et EKS. - Capacité à comprendre et à adapter des scripts Python développés par l'équipe Data Science. - Expérience dans le développement de tests automatisés pour applications Big Data et Spark. - Excellente communication en anglais, à l'écrit comme à l'oral. - Capacité à travailler de manière autonome dans un environnement distant. Atouts Supplémentaires - Expérience dans l'industrie financière, particulièrement dans le trading ou l'investissement. - Connaissance des frameworks de streaming comme Spark Streaming ou Flink. - Expérience avec Docker, Kubernetes et les architectures de microservices. - Familiarité avec les méthodologies Agile et DevOps. - Certifications AWS ou autres certifications cloud pertinentes. - Connaissance des réglementations financières et des exigences de conformité des données. Pourquoi Nous Rejoindre? En rejoignant notre équipe, vous aurez l'opportunité de travailler sur des systèmes financiers innovants qui traitent d'importants volumes de données en temps réel. Vous bénéficierez d'une flexibilité totale en télétravail, d'une rémunération compétitive, et de la possibilité de collaborer avec des experts internationaux dans le domaine de la finance et de la technologie. Notre culture encourage l'innovation, l'apprentissage continu et l'excellence technique.