Stage - Sibylone - Data Engineer H/F
Éligible sur :
ParisOù
Ile de FranceQui
SibyloneSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.
Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données, libérer les usages Métier, pour qu’ils soient en mesure de relever les défis de performance, de couverture de risque, de financement, de conquête client, de RSE… qui s’imposent à eux.
Spécialistes reconnus, nos consultants s’appuient pour cela sur une connaissance approfondie de l’activité business de nos clients, en lien avec nos trois piliers que sont le Métier, la Data et le Projet.
Quoi
- Analyser, comprendre et cadrer une architecture permettant de répondre aux besoins métiers des clients
- Concevoir et mettre en place des plateformes Data en tenant compte des contraintes tant techniques que fonctionnelles
- Intervenir sur la conception et le déploiement d’environnements « clusterisés » (Hadoop sur des distributions telles que Cloudera ou Hortonworks) ou Cloud public
- Développement de pipelines d’ingestion et de préparation
- Gestion du stockage de données (systèmes de fichiers comme HDFS, bases SQL ou NoSQL)
- Alimentation d’entrepôts de données (Hive, Impala, Hbase, Snowflake, BigQuery, …)
- Développer des applications d’exploration et de manipulation de données (SPARK / pySpark, Scala) afin d’alimenter les flux sortants, les reporting et d’exposer les données
- Évoluer sur l’ordonnancement des traitements de données (Oozie, Bash / Shell)
- Assurer le maintien en conditions opérationnelles des plateformes produites
- Etablir, formaliser, et promouvoir les best practices
Pour qui
- De formation supérieure ingénieur en Informatique, vous justifiez d’une première expérience réussie en data engineering acquise dans un contexte projet au sein d’une start-up, d’un pure player, ou d’une ESN.
- Vous disposez d’une bonne maîtrise des langages propres aux environnements Big Data tels que : Hadoop et ses distributions, Les solutions Cloud (Azure, AWS, GCP), Spark, Scala, Python, Unix, SQL
- Une connaissance de Dataiku serait fortement appréciée, une connaissance de : Docker, ELK, Kubernetes, Cassandra, Kafka, … serait un plus, de même que des fondamentaux DevOps (CI / CD).
Combien de temps
Quand