Data Engineer

Basée à Clermont-ferrand, à Lyon et à Paris, Agaetis est à la croisée des chemins entre le cabinet de conseil, la société de service et l’éditeur de logiciel. Notre mission consiste à accompagner nos clients dans la réalisation de leurs convictions, dès l’instant où la technologie et l’IA sont au cœur de celles-ci. Pour concrétiser leurs ambitions, nous engageons nos moyens au bon moment et nous nous appuyons sur l’intelligence collective ainsi que l’engagement humain. En tant qu’acteurs du monde de demain, nous aidons nos clients à répondre aux enjeux de leurs secteurs d’activité grâce aux technologies de pointe. Depuis 2007, la croissance de Agaetis a été progressive et maîtrisée afin de garantir la continuité d’un écosystème passionnant. Nous sommes maintenant une équipe de 30 salariés complémentaires et désireux d’en apprendre tous les jours. Nous travaillons avec des start-ups, PME et grands groupes de différents secteurs : Industrie, Agriculture, Bâtiment, Santé, Finance, Assurance, E-commerce... on ne s’ennuie pas !

Missions

• Extraire, uniformiser et structurer les données depuis les datalakes de nos clients
• Maitriser la modélisation des données dans un datalake pour assurer la bonne exécution de ses traitements
• S'assurer de la fiabilité des données utilisées
• Mettre en place des flux de données entre les systèmes en ingestion et en exposition (batch, API, temps réel …)
• Explorer de nouvelles technologies, faire de la veille technologique
• Comprendre l'architecture Datalake dans son ensemble et préconiser des adaptations pour le déploiement et le traitement de ses modèles

Profil

Le Data Engineer que nous recherchons pour intégrer notre équipe Clermontoise devra s’assurer que les données de nos clients soient facilement accessibles afin qu’elles puissent être exploitées par les différents métiers (DS, BI, applicatifs...) mais aussi, que les modèles et applicatifs créés à partir des données soient performants. Il sera en charge de définir, développer, mettre en place et maintenir les outils et infrastructures adéquats à l'analyse de la donnée. Le candidat que nous recherchons doit être créatif afin d’ imaginer et concevoir des solutions permettant le traitement de volumes importants de données, tout en garantissant la sécurité de celles-ci.

Salaire: À discuter

Connaissances souhaitées :

• Connaissances recherchées : Maîtrise de Python et de différentes technologies autour des flux de données : Nosql, SQL ETL, Hadoop, Kafka…, connaître l’environnement de Machine Learning : Sklearn, Spark ml, Tensorflow...
• Autres connaissances souhaitées : Ecosystème Apache Hadoop : Spark, Hive, Kafka streaming, AirFlow ; Cloud : Azure, AWS, Google Cloud… ; Langages Big Data : Scala, Python ; Outils de virtualisation et container : Docker, OCI, … ; Orchestrateurs : Kubernetes… ; Base de données : SQL Server, MySQL, MongoDB, Elasticsearch ; Conception de pipeline d’ingestion de données sur des frameworks de calcul distribués (Spark, Akka, Flink, etc.) temps réel (Kafka, Storm, Spark Streaming).
• Les qualités requises sont : la créativité, l’esprit d’équipe, la rigueur, la communication, l’adaptabilité, la curiosité, veille technologique.