Accueil > Jobs > Data Engineer

Data Engineer

Le Data Engineer est un pilier pour les projets data. Il construit les structures de données et met en place les briques technologiques nécessaires pour l’acquisition, l’analyse et l’implémentation des modèles qui utilisent les données dans un contexte massif de données. Son rôle est de choisir les bonnes technologies selon les besoins en collaboration avec différents métiers/projets. Le Data Engineer travaille avec les Data Scientist pour savoir quelle architecture est nécessaire au développement des modèles scientifiques afin d'aider à industrialiser son modèle et de garantir la montée à l’échelle.

logo agaetislogo agaetis

Basée à Clermont-ferrand, à Lyon et à Paris, Agaetis est à la croisée des chemins entre le cabinet de conseil, la société de service et l’éditeur de logiciel. Notre mission consiste à accompagner nos clients dans la réalisation de leurs convictions, dès l’instant où la technologie et l’IA sont au cœur de celles-ci. Pour concrétiser leurs ambitions, nous engageons nos moyens au bon moment et nous nous appuyons sur l’intelligence collective ainsi que l’engagement humain. En tant qu’acteurs du monde de demain, nous aidons nos clients à répondre aux enjeux de leurs secteurs d’activité grâce aux technologies de pointe. Depuis 2007, la croissance de Agaetis a été progressive et maîtrisée afin de garantir la continuité d’un écosystème passionnant. Nous sommes maintenant une équipe de 30 salariés complémentaires et désireux d’en apprendre tous les jours. Nous travaillons avec des start-ups, PME et grands groupes de différents secteurs : Industrie, Agriculture, Bâtiment, Santé, Finance, Assurance, E-commerce... on ne s’ennuie pas !

Missions

  • Extraire, uniformiser et structurer les données depuis les datalakes de nos clients
  • Maitriser la modélisation des données dans un datalake pour assurer la bonne exécution de ses traitements
  • S'assurer de la fiabilité des données utilisées
  • Mettre en place des flux de données entre les systèmes en ingestion et en exposition (batch, API, temps réel …)
  • Explorer de nouvelles technologies, faire de la veille technologique
  • Comprendre l'architecture Datalake dans son ensemble et préconiser des adaptations pour le déploiement et le traitement de ses modèles

Profil

Le Data Engineer que nous recherchons pour intégrer notre équipe Clermontoise devra s’assurer que les données de nos clients soient facilement accessibles afin qu’elles puissent être exploitées par les différents métiers (DS, BI, applicatifs...) mais aussi, que les modèles et applicatifs créés à partir des données soient performants. Il sera en charge de définir, développer, mettre en place et maintenir les outils et infrastructures adéquats à l'analyse de la donnée. Le candidat que nous recherchons doit être créatif afin d’ imaginer et concevoir des solutions permettant le traitement de volumes importants de données, tout en garantissant la sécurité de celles-ci.

Salaire: À discuter

Connaissances souhaitées :

  • Connaissances recherchées : Maîtrise de Python et de différentes technologies autour des flux de données : Nosql, SQL ETL, Hadoop, Kafka…, connaître l’environnement de Machine Learning : Sklearn, Spark ml, Tensorflow...
  • Autres connaissances souhaitées : Ecosystème Apache Hadoop : Spark, Hive, Kafka streaming, AirFlow ; Cloud : Azure, AWS, Google Cloud… ; Langages Big Data : Scala, Python ; Outils de virtualisation et container : Docker, OCI, … ; Orchestrateurs : Kubernetes… ; Base de données : SQL Server, MySQL, MongoDB, Elasticsearch ; Conception de pipeline d’ingestion de données sur des frameworks de calcul distribués (Spark, Akka, Flink, etc.) temps réel (Kafka, Storm, Spark Streaming).
  • Les qualités requises sont : la créativité, l’esprit d’équipe, la rigueur, la communication, l’adaptabilité, la curiosité, veille technologique.

Postuler

Nos offres

Tech Lead #Software Craftsman

Nous recherchons aujourd’hui un Tech Lead, souhaitant pratiquer l’art du bon code, ainsi qu’être le “mentor” bienveillant de nos équipes de développement. L’amélioration continue est aussi valable pour Agaetis, c’est pourquoi, nous souhaitons nous améliorer sur le Software Craftsmanship et construire un pôle autour de ce principe. Bien concevoir des logiciels peu importe la technologie et mettre en place les bonnes pratiques qui assurent une bonne qualité de code, c’est ce que nous voulons inscrire dans nos gènes.

Consulter l'offre

Candidature
spontanée

Nos adresses

Clermont-Ferrand
9, allée Evariste Galois
63170 Aubière
Tél. 04 73 35 47 51
Paris
21, rue de la banque
75002 Paris
Tél. 01 44 63 53 13
Lyon
52, Quai Rambaud
69002 Lyon