Pour en savoir plus sur le nom de l’entreprise et le contexte : demandez-moi à antoine@datarecrutement.fr (j’en profiterai pour vous confirmer si votre profil peut correspondre) et profitez-en pour me rajouter sur LinkedIn directement !
1. Analyser le besoin et concevoir l’infrastructure de traitement
Le Data Engineer analyse et développe une solution permettant le traitement de volumes importants de données, tout en garantissant la sécurité de celles-ci. Il préconise l’architecture technique nécessaire aux traitements des algorithmes conçus avec le CTO (ex : puissance de calcul, stockage, flux de données, utilisation des solutions cloud et développements spécifiques). Il coanime l’équipe de traitement des données avec le CTO et contribue tout au long du traitement des données.
2. Déployer et maintenir la solution sur son cycle de vie
Il est le premier échelon de la chaîne de traitement de données et conçoit des solutions permettant le traitement de volumes importants de “pipelines” de données. Il veille à entretenir une solution permettant le traitement massif de données en utilisant ses diverses expertises. Il anticipe les évolutions dans les données (ex : variations de volumes ou d’usages) et prépare l’architecture de la plateforme à y répondre techniquement.
3. Développer et intégrer les technologies du Big Data dans son activité
Il maîtrise diverses technologies du Big Data permettant le traitement et la manipulation de données (familier avec les services AWS concernés) ainsi que les langages Javascript / TypeScript (cœur applicatif), Python (CLI, scripts et libraire métier) et .NET (service à migrer), des systèmes d’exploitation (Linux, Windows) et des solutions de base de données (MySQL / RDS, Redis, ElasticSearch).
Il est garant du maintien de la stabilité et de la flexibilité de l’infrastructure de traitement.
- Master en informatique ou cycle court de développement type école 42 ou MsC pro Epitech (alternance) en 2/3 ans
- Au moins 3 à 5 ans d’expérience en développement (idéalement avec un rôle de lead ou d’architecte par le passé)
- Capacité à planifier l’évolution d’une infrastructure pour suivre les besoins de traitements (aujourd’hui 12000 capteurs en production, demain plus de 50 000)
- Connaissance d'une partie de ces langages, outils et technologies :
--> Python (NumPy, Pandas)
--> JavaScript – Node.js et TypeScript
--> .NET Core
--> AWS
--> Docker et virtualisation d’environnement
--> BDD relationnelles (MySQL, SQLlite) et non-relationnelles (Elasticsearch)
--> REST APIs et GraphQL
--> Idéalement des notions d’algorithmie et de machine learning
- Intérêt pour les technologies IoT et les défis du secteur de la construction
MODALITÉS :
Créé en 2015, Data Recrutement est le cabinet de chasse du TOP500 du digital. Nous sélectionnons les meilleures opportunités Adtech, SaaS, e-commerce, Deeptech, Big Data, Fintech, HRtech, Greentech, Foodtech, …
Notre équipe recrute les talents :
Pour postuler : consultez nos offres sur datarecrutement.fr (https://datarecrutement.fr)