Data Engineer (H/F)

Cette scale-up recherche un(e) Data Engineer confirmé(e) pour continuer à étoffer ses solutions multimédia à destination des créateurs du monde entier !

JE POSTULE

LA SOCIéTé

Cette scaleup est spécialisée dans la création de contenu sur les réseaux sociaux et l'accompagnement des créateurs les plus talentueux, et ce partout dans le monde. Sa plateforme optimise et distribue du contenu vidéo sur diverses plateformes et permet aux créateurs d'atteindre de nouveaux fans sans aucun effort. Dans ce contexte de très forte croissance, elle souhaite renforcer ses équipes avec un(e) Data Engineer expérimenté(e) ! 

DESCRIPTION DU POSTE

L’équipe infra est composée actuellement de 5 Cloud Engineers, 5 Data Engineers et 1 Data Architecte sénior. 

 

Stack technique

  • Langage : SQL, Python et Bash
  • Hébergement : AWS
  • Données : Redshift, Kinesis Stream, Kinesis Firehose, Aurora Mysql, ElasticSearch, ElasticCache-Redis, S3, Glue, Athena, etc.
  • Orchestration de jobs : Airflow
  • Environnement : On utilise Visual Code, mais c’est libre et sur l’OS que tu préfères ! (Vim anyone ?)
  • Automatisation: Terraform & Ansible
  • CI/CD : Gitlab

 

Ce dont tu seras responsable

  • Mettre en place des librairies Python facilitant le travail des Data Scientists,
  • Créer et optimiser des pipelines data complexes,
  • Monitorer la plateforme d’exécution des jobs data,
  • Refactorer du code,
  • Accompagner les data scientists au quotidien dans une démarche d'amélioration continue (code Python, méthodologie de travail, architecture des jobs, peer programming, code reviews...),
  • Améliorer les process et la stack technique data (exemples: mise en place d'un framework de calcul distribué; participation à la migration vers une solution full dockerisée pour l'exécution des jobs data...).

 

Quelques exemples de projets

-> Mise en place d'un pipeline data Airflow (DAG) en rapport avec une nouvelle fonctionnalité d'un de nos produits
-> Construction d'un système de monitoring des performances de nos algorithmes
-> Développement d'une librairie permettant de mutualiser les requêtes SQL fréquemment exécutées par nos Data Scientists
-> Ajout dans Pilot (leur Python Data Job Framework) d'une feature permettant de charger/serialiser un modèle de Machine Learning depuis/vers un repository S3
-> Mise en place d'un travail de R&D sur la génération et le déploiement automatique de notre image Airflow sur nos environnements dev/preprod/prod, via un CI/CD.

Package

  • Navigo : 50 %
  • Participation mutuelle santé (Alan) : 60 %
  • Tickets restaurant (Swile)
  • RTT
  • CSE
  • Full remote
  • Clubs (cuisine, art, discussions, sports)
  • Bienêtre (fitness, yoga, méditation)

PROFIL RECHERCHé

  • Tu es diplômé(e) d'un master en computer science, d'une école d'ingénieur / université (BAC+5)
  • Tu justifies d'une expérience de 2 années minimum sur des environnements similaires
  • Python et SQL n'ont pas de secrets pour toi
  • Rigoureux(se), tu es bon(ne) pédagogue et bon(ne) communicant(e)

COMPéTENCES REQUISES

  • AIRFLOW
  • AWS
  • PYTHON
  • SQL

Télétravail

  Full remote

LES PLUS DU POSTE

  • Diversité et contexte international : 33 nationalités différentes au sein de 5 bureaux sur 2 continents
  • Vraie culture du full remote

Cooptation

500€

Nous vous offrons un bon d’achat Amazon de 500€ si votre connaissance est recrutée

Vous n'êtes pas le millionième visiteur, simplement une aide précieuse qui mérite d'être récompensée.

En savoir plus

Ce site utilise des cookies et vous donne le contrôle sur ce que vous souhaitez activer.