REX – Collecte, nettoyage et fusion de données : cas d’application à l’optimisation des achats
Prérequis
* : Connaissances de base en ML/Data/IA
Intervenant
Cet atelier sera présenté par Emmanuel Daugeras, fondateur de Basedig.com, plateforme de collecte et d’analyse de données.
Présentation de l’événement
La mise en place de pipelines de données est un prérequis à l’industrialisation des applications d’IA. Cette partie peut s’avérer longue et complexe et même conduire à l’échec du passage à l’échelle.
A travers un cas d’usage concret d’optimisation des achats et du sourcing de composants électroniques, Emmanuel vous montrera les bonnes pratiques de mis en oeuvre de data pipelines et comment éviter les écueils :
- Connection à des APIs
- Crawling de sites
- Création d’un référentiel commun de données
- Interprétation et structuration des fiches descriptives et spécifications
- Recherche de composants similaires
- Optimisation des compromis prix unitaire/délais d’approvisionnements
- Interfaçage avec les infrastructures clients
Notions abordées
Entre autre, Emmanuel abordera les aspects techniques suivants :
- Connections APIs Rest et GraphQL
- Analyse de textes pour structuration de specs produits
- Utilisation Golang
- Fusion de données hétérogènes
- Réalisation de data models
- Stockage MySQL/NoSQL
- Optimisation multi dimensionnelles (prix/lead time)
Liens utiles