Les meilleurs produits de données sont nés dans les champs

La plupart de nos commandes en ligne sont collectées dans les magasins et non dans les entrepôts. Cela conduit à des erreurs entre ce qui est affiché sur le site et ce que nous pouvons réellement assembler dans une  commande en ligne .

En raison du taux de rotation élevé des marchandises dans les magasins et de la complexité des systèmes de gestion des stocks, des erreurs se produisent et peuvent être détectées automatiquement. Forts de notre connaissance des systèmes et de l'ingénierie sociale, nous avons proposé une solution qui nous permettrait de trouver automatiquement les produits problématiques et d'ajuster leur stock avant publication sur le site.

,    « ».    2011 . (  ,   13, 107),       ,   Data- .

«»

   ,   ,   «».       ,  .

•  —  .
•  — ,     .
•  — .
•  — .
•  — 5   .

,   ,      « »,  98%         .

8 000 .  , 40 000   .   , ?   ,   , ,   ,  ,  .   ,      - , , - « ».   ,   ,     -  .

-    ,  —   .

  ,     ,     Data Accelerator.  — data-,   data-driven.  Data Accelerator 126 ,   5      — « »,     .

 ,    ,   ,   . ,    .

  : Data Scientist, Data Engineer, Data Analyst, Product Owner  Scrum-.

:

• ,     (  );
•  eCom,    .

 , .

,    ,  ,  :   . ,   ,   3 , ,    ,   6 . , , ,    …

      ,       . . « » ,   ,   .

,  —    . ,    ,        .   ,     ,   1. , , ,    .   .  .

 — .  ,   . , , .   2500 ,   43,    .        «».

,   excel-,  ,     excel-  :   ,   .   ,  , ,   , , .

,   ,  60%   , .      ,    81%, ,  -, .

MVP.

 6 ,   proof of concept   , ,   ,  .    ,   ,   .

, , ,   ,   ,    — ,   , .    ,     , , .

«-1».

  ,   ,   : « ,   , , , ».     , , « » ,    .     4  , .

   ,   . -,   ,   , - , , .     ,       . -, ,        . ,  ,      .

ML-.

,   ML-,     6 .   ML-?

•    Catboost,   ,     .
•     ,        .
•     ,     ,  ,  ,   ,  ,    .
•   70 .
•     ,   Permutation Importance  ,   Catboost.
•   ,       80/20.
•   ,     .
• ,    ,     ,    train/valid-.
•     DVC,    S3.

  :

• ROC-AUC: 0.68
• Recall: 0.77

 —    .   ,   DataLake   GreenPlum.   ,  MongoDB,  .   GreenPlum  MongoDB   opensource- Apache- Apache AirFlow  Apache NiFi.

Python-,  Kubernetes.     ,   -   Apache Kafka,   ,         Apache Kafka.

  6    ,   15%    12%,   E-com   . ,   ,   .

  ,    ,    .   ,    — ,   ,     .           .

p.s. Avito.Tech, .