تحية للجميع! اسمي ساشا ، أنا CTO وشريك مؤسس في LoyaltyLab. قبل عامين ، ذهبت مع الأصدقاء ، مثل جميع الطلاب الفقراء ، في المساء لتناول الجعة إلى أقرب متجر بالقرب من منزلي. كنا مستائين للغاية من أن بائع التجزئة ، مع العلم أننا سنأتي لجعة ، لم يقدم خصمًا على الرقائق أو المفرقعات ، على الرغم من أن هذا أمر منطقي للغاية! لم نفهم سبب حدوث هذا الموقف وقررنا أن نجعل شركتنا. حسنًا ، كمكافأة ، اكتب خصومات لنفسك كل يوم جمعة للرقائق ذاتها.
![صورة](https://habrastorage.org/webt/8i/l_/fj/8il_fjdqcdscdkmkymoijiscvrk.jpeg)
وذهب كل هذا إلى حد أنني أتحدث في NVIDIA GTC مع المواد على الجانب التقني للمنتج . يسعدنا مشاركة أفضل ممارساتنا مع المجتمع ، لذلك أقوم بنشر تقريري في شكل مقال.
المقدمة
مثل كل شيء في بداية الرحلة ، بدأنا بمراجعة لكيفية عمل أنظمة التوصيات. والأكثر شعبية هي الهندسة المعمارية من النوع التالي:
![صورة](https://habrastorage.org/webt/p1/ys/ih/p1ysihudcy4mrcr19wauvqncwua.png)
:
- , .
- c .
:
- candidate/ — user-product, .
- candidates extraction/extractor/ — “ ” .
. — ALS. , , . , , . , ALS, baseline’.
, , , realtime , , 30 , , , . , , , , — , .
baseline , ALS . , , :
- Precision — .
- Recall — , target .
- F1-score — F-, .
. 3 :
- precision@5 — -5 .
- response-rate@5 — ( 5 ).
- avg roc-auc per user — roc-auc .
, time-series -, k , test k+1 . / . -, — . , .
, , baseline, ALS .
:
![صورة](https://habrastorage.org/getpro/habr/post_images/07f/379/634/07f379634f5e6798b45598ac77bd6e1c.png)
:
![صورة](https://habrastorage.org/webt/em/zh/7w/emzh7wf3h0l4izudamg0cgkrs9o.png)
, . , , , , “ , ”. , , :
- .
- , .
- .
- /.
- ( ).
- , , (Word2Vec, DSSM, etc.).
, . , K ( 1-3 ), K . , :
![صورة](https://habrastorage.org/webt/jb/bz/hy/jbbzhyad6oi5gprlueoi6n4mp6m.png)
, , , recall precision . “ 2 ”.
,
, “ ” , , , - . . , ALS, , . “ ” , , / , , , , , . 2 :
![صورة](https://habrastorage.org/webt/hp/wp/cu/hpwpcuio0qtrkusiejnuxatm2eg.png)
k — , 14 .
, , .
, - . , //. , - . — , k . , . :
![صورة](https://habrastorage.org/webt/wt/tu/rs/wttursimwerbrz3zg1pufwkwty0.png)
, , , . :
![صورة](https://habrastorage.org/webt/zn/ym/os/znymostug2fwhg-u6gf94ypjile.png)
2 , :
- , , K .
- , .
, :
![صورة](https://habrastorage.org/webt/uf/rl/ni/ufrlnixb_wn7giniixxal-kxkie.png)
ft — , K ( K=5)
tm — ,
, (0, 0) recall precision, . , , k , .
— , . -k “” / “” /. “” “” . . , , , . . :
![صورة](https://habrastorage.org/webt/lo/qv/qp/loqvqpkcwsduv1jin48dn-atvjm.png)
“category” .
, , , “” .
, — . 2 , [ i]-[ j], j > i, . producti-productj , producti . -k , . :
![صورة](https://habrastorage.org/webt/qn/1h/7g/qn1h7g6w7ib6as34ovdoq1zzebu.png)
:
![صورة](https://habrastorage.org/webt/fo/jf/sn/fojfsnnjafpwug6l3qtnbichbpe.png)
, : , , . , , , .
:
![صورة](https://habrastorage.org/webt/4h/uv/mw/4huvmwolwo88lip-xcoz3v4w_ms.png)
k — , .
, k=4. 4 .
, ,
— , . 3:
- ALS
- Word2Vec (Item2Vec )
- DSSM
ALS , , . Word2Vec, gensim. , , . , , “” ( ). ecommerce , Ozon. DSSM . Microsoft, , research paper. :
![صورة](https://habrastorage.org/webt/zb/xn/n5/zbxnn56hdkgqf5mpygm8amvfyiw.png)
Q — query, , D[i] — document, -. , . (multilayer perceptron). , .
, , — . :
![صورة](https://habrastorage.org/webt/zx/c3/qg/zxc3qg_qwpw9-jnot_4etg_sj80.png)
— ALS DSSM , Word2Vec . 3 :
- , , .
- .
- TF-IDF .
, , , , . 1, , ½, ⅓, .:
![صورة](https://habrastorage.org/webt/il/s5/j4/ils5j4ul2kodk-7jgf4waxcarcs.png)
TF-IDF , TF-IDF , , , , — . , . :
![صورة](https://habrastorage.org/webt/r8/b1/sa/r8b1say3j7ime-mbrirxz4xq14a.png)
. ALS:
![صورة](https://habrastorage.org/webt/xz/1a/jk/xz1ajkhsu_zhylaw0l29bxa91bm.png)
Item2Vec :
![صورة](https://habrastorage.org/webt/hr/gh/w9/hrghw9cp9d4qe7juxjfcdfrcnoa.png)
, baseline. , k . , , 50-70 .
DSSM:
![صورة](https://habrastorage.org/webt/dx/mu/zp/dxmuzpry5qr27x0qdru5w9nwanm.png)
?
, , ? ? :
- - . , , , .
- ?
, : , . , , , “ ” “ ”.
, , : (recall). , , . .
![صورة](https://habrastorage.org/webt/lc/zm/ec/lczmecnenayn88z0kakkecslfjq.png)
— , recall — . 2 , :
, «, » , . , “ ” . , . , .
:
![صورة](https://habrastorage.org/webt/fg/_i/3q/fg_i3qwyamwq1kav4qo4dreufhg.png)
:
![صورة](https://habrastorage.org/webt/3c/wf/c3/3cwfc3duictsz4gpwbwqdwwqhug.png)
, , . , , , . , . , , :
- / .
- .
- .
, , . , . . , :
- / .
- , . , -.
- , , .
:
![صورة](https://habrastorage.org/webt/0d/3_/_p/0d3__pctiv04yhmht56zfjwb2og.png)
overall products conversion — , .
. , , , . , , .
, , , , — 3-4%:
![صورة](https://habrastorage.org/webt/bf/9z/xx/bf9zxxhzhlztrokvhdkeyig2jes.png)
, , realtime , . , .
, . telegram. AI/ telegram — welcome :)