机器学习在商品匹配中的实践

《机器学习在商品匹配中的实践》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、机器学习在商品匹配中的实践刘洋@1号店2017/4/22www.yhd.com服务客户尊重个人追求卓越诚信行事商品匹配商品定价友商调研商品选品商品匹配类目挂靠用户推荐www.yhd.com服务客户尊重个人追求卓越诚信行事商品匹配问题特点•完全匹配，不是商品相似•短文本，对词敏感1号店标题千岁好山茶油5L/瓶友商标题千岁好有机山茶油5L压榨一级油茶籽油非转基因食用油5升1号店标题北纯黑豆360g/袋友商标题北纯有机黑豆360g杂粮豆浆专用新老包装随机www.yhd.com服务客户尊重个人追求卓越诚信行事1号店商品匹配历程机器学习匹配纯数据驱动匹配

2、特征工程匹配规则匹配www.yhd.com服务客户尊重个人追求卓越诚信行事规则匹配1号店标题鲜得味茄汁口味金枪鱼180g泰国进口友商标题泰国进口鲜得味金枪鱼罐头（茄汁味）无防腐剂180g品牌一致=SUCCESS=ERROR口味一致不匹配>0.3<0.3重量一致不匹配=SUCCESS=ERROR匹配不匹配www.yhd.com服务客户尊重个人追求卓越诚信行事SupervisedLearningData1.DividedatausingprioriknownclasslabelsPositiveNegativeDatasetDatasetTrain

3、ing2.BuildmodelbytrainingModel3.EstimateaccuracybycalculatinglikelihoodLikelihoodofmodelP(D

4、M)www.yhd.com服务客户尊重个人追求卓越诚信行事机器学习匹配流程OfflineTrainingDataPreprocessingModelTrainingModelSelectionProductinfoFilteringSegmentationFeatureSelectionModelEvaluationModelClassifierModelOnli

5、nePredictingDataPreprocessingModelFeatureSaveProductinfoFilteringSegmentationFeatureExtractionconfirmwww.yhd.com服务客户尊重个人追求卓越诚信行事基于特征工程的商品匹配FeatureEngineering1品牌打分2颜色打分3系列词打分4成分打分5地区打分6口味打分7型号打分8单位打分9价格打分10相同词比例……www.yhd.com服务客户尊重个人追求卓越诚信行事纯数据驱动的商品匹配商品标题描述词维度高且稀疏。1号店标题盼盼法式软面包

6、奶香味200g/袋422284:YHD_BRAND:盼盼5848:YHD_UNIT_QUANTITY:117510:YHD_CATEGORY_KEYWORD:软面包553547:YHD_LASTWORD:法式635361:YHD_UNIT_WEIGHT:200000MG317607:YHD_TASTE:奶香味友商标题盼盼法式小面包奶香味200g零食早餐面包蛋糕1058153:OPPON_BRAND:盼盼1271230:OPPON_UNIT_WEIGHT:200000MG650575:OPPON_CATEGORY_KEYWORD:早餐641717

7、:OPPON_UNIT_QUANTITY:1650996:OPPON_CATEGORY_KEYWORD:面包1153623:OPPON_LASTWORD:小658432:OPPON_CATEGORY_KEYWORD:蛋糕1189416:OPPON_LASTWORD:法式659318:OPPON_CATEGORY_KEYWORD:零食953476:OPPON_TASTE:奶香味www.yhd.com服务客户尊重个人追求卓越诚信行事纯数据驱动匹配采用的模型FactorizationMachine（因子分解机）•把标题词作为特征，通过隐向量进行表示。

8、•适合解决稀疏矩阵特征组合问题。•模型高效，可在线性时间训练和预测。•应用面广，还可以用于：•计算搜索查询词和商品间的相关性•推荐相似商品www.yhd.com服务客户尊重个人追求卓越诚信行事FactorizationMachine模型：全局偏置：线性项权重：隐向量二阶多项式模型www.yhd.com服务客户尊重个人追求卓越诚信行事训练样本示例1480773:113333:1633837:15848:155446:1317591:1317520:18829:11116642:1649202:1650575:1648085:1636763:112

9、69706:1641717:1691315:1953460:1644698:1480773:YHD_BRAND:康师傅1116642:OPPON_BR