机器学习实践:ALS的矩阵分解¶
交替最小二乘法(Alternating Least Squares, ALS)是一个比较古早的推荐系统算法了,发表在18年之前,本来已经完全可以不管了,因为用神经网络(Neural Network)做物品的embedding的效果已经很好了。
但是,NN开销确实比较大,一来训练速度限制样本不能太多,二来内存限制物品数量不能太多(虽然严格意义上,通过更猛的框架分布式,PS之类可以解决,但也更麻烦)。因此,又把ALS算法给捡起来了,它的效果上虽然只能达到NN的80%左右,但是优势是,
- 用户和物品数量几乎无上限(只要不超过整型最大21亿,微博月活用户能全量分解)
- 训练速度非常快(因为没有反向传播/SGD)
- 可以分布式(Spark MLlib的明星算法)
粗看下来,几乎是弥补了神经网络的劣势,因此有了这篇实践,看看有什么坑,摸摸上限在哪里。(跳转踩坑后的总结)
1、理论¶
交替最小二乘法(Alternating Least Squares, ALS)是一种不需要反向传播的优化方法。这是因为ALS是一种基于线性代数的矩阵分解方法,而不是基于梯度下降的优化方法。在ALS中,优化过程通过交替固定用户或物品矩阵来解决相应的最小二乘问题,这样就可以直接利用解析解来更新用户或物品向量。
与需要使用反向传播的神经网络方法或者FM不同,ALS的优化过程不涉及计算导数链。由于这一特性,ALS在实现上比较简单,并且非常适合并行计算和大规模稀疏数据集的处理。
这篇博客中有简单的迭代动画示例,就不搬公式了。
1.1、项目背景¶
我们的目标是训练三级标签向量,输入数据是用户兴趣分数。例如,对某个用户而言,有如下的兴趣标签,形如(user, tag, weight)
其中,分数是基于用户历史点击行为统计得到的,越高则越感兴趣。标签总量在10万量级,用户总量在亿级别。如果验证成功,那么也可以推广到其他用户行为日志,每种日志都可以算出一份矩阵分解向量。
1.2、“0”的处理¶
1.2.1 难点¶
矩阵分解做推荐的原理,看似简单,毕竟在线性代数中就学过,例如LU,QR,SVD。但是有一个点,必须要明确提出来,那就是0的含义。在线性代数学习的时候,我们的拟合的是矩阵的全部项,包括0项和非0项,但是在推荐系统中,用户的打分矩阵是稀疏的,0的含义是两层,
-
表达了用户的隐式反馈,1>0,也就是用户打分的项就比没打分的0兴趣高
-
表达了未知,NULL,也就是待预测
在处理零的问题上,其实就很微妙,
-
如果去拟合 全部的 数值,也就是线性代数的方式,那么模型只会表达第一种含义,将把大部分数据预估为0,就没有起到补充推荐的意义了,实践中几乎不会这么处理
-
如果只拟合 非零 的数值,那么模型会把稀疏矩阵的0位置全部填充一个非零值,即只表达了第二种含义,但忽略掉了用户最大量的隐式反馈。
对于第二种处理,在某些推荐场景中,用户会 明确为所有/大部分物品 进行0-5分的打分,没有隐式反馈,那完全是可以应用的,例如MovieLens数据。
但是,像用户点击日志、互动日志,或者我们要拟合的用户兴趣数据,就不合适了,因为没出现的物品,大概率是不感兴趣的,估计效果也不会好(后面做了相应验证)。
1.2.2 思路¶
那么有什么办法,可以同时满足两种需求呢?有三种思路,
- 拟合非零数值,但需要进行随机负采样(negative sampling)(即是说,以一定概率认为NULL的数据是0)
- 拟合正样本和零样本,但是样本权重不同,正样本提权,零样本降权(即是说,正样本尽量还原为1,负样本松弛的认为是0)
- Bayesian Pairwise Ranking(BPR),拟合非零数值的偏序对,以及随机负采样的与正样本的偏序对
今天的主角,Spark实现的ALS模型,支持的方式是第1种和第2种,我2014年实现的FM-BPR是第3种。
对比下SVD系列和ALS
SVD(Singular Value Decomposition)
- 标准的数学分解方法,将矩阵精确分解为三个子矩阵。
- 适用于各种数据分析任务,如降维和噪声过滤。
- 局限性:高计算复杂度,特别是对于稀疏矩阵。
ALS(Alternating Least Squares)
- 没有反向传播,迭代优化算法,特别擅长处理稀疏矩阵。
- 由于其易于并行化和处理大规模数据的能力,常用于推荐系统。
- 局限性:解可能是局部最优,需调参和良好的初始化。
Funk SVD
- 针对推荐系统的一个变种,不需要显式地计算整个用户-项目评分矩阵。
- 通过梯度下降法优化分解过程,目标是最小化预测评分与实际评分的误差。
- 在Netflix Prize竞赛中流行起来。
- 优点:
- 更加灵活,易于处理大型稀疏矩阵。
- 能对用户和项目的隐含特征进行直接建模。
SVD++
- 扩展了Funk SVD的基本模型,通过加入关于用户隐式反馈的信息(例如,用户是否浏览过特定项目,不论评分如何)。
- 增加了对用户是否与项目交互过(而非仅作出过评分)的考量。
- 优点:
- 提高了推荐系统的准确性,因为它利用了更多关于用户偏好的信息。
- 适用于处理含有隐式反馈的数据集。
1.3、拟合模式¶
根据Spark ALS官方文档的说明,支持两种训练模式,一种是显式反馈(explicit preference),另一种是隐式反馈(implicit preference)。
1.3.1 显式反馈¶
显式反馈模式下,矩阵分解要拟合的目标是限定在非零项,损失函数如下,注意其中的集合\(I_u = \{i | r_{u,i}>0\}\),
因此,要增加隐式反馈,需要我们人工添加随机负样本集合\(N_u\),
效果是,正样本拟合数值本身,比如0.8,0.9分的兴趣,用来区分高分兴趣和低分兴趣,随机采样的负样本,拟合数值为0,用来区分低分兴趣和非兴趣标签。
Note
这一负采样步骤非常重要,大部分网上资料并没有明确指出,直接套用跑ALS的效果实际很差。
1.3.2 隐式反馈¶
隐式反馈模式,实现基于2008年Koren的论文,“Collaborative Filtering for Implicit Feedback Datasets"
Essentially instead of finding the low-rank approximations to the rating matrix R, this finds the approximations for a preference matrix P where the elements of P are 1 if r > 0 and 0 if r <= 0. The ratings then act as ‘confidence’ values related to strength of indicated user preferences rather than explicit ratings given to items.
损失函数定义如下,
where
- \(c_{u,i}=1+\alpha r_{u,i}\)
- \(p_{u,i}=1\) if \(r_{u,i}>0\) and \(p_{u,i}=0\) if \(r_{u,i}=0\)
- \(r_{u,i}\) is a numerical representation of users' preferences (e.g., number of clicks, etc.)
用pytorch习惯的语言翻译一下,
- \(p_{u,i}\)是转化后的label,对于用户兴趣就是拟合1,非兴趣拟合数值0
- 损失函数为binary cross entropy
- \(c_{u,i}\)是样本权重(sample_weight),非兴趣就是1.0基础值,对兴趣标签,则是随着分越高,样本权重越大
- 实现的效果就是让负样本大概趋向于0,但很松弛;正样本趋向于1,且分值约大,约束力约强;
- \(\alpha\)是一个重要的超参数,理想情况下希望让,0.9分预估0.999,0.6分预估0.6,NULL样本预估成0.4分,能贡献差不多的loss,很明显\(\alpha\)需要结合\(r\)的取值范围来定,如果\(r\in[0,1]\),那么\(\alpha>1\)比较合适,另外负样本比较多的话(稀疏度高),\(\alpha\)也需要相应调大
- 不用额外随机添加负样本,因为已经全部使用了(只是confidence低一些)
2、实践¶
完整训练代码: 用户兴趣标签的ALS矩阵分解
代码流程:
- 输入数据整理成
(user_code, item_code, weight)
的格式,code需要是整数范围内的值,也就是支持到20亿左右 - 定义好模型参数,训练模型,获得用户和物品向量
- 模型可以用来给矩阵补全,用RMSE和AUC可以进行评估补全效果,前者评估分数,后者评估顺序
- 使用faiss和cosine来评估item向量的相似召回结果,从感官上评估
2.1、核心代码¶
from pyspark.ml.recommendation import ALS, ALSModel
# 设置ALS模型参数
params = {
"maxIter": args.maxIter,
"regParam": args.regParam,
"userCol": 'user_code',
"itemCol": 'tag_code',
"ratingCol": 'weight',
"rank": args.rank,
"coldStartStrategy": 'drop',
"implicitPrefs": args.implicitPrefs,
"alpha": args.alpha,
"numUserBlocks": args.als_blocks,
"numItemBlocks": args.als_blocks
}
als = ALS(**params)
# 训练模型
model = als.fit(train_data)
# 评估模型
metrics = evaluate(model, test_data, 0.75)
代码简单,但实际跑下来的话,发现效果差异很大,有时完全不可用,有时又到能达到神经网络的85%。因此记录下我测试过的各种因素,以确认真实有效的步骤。
2.2、效果展示¶
2.2.1 Explicit(显式无负采样)¶
默认模式,特点:头部标签挺好的,召回排序挺符合预期的,但会掺杂一些离谱的标签,长尾的不行
AUC = 0.8886290409072619
Root-mean-square error = 0.40032166991548884
相似物品召回效果如下,
{'regParam': 0.01, 'rank': 20, 'implicitPrefs': False, 'transform': 'none'}
2024-12-10 20:22:31.380 | INFO | __main__::251 - 数据集的schema:
2024-12-10 20:23:44.544 | INFO | __main__:split_dataset:75 - 数据中总标签数:52822
2024-12-10 20:26:26.558 | INFO | __main__::281 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 20, 'coldStartStrategy': 'drop', 'implicitPrefs': False, 'alpha': 500.0, 'numUserBlocks': 160, 'numItemBlocks': 160}
2024-12-10 20:26:26.586 | INFO | __main__::293 - 使用转换:none -> Column<'weight'>
2024-12-10 20:58:41.545 | INFO | __main__::304 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_20.imp_False.reg_0.01.a_500.0.it_10.tf_none.sub_0%1%2%3%4%5%6%7%8%9
2024-12-10 21:01:01.609 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.40032166991548884
2024-12-10 21:01:08.164 | INFO | __main__:evaluate:93 - AUC = 0.8886290409072619
2024-12-10 21:01:13.852 | INFO | __main__::341 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-10 21:01:13.853 | INFO | __main__::351 - 准备物品特征...
2024-12-10 21:01:18.277 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52822, 20)
2024-12-10 21:01:18.869 | INFO | __main__::357 - 计算相似物品...
2024-12-10 21:01:33.106 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|袁世凯:1.0|冯玉祥:1.0|洪秀全:1.0|朱元璋:1.0|明朝:1.0|明成祖:1.0|李自成:1.0|太平天国:1.0|古代政治家:1.0|汪精卫:1.0|唐朝:1.0|崇祯:1.0|蒋介石:1.0|秦始皇:1.0|元朝:1.0|汉朝:1.0|八国联军:1.0|清朝:1.0|春秋战国:1.0|孙中山:1.0|军统:1.0|安禄山:1.0|杨秀清:1.0|张学良:1.0|汉高祖:1.0|杜月笙:1.0|蒋经国:1.0|希特勒:1.0|宋朝:1.0|成吉思汗:1.0|斯大林:1.0|汉武帝:1.0|努尔哈赤:1.0|岳飞:1.0|明太祖:1.0|原子弹:1.0|李宗仁:1.0|阎锡山:1.0|白崇禧:1.0|唐太宗:1.0|戴笠:1.0|左宗棠:1.0|和珅:1.0|慈禧:1.0|北宋:1.0|隋朝:1.0|毛主席:1.0|抗日战争:1.0|张作霖:1.0
2024-12-10 21:01:33.111 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|押题:1.0|真题:1.0|考前焦虑:1.0|复习计划:1.0|模拟题:1.0|民刑:1.0|戴鹏:1.0|理论法:1.0|备考:1.0|成绩:1.0|行政法:1.0|机构:0.9|考试:0.9|蓝井优太:0.9|商经:0.9|贾耗:0.9|学制五年:0.9|北京中医药大学:0.9|执业医师考试:0.9|商法:0.9|甄子琦:0.9|答题思路:0.9|贾凡:0.9|李笑来:0.9|非法经营罪:0.9|法考:0.9|担保物权:0.9|章宇:0.9|刷题:0.9|医师资格考试:0.9|作文模板:0.9|计算题:0.9|临床执业医师:0.9|行贿罪:0.9|食品科学与工程:0.9|黑白密码:0.9|只是结婚的关系:0.9|抵押权:0.9|华北科技学院:0.9|姜小海:0.9|刘润南:0.9|主观题:0.9|杜洪波:0.9|卷毛比雄犬:0.9|财务管理:0.9|Tatan:0.9|郑北:0.9|郑州师范学院:0.9
2024-12-10 21:01:33.116 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|瑞幸咖啡:1.0|肥牛卷:1.0|雨天:1.0|网商银行:1.0|水煮菜:1.0|番茄排骨:1.0|科目三:1.0|恶意:1.0|情侣鞋:1.0|谭卓:1.0|突然好想你:1.0|板栗鸡翅:1.0|香辣蟹:1.0|周一(明星):1.0|中秋节:1.0|于翔:1.0|郑执:1.0|情书:1.0|镜头:1.0|广告:1.0|打印机:1.0|东京贵族女子:1.0|春节:1.0|丁墨:1.0|麋鹿:1.0|咖喱鸡肉饭:1.0|手机支架:1.0|爱奇艺:1.0|头部:1.0|闪光灯:1.0|影院:1.0|富士山下:1.0|退票:1.0|高考状元:1.0|若月亮没来:1.0|蹦床:1.0|安徽省教育招生考试院:1.0|张博洋:1.0|惠英红:1.0|年少日记:1.0|机器人之梦:1.0|杨默依:1.0|北京爱情故事:1.0|长发:1.0|四海:1.0|喻恩泰:1.0|金世佳:1.0|咖啡杯:1.0|凤梨:1.0
2024-12-10 21:01:33.116 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|瑞幸咖啡:1.0|蜂花:1.0|香精:1.0|三得利乌龙茶:1.0|喜茶:1.0|优色林:1.0|咖啡杯:1.0|戴森吹风机:1.0|霸王茶姬:1.0|南昌拌粉:1.0|油皮亲妈:1.0|凤梨:1.0|打印机:1.0|脆桃:1.0|手机支架:1.0|毛囊:1.0|消炎:1.0|杯子:1.0|肩颈:1.0|投影仪:1.0|味全:1.0|巧克力冰淇淋:1.0|面膜贴:1.0|美容护肤:1.0|Lena:1.0|情侣鞋:1.0|维生素E:1.0|艾琳:1.0|美容仪:1.0|她研社卫生巾:1.0|古茗:1.0|止痒:1.0|瑞士卷:1.0|发胶:1.0|精华霜:1.0|润肤:1.0|烤生蚝:1.0|茉莉奶绿:1.0|乌龙茶:1.0|艾丽美:1.0|半熟芝士:1.0|柠檬水:1.0|烤羊肉:1.0|可乐:1.0|牛肉饼:1.0|茉莉花茶:1.0|戴森:1.0|三酸:1.0|苏打水:1.0
2024-12-10 21:01:33.120 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|苏翊鸣:1.0|霜花店:1.0|赫尔辛基:1.0|东京爱情故事:1.0|什刹海:1.0|安娜·伊万诺维奇:1.0|李元胜:1.0|垫底辣妹:1.0|徒步:1.0|夏雨雨:1.0|斑比Bambii:1.0|爱乐之城:1.0|跳伞:1.0|深圳大学:1.0|谷燕:1.0|李浩源:1.0|莫高窟:1.0|自由式滑雪:1.0|晒后假日:1.0|喜洲古镇:1.0|花束般的恋爱:1.0|西交利物浦大学:1.0|脏话:1.0|蔡崇达:1.0|Charlie Puth:1.0|悉达多:1.0|奶油意面:1.0|播客:1.0|超异能族:1.0|陈瑜:1.0|加利福尼亚州:1.0|王晓:1.0|我要我们在一起:1.0|李嗣镕:1.0|贾樟柯:1.0|时尚单品:1.0|211:1.0|春夏:1.0|我与地坛:1.0|滑雪:0.9|发音:0.9|石倚洁:0.9|金敏喜:0.9|高源:0.9|星际穿越:0.9|安东内:0.9|蒙纳士大学:0.9|潜水:0.9|啫啫煲:0.9
2024-12-10 21:01:33.120 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|哥本哈根时装周:1.0|朴智炫:1.0|男生穿搭:1.0|朴载相:1.0|工业建筑:1.0|祝晓晗:1.0|雅思作文:1.0|Gisele Bundchen:1.0|泳衣:1.0|王小草:1.0|李光洙:1.0|坎迪丝·斯瓦内普尔:1.0|吉赛尔·邦辰:1.0|戴娃·卡塞尔:1.0|安妮·海瑟薇:1.0|穿普拉达的女王:1.0|鲁菜:1.0|黄西:1.0|小谢尔顿:1.0|潮汕生腌:1.0|浴血黑帮:1.0|Sporty & Rich:1.0|春夏时装周:1.0|sam smith:1.0|美女街头测试:1.0|王诗安:1.0|战绳:1.0|健身游泳:1.0|犯罪都市:1.0|刘真:1.0|First Love 初恋:1.0|马东锡:1.0|Running Man:1.0|吉赛尔·邦辰:1.0|海外脱口秀:1.0|生腌:1.0|白莲花度假村:1.0|我叫赵甲第:1.0|姜思达:1.0|Mirrors:1.0|搞笑采访:1.0|燃情克利夫兰:1.0|老友记:1.0|孙燕姿:1.0|massimodutti:1.0|鹿晨辉:1.0|刘在石:1.0|莉莉-罗丝·德普:1.0|郭采洁:1.0
2024-12-10 21:01:33.124 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|李昌镐:1.0|古力:1.0|亨克:1.0|马晓春:1.0|常昊:0.9|聂卫平:0.9|刘锋:0.9|何韵诗:0.9|罗德里-塔林:0.9|皮克:0.9|贝尔纳尔:0.9|华山论剑:0.9|罗本:0.9|美国足球:0.9|加里-莱因克尔:0.9|卡西利亚斯:0.9|拉沃尔杯:0.9|姜东润:0.9|井山裕太:0.9|贝肯鲍尔:0.9|又是充满希望的一天:0.9|克莱蒙:0.9|唐凯:0.9|雷东多:0.9|大罗纳尔多:0.9|叶甫根尼·维克托罗维奇·普鲁申科:0.9|法尔考:0.9|奥兰多城:0.9|芝野虎丸:0.9|盖德·穆勒:0.9|刘昌赫:0.9|塞尔吉奥·拉莫斯:0.9|克林斯曼:0.9|芮乃伟:0.9|三星杯:0.9|世界杯金球奖:0.9|申旻埈:0.9|格雷茨卡:0.9|索莱尔:0.9|德拉富恩特:0.9|一力辽:0.9|许皓鋐:0.9|纳赛尔:0.9|崔精:0.9|金明训:0.9|春兰杯:0.9|上野爱咲美:0.9|薛皓文:0.9|薛桐:0.9
2024-12-10 21:01:33.128 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|史蒂夫-诺瓦克:1.0|多米尼克蒂姆:1.0|亚历山大-兹维列夫:1.0|马德里大师赛:1.0|卡斯珀-鲁德:1.0|萨芬:1.0|罗德·拉沃尔:1.0|尼克克耶高斯:1.0|阿尔卡拉兹:1.0|罗杰斯杯:1.0|费德勒:1.0|迈阿密大师赛:1.0|费雷尔:1.0|东山岛风动石:1.0|罗兰加洛斯:1.0|伊万尼塞维奇:1.0|丹尼尔·梅德韦杰夫:0.9|加斯奎特:0.9|阿加西:0.9|比约·博格:0.9|巴黎大师赛:0.9|特松加:0.9|金起范:0.9|锦织圭:0.9|沃达斯科:0.9|张德培:0.9|驯鹿:0.9|麦肯罗:0.9|玛利亚·莎拉波娃:0.9|德尔波特罗:0.9|杭州旅游:0.9|最伟大的作品:0.9|李俊慧:0.9|蒙特卡洛大师赛:0.9|苏迪曼杯:0.9|ATP:0.9|英皇电影:0.9|丁子高:0.9|泰勒·弗里茨:0.9|威斯玛车队:0.9|瓦林卡:0.9|谌龙:0.9|大草原:0.9|法网:0.9|陶菲克:0.9|同济大学:0.9|安迪穆雷:0.9|温网:0.9
2024-12-10 21:01:33.132 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|烟熏妆:1.0|赵晴:1.0|整容:1.0|虞书欣:1.0|田曦薇:1.0|刘海:1.0|卢昱晓:1.0|周也:1.0|唇妆:1.0|陈都灵:1.0|任敏:1.0|化妆:1.0|郭敬明:1.0|明星同款:1.0|王亚飞:1.0|白鹿:1.0|张予曦:1.0|中餐厅:1.0|于正:1.0|网红妆:1.0|偷偷藏不住:1.0|迪丽热巴:1.0|礼裙:1.0|明星盘点:1.0|赵露:1.0|发型:1.0|赵今麦:1.0|doe:1.0|刘浩存:1.0|月都花落:1.0|姜妍:1.0|SOMESOWE:1.0|张凌赫:0.9|礼服:0.9|云之羽:0.9|截断式眼妆:0.9|陈小纭:0.9|妆容:0.9|吴谨言:0.9|张婧仪:0.9|热巴:0.9|眉眼:0.9|双马尾:0.9|姚玉玲:0.9|云之羽:0.9|邱莹莹:0.9|老年妆:0.9|短发:0.9|郭晓婷:0.9
2024-12-10 21:01:33.136 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|灌篮高手:1.0|The First Slam Dunk:1.0|井上雄彦:1.0|汤姆·哈迪:1.0|流川枫:1.0|埃米纳姆:1.0|周耀辉:1.0|米老鼠:1.0|麦斯·米科尔森:1.0|柳乐优弥:1.0|坂本龙一:1.0|迈克尔·杰克逊:1.0|樱木花道:1.0|小羊:1.0|纳瓦帕特·塔纳蒙功萨瓦:1.0|Hunter Schafer:1.0|米尔科维奇:1.0|宫城良田:1.0|约翰尼·德普:1.0|昆汀·塔伦蒂诺:1.0|燃烧女子的肖像:1.0|乙一:1.0|温子仁:1.0|北极熊:1.0|布鲁诺·马尔斯:1.0|亨特·莎弗:1.0|袋熊:1.0|黄伟文:1.0|泷泽:1.0|金城武:1.0|基努·里维斯:1.0|安志杰:0.9|音乐制作:0.9|阿尔帕西诺:0.9|傻子:0.9|林家栋:0.9|伊桑·霍克:0.9|云南省博物馆:0.9|邪恶力量:0.9|浣熊:0.9|药水哥:0.9|锋味:0.9|今夜一起为爱鼓掌:0.9|孤勇者:0.9|熊家餐馆:0.9|开场:0.9|艾薇儿·拉维尼:0.9|王宁:0.9|楚乌:0.9
2024-12-10 21:01:33.136 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|交通卡:0.9|首都航空:0.9|杨凯迪:0.9|船袜:0.9|桃宝:0.9|小霞:0.9|刘玥:0.9|海阔天空:0.9|杜子建:0.9|张小飞:0.9|易小星:0.9|朝天门:0.9|父亲:0.9|塞斯·罗林斯:0.9|成熟大叔:0.9|男生女生向前冲:0.9|RUSH:0.9|陈怡曼:0.9|ipod:0.9|余罪:0.9|唐欣:0.9|闫晓楠:0.9|王嗣尧TURBO:0.9|杜蕾斯:0.9|内蒙古工业大学:0.9|南阳理工学院:0.9|江湖流:0.9|李琛:0.9|丁太升:0.9|手帕:0.9|面对面:0.9|拉宏桑:0.9|徐云丽:0.9|互联网安全:0.9|玛丽亚·凯莉:0.9|威尔:0.9|纳豆:0.9|绿箭侠:0.9|许诺:0.9|法国超级杯:0.9|泳儿:0.9|Burt's Bees:0.9|南通支云足球俱乐部:0.9|路默依:0.9|刘明湘:0.9|金惠美:0.9|丁当:0.9|武汉纺织大学:0.9|斗破苍穹:0.9
2024-12-10 21:01:33.137 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|The First Slam Dunk:1.0|灌篮高手:1.0|井上雄彦:1.0|坂本龙一:1.0|周耀辉:1.0|坂本龙一:杰作:1.0|音乐制作:1.0|婚姻故事:1.0|艾米·汉莫:1.0|米尔科维奇:1.0|埃米纳姆:1.0|昆汀·塔伦蒂诺:1.0|dean:1.0|汤姆·哈迪:1.0|狼行成双:1.0|米娅·高斯:1.0|麦斯·米科尔森:1.0|武田航平:1.0|开场:1.0|好莱坞往事:1.0|迈克尔·杰克逊:1.0|克里斯·派恩:1.0|柔术:1.0|幽游白书:1.0|北京天桥艺术中心:1.0|重庆大剧院:1.0|克里斯蒂安·贝尔:1.0|伊藤润二:1.0|耳廓狐:1.0|玉置浩二:1.0|基里安·墨菲:1.0|寂静岭:1.0|基努·里维斯:1.0|Hunter Schafer:1.0|玛克辛:1.0|傻子:1.0|陈顺:1.0|mario:1.0|信条:1.0|出版社:1.0|李沧东:1.0|青春王室:1.0|布鲁诺·马尔斯:1.0|科林·法瑞尔:1.0|她来听我的演唱会:1.0|沙丘:1.0|漩涡:1.0|巴里·基奥汉:1.0|亨特·莎弗:1.0
2024-12-10 21:01:33.141 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|卸妆乳:1.0|指甲油:1.0|单眼皮:1.0|清洁面膜:1.0|化妆品:1.0|口红:1.0|完美日记PerfectDiary:1.0|保湿面膜:1.0|甲油胶:1.0|唇部彩妆:1.0|卷发:1.0|粉底刷:1.0|混合皮:1.0|香水:1.0|日常妆:1.0|化妆镜:1.0|美妆购物分享:1.0|黛丝恩:1.0|艾杜纱:1.0|粉底霜:1.0|平价美妆:1.0|遮瑕膏:1.0|唇部试色:1.0|尤妮佳:1.0|睫毛打底:1.0|染发:1.0|唇彩:1.0|玫瑰水:1.0|修眉刀:1.0|颈霜:1.0|眼袋:1.0|水蜜桃:1.0|毛戈平鱼子酱面膜:1.0|眉毛画法:1.0|露华浓:1.0|化妆刷:1.0|眼部护理:1.0|大创:1.0|野生眉:1.0|润肤霜:1.0|祛水肿:1.0|画眼线:1.0|芦荟:1.0|滤镜:1.0|口红试色:1.0|双眼皮贴:1.0|眼线:1.0|MAC魅可:1.0|面部护理:1.0
2024-12-10 21:01:33.145 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|芈月传:1.0|甄嬛传:1.0|还珠格格:1.0|独步天下:1.0|宫锁珠帘:1.0|美人心计:1.0|妖猫传:1.0|灵魂摆渡·黄泉:1.0|如懿传:1.0|独孤天下:1.0|回家的诱惑:1.0|蒋欣:1.0|太子妃升职记:1.0|宫锁心玉:1.0|宫心计:1.0|清平乐:1.0|玉楼春:1.0|小鱼儿与花无缺:1.0|大军师司马懿之军师联盟:1.0|曹琴默:1.0|孝庄秘史:1.0|公主嫁到:1.0|辣妈正传:1.0|金粉世家:1.0|苏培盛:1.0|兰陵王:1.0|情深深雨濛濛:1.0|知否知否应是绿肥红瘦:1.0|三生三世十里桃花:1.0|暮光之城:1.0|金枝欲孽:1.0|杉杉来了:1.0|李天柱:1.0|周迅:1.0|晴儿:1.0|上错花轿嫁对郎:1.0|打狗棍:1.0|步步惊心:1.0|还珠格格第三部:1.0|许幻山:1.0|小时代:1.0|凤囚凰:1.0|画皮:1.0|欢乐颂:1.0|将军在上:1.0|武媚娘传奇:1.0|叶澜依:1.0|倾世皇妃:1.0|大宋宫词:1.0
2024-12-10 21:01:33.149 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|霍思燕:1.0|杜江:1.0|幸福三重奏:1.0|刘涛:1.0|伊能静:1.0|王子文:1.0|金莎:1.0|刘芸:1.0|郎朗:1.0|张嘉倪:1.0|佟丽娅:1.0|蔡少芬:1.0|窦骁:1.0|福原爱:1.0|再见爱人:1.0|包贝尔:1.0|钟丽缇:1.0|戚薇:1.0|孙莉:1.0|章子怡:1.0|女儿们的恋爱:1.0|秦昊:1.0|李承铉:1.0|黄奕:1.0|安以轩:1.0|张翰:1.0|秋瓷炫:1.0|李湘:1.0|汪峰:1.0|向佐:1.0|黄磊:1.0|袁弘:1.0|金巧巧:1.0|程莉莎:1.0|妻子的浪漫旅行:1.0|陈岚(向太):1.0|郭碧婷:1.0|蓝盈莹:1.0|林心如:1.0|蒋勤勤:1.0|张小斐:1.0|甜馨:1.0|于晓光:1.0|杜海涛:1.0|冉莹颖:1.0|陆毅:1.0|吴昕:1.0|王岳伦:1.0|金太郎的幸福生活:1.0
2024-12-10 21:01:33.157 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:1.0|进击的巨人:1.0|艾伦:1.0|尤弥尔:1.0|兵长:1.0|三笠:1.0|利威尔:1.0|李伟:1.0|葛力姆乔:1.0|八木莉可子:1.0|壹原侑子:1.0|邪恶力量:1.0|地狱少女:1.0|混沌武士:1.0|奶牛猫:1.0|黄金神威:1.0|巴西龟:1.0|久保带人:1.0|四月一日灵异事件簿:1.0|xxxholic:1.0|龙之谷:1.0|命运石之门:1.0|死神:1.0|黑猫:1.0|雕鸮:1.0|星野源:1.0|空洞骑士:0.9|飙马野郎:0.9|棋魂:0.9|Sonny Brisko:0.9|约定的梦幻岛:0.9|空之境界:0.9|克里斯蒂安·贝尔:0.9|洛基:0.9|我死前的百物语:0.9|艾伦耶格尔:0.9|月刊少女野崎君:0.9|齐木楠雄的灾难:0.9|波罗夷空却:0.9|新井圭一:0.9|野田洋次郎:0.9|不死川实弥:0.9|夏禾:0.9|生驹里奈:0.9|吉良吉影:0.9|无头骑士异闻录:0.9|水獭:0.9|指环王:0.9|古剑奇谭三:梦付千秋星垂野:0.9
2024-12-10 21:01:33.161 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|张柏芝:1.0|马伊琍:1.0|汪峰:1.0|伊能静:1.0|黄圣依:1.0|林心如:1.0|郭晶晶:1.0|李湘:1.0|李冰冰:1.0|孙俪:1.0|佟丽娅:1.0|金巧巧:1.0|王子文:1.0|蔡少芬:1.0|刘涛:1.0|蒋勤勤:1.0|福原爱:1.0|周冬雨:1.0|林志玲:1.0|陶虹:1.0|吴佩慈:1.0|大S:1.0|霍建华:1.0|窦骁:1.0|刘嘉玲:1.0|孟晚舟:1.0|不止于她:1.0|高圆圆:1.0|董洁:1.0|钟丽缇:1.0|贝克汉姆:1.0|李亚鹏:1.0|陈岚(向太):1.0|谢霆锋:1.0|霍思燕:1.0|陈建斌:1.0|张嘉倪:1.0|霍启刚:1.0|徐静蕾:1.0|幸福三重奏:1.0|赵又廷:1.0|巩俐:1.0|金星:1.0|安以轩:1.0|鲁豫有约:1.0|李小冉:1.0|章泽天:1.0|孙莉:1.0|阿雅:1.0
2024-12-10 21:01:33.165 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|海忍:1.0|超鬼王:1.0|山童:1.0|逢魔之时:1.0|御灵:1.0|阴阳师:超鬼王:1.0|石距:1.0|鲤鱼精:1.0|徐清林:1.0|百鬼弈:1.0|不见岳:1.0|入内雀:1.0|月读:1.0|惠比寿:1.0|铁鼠:1.0|小赛季:1.0|永生之海:1.0|为崽而战:1.0|镇墓兽(御魂):1.0|鬼童丸:1.0|云外镜:1.0|道馆:1.0|火灵:1.0|小鹿男:1.0|犬神:1.0|三尾狐:1.0|木魅:1.0|镰鼬:1.0|麓铭大岳丸:1.0|万年竹:1.0|应声虫:1.0|因幡辉夜姬:1.0|蝉冰雪女:1.0|首领退治:1.0|八百比丘尼:1.0|破势:1.0|缚骨清姬:1.0|白童子:1.0|源博雅:1.0|黑童子:1.0|饭笥:1.0|白藏主:1.0|神堕八岐大蛇:1.0|涂佛:1.0|镜姬:1.0|食灵:1.0|食发鬼:1.0|荒骷髅:1.0
2024-12-10 21:01:33.169 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|model x:1.0|roadster:1.0|semi:1.0|model s:1.0|cybertruck:1.0|特斯拉:1.0|充电桩:1.0|蔚来汽车:1.0|lucid:1.0|小鹏g3:0.9|小鹏p5:0.9|小鹏汽车:0.9|model 2:0.9|极氪:0.9|自动驾驶:0.9|理想mpv:0.9|小鹏p7:0.9|比亚迪:0.9|智己汽车:0.9|魔兽世界:0.9|蔚来es7:0.9|电池容量:0.9|零跑汽车:0.9|理想L9:0.9|埃隆·马斯克:0.9|蔚来et5:0.9|蔚来ec6:0.9|高合汽车:0.9|小鹏g9:0.9|奔驰eqs:0.9|李斌:0.9|奔驰eqe:0.9|奔驰eqs suv:0.9|中国铁建:0.9|zeekr 001:0.9|何小鹏:0.9|zeekr 009:0.9|蔚来es8:0.9|比亚迪汉:0.9|HUD:0.9|蔚来es6:0.9|Nothing:0.9|taycan:0.9|威马汽车:0.9|奔驰eqe suv:0.9|李想:0.9|蔚来et7:0.9|王自如:0.9
2.2.2 Implicit(隐式反馈)¶
特点:效果很稳定,随着维度增加,纯度增加
AUC = 0.8823677241297444
Root-mean-square error = 0.18436828857310827
{'regParam': 0.01, 'rank': 24, 'implicitPrefs': True, 'alpha': 500.0, 'transform': 'power4'}
2024-12-10 16:27:54.844 | INFO | __main__::250 - 数据集的schema:
2024-12-10 16:29:49.659 | INFO | __main__:split_dataset:75 - 数据中总标签数:52822
2024-12-10 16:32:15.582 | INFO | __main__::280 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 24, 'coldStartStrategy': 'drop', 'implicitPrefs': True, 'alpha': 500.0, 'numUserBlocks': 160, 'numItemBlocks': 160}
2024-12-10 16:32:15.615 | INFO | __main__::292 - 使用转换:power4 -> Column<'pow(weight, 4)'>
2024-12-10 17:11:32.088 | INFO | __main__::303 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_24.imp_True.reg_0.01.a_500.0.it_10.tf_power4.sub_0%1%2%3%4%5%6%7%8%9
2024-12-10 17:13:44.806 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.18436828857310827
2024-12-10 17:13:56.516 | INFO | __main__:evaluate:93 - AUC = 0.8823677241297444
2024-12-10 17:14:15.982 | INFO | __main__::340 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-10 17:14:15.982 | INFO | __main__::350 - 准备物品特征...
2024-12-10 17:14:19.523 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52822, 24)
2024-12-10 17:14:20.194 | INFO | __main__::356 - 计算相似物品...
2024-12-10 17:14:43.235 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|袁世凯:1.0|蒋经国:1.0|明成祖:1.0|戴笠:1.0|汉朝:1.0|成吉思汗:1.0|杜月笙:1.0|元朝:1.0|汪精卫:1.0|洪秀全:1.0|汉高祖:1.0|努尔哈赤:1.0|崇祯:1.0|和珅:1.0|西安事变:1.0|黄金荣:1.0|冯玉祥:1.0|汉武帝:1.0|太平天国:1.0|段祺瑞:1.0|项羽:1.0|孙殿英:1.0|十大元帅:1.0|八国联军:1.0|李自成:1.0|春秋战国:1.0|隋朝:1.0|安禄山:1.0|林彪:1.0|蒋纬国:1.0|明太祖:1.0|古代政治家:1.0|杨虎城:1.0|岳飞:1.0|李宗仁:1.0|阎锡山:1.0|张学良:1.0|彭德怀:1.0|朱棣:0.9|唐朝:0.9|明惠帝:0.9|吴佩孚:0.9|解放战争:0.9|光绪:0.9|唐玄宗:0.9|孙中山:0.9|北宋:0.9|军统:0.9|白崇禧:0.9
2024-12-10 17:14:43.240 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|选择题:1.0|学习计划:1.0|押题:1.0|备考期:1.0|逢考必过:1.0|答题思路:1.0|宪法学:1.0|文运:1.0|复习计划:1.0|考证:1.0|公司法:1.0|考试时间:1.0|简答题:1.0|华研法硕:1.0|真题:1.0|法学:1.0|模拟题:1.0|考试大纲:1.0|成绩:1.0|五院四系:1.0|宪法:1.0|理学:1.0|龚成思:1.0|法考证:1.0|判断题:1.0|机构:1.0|杜洪波:1.0|岳业鹏:1.0|法律硕士:1.0|民刑:1.0|案例分析题:1.0|理论法:1.0|司法部:1.0|戴寰宇:1.0|每日一题:1.0|商经:1.0|法律职业资格:1.0|考点:1.0|证书:0.9|高频考点:0.9|方鹏:0.9|戴鹏:0.9|立法法:0.9|民诉:0.9|国家统一法律职业资格考试:0.9|三国法:0.9|法硕非法学:0.9|考前焦虑:0.9
2024-12-10 17:14:43.245 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|九号:0.9|影院:0.9|crocs洞洞鞋:0.9|特仑苏:0.9|crocs:0.9|金尘茶:0.9|植物医生:0.9|水之蔻:0.9|暴龙:0.9|迪奥锁妆气垫粉底:0.9|瑞幸咖啡:0.9|乔治·阿玛尼:0.9|游乐园:0.9|sisley全能乳液:0.8|周正:0.8|刺猬:0.8|野孩子:0.8|champion:0.8|马亮:0.8|回望:0.8|记忆奇旅:0.8|极端天气:0.8|Emporio Armani:0.8|陈爽:0.8|生长:0.8|梁琳:0.8|江苏卫视跨年演唱会:0.8|阿玛尼高定私藏香水:0.8|金爵奖:0.8|中秋档:0.8|顾长卫:0.8|狂野时代:0.8|郑执:0.8|潘斌龙:0.8|Lindberg:0.8|学雷锋日:0.8|殷若昕:0.8|刘艳芬:0.8|王红卫:0.8|饶晓志:0.8|小小的我:0.8|阿玛尼贵族清新岩兰草香水:0.8|杨柳:0.8|票房:0.8|刘北山:0.8|阿玛尼红管405:0.8|奇迹:0.8|九层妖塔:0.8|苹果 iWatch:0.8
2024-12-10 17:14:43.245 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|库迪咖啡:0.9|瑞幸咖啡:0.9|茶百道:0.8|茶百道:0.8|丝绒拿铁:0.8|鞋花:0.8|柠季:0.8|麦当劳麦辣鸡腿堡:0.8|郑州方特欢乐世界:0.8|crocs:0.8|老乡鸡:0.8|百分茶:0.8|洞洞鞋:0.8|茉莉奶白:0.8|星巴克:0.8|奈雪的茶:0.8|青柑普洱:0.8|华莱士:0.8|乳茶:0.8|柠檬水:0.8|板栗烧鸡:0.8|运动手环:0.8|眷茶:0.8|醒图:0.8|杯子:0.8|甜啦啦:0.8|汇源果汁:0.8|携程:0.8|小度:0.8|crocs洞洞鞋:0.8|茉莉奶绿:0.8|德克士:0.8|和府捞面:0.8|骆驼冲锋衣:0.8|苹果 iWatch:0.8|茉莉茶:0.8|九号:0.8|鲜果茶:0.8|蜜雪冰城柠檬水:0.8|蚂蚁森林:0.8|沪上阿姨:0.8|嘉华鲜花饼:0.8|水之蔻:0.8|茉莉绿茶:0.8|网易云音乐:0.8|kfc:0.8|青梅绿茶:0.8|清扬:0.8|飞利浦:0.8
2024-12-10 17:14:43.250 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|闫涵:0.9|周知方:0.9|陈巍:0.9|张可欣:0.9|韩聪:0.9|宇野昌磨:0.9|隋文静:0.9|索契冬奥会:0.9|滑冰:0.9|世界花样滑冰锦标赛:0.9|高桥大辅:0.9|马琳琳:0.9|内村航平:0.9|自由式滑雪:0.9|金博洋:0.9|金杨:0.9|冰雪项目:0.9|自由滑:0.9|浅田真央:0.9|键山优真:0.9|纪平梨花:0.9|齐广璞:0.9|平昌冬奥会:0.9|宫原知子:0.9|坂本花织:0.9|庞清:0.9|山本草太:0.9|三浦佳生:0.9|友野一希:0.9|世界花样滑冰大奖赛:0.9|佟健:0.9|彭程:0.9|本田真凛:0.9|花样滑冰锦标赛:0.9|车俊焕:0.9|葛全朔:0.9|千叶百音:0.9|佐藤骏:0.9|林宇飞:0.9|韩雨:0.9|1tv:0.9|陈溪梓:0.9|亚古丁:0.9|高子健:0.9|三原舞依:0.9|木原龙一:0.9|帆船帆板:0.9|叶甫根尼·维克托罗维奇·普鲁申科:0.9|李海仁:0.9
2024-12-10 17:14:43.250 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|滑雪:0.9|滑雪装备:0.9|冲浪:0.9|潜水:0.9|滑雪场:0.9|悉尼歌剧院:0.9|多瑙河:0.9|布里斯班:0.9|西西里岛:0.9|雕塑家:0.9|少女峰:0.9|爱琴海:0.9|骑马:0.9|阿尔卑斯山:0.9|泰晤士河:0.9|皇后镇:0.9|潘家杰:0.8|卢塞恩:0.8|埃菲尔铁塔:0.8|毕加索:0.8|轮滑:0.8|美术馆:0.8|米其林餐厅:0.8|里斯本:0.8|科莫湖:0.8|凡尔赛宫:0.8|普罗旺斯:0.8|清酒:0.8|自驾旅行:0.8|威士忌:0.8|滑板:0.8|观赏鱼:0.8|波尔图:0.8|啄木鸟:0.8|鹀:0.8|澳大利亚旅行:0.8|蛱蝶:0.8|波西塔诺:0.8|世界音乐:0.8|鹬:0.8|达芬奇:0.8|那不勒斯:0.8|蜻蜓:0.8|凤蝶:0.8|山本耀司:0.8|伦勃朗:0.8|热红酒:0.8|勺嘴鹬:0.8|卑尔根:0.8
2024-12-10 17:14:43.255 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|古力:1.0|李昌镐:1.0|连笑:1.0|春兰杯:1.0|聂卫平:1.0|马晓春:1.0|申旻埈:1.0|三星杯:1.0|朴廷桓:1.0|崔精:1.0|芮乃伟:1.0|许皓鋐:1.0|谢尔豪:1.0|赵晨宇:1.0|李钦诚:1.0|芈昱廷:1.0|姜东润:1.0|金明训:1.0|常昊:1.0|於之莹:1.0|时越:1.0|俞斌:1.0|党毅飞:1.0|刘昌赫:1.0|杨鼎新:1.0|许家元:1.0|范廷钰:1.0|丁浩:1.0|井山裕太:1.0|陶欣然:1.0|陈耀烨:1.0|辜梓豪:1.0|檀啸:1.0|廖元赫:1.0|卞相壹:1.0|王星昊:1.0|许嘉阳:1.0|李轩豪:1.0|李维清:1.0|金恩持:1.0|金禹丞:1.0|元晟溱:1.0|夏晨琨:1.0|申真谞:1.0|芝野虎丸:1.0|谢科:1.0|刘宇航:1.0|屠晓宇:1.0|彭立尧:1.0
2024-12-10 17:14:43.259 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|ATP:1.0|卡洛斯·阿尔卡拉斯:1.0|扬尼克-辛纳:1.0|上海大师赛:1.0|商竣程:0.9|安娜·伊万诺维奇:0.9|吴易昺:0.9|布云朝克特:0.9|大坂直美:0.9|罗兰加洛斯:0.9|费德勒:0.9|斯瓦泰克:0.9|帕特里克·莫拉托格鲁:0.9|瓦林卡:0.9|费雷尔:0.9|多米尼克蒂姆:0.9|法网:0.9|萨芬:0.9|特松加:0.9|佩古拉:0.9|王雅繁:0.9|卢布列夫:0.9|上海网球大师赛:0.9|纳瓦罗:0.9|伯蒂奇:0.9|科里-高芙:0.9|西西帕斯:0.9|史蒂夫-诺瓦克:0.9|莱巴金娜:0.9|穆塞蒂:0.9|安德列娃:0.9|加斯奎特:0.9|尼克克耶高斯:0.9|亚历山大-兹维列夫:0.9|袁悦:0.9|安迪穆雷:0.9|霍尔格·鲁内:0.9|德尔波特罗:0.9|张帅:0.9|迪米特洛夫:0.9|克雷吉茨科娃:0.9|拉沃尔杯:0.9|小威廉姆斯:0.9|阿尔卡拉兹:0.9|穆霍娃:0.9|费雷罗:0.9|维多利亚-阿扎伦卡:0.9|维基奇:0.9
2024-12-10 17:14:43.264 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|迪丽热巴:1.0|虞书欣:1.0|Angelababy:1.0|黄晓明:1.0|鞠婧祎:0.9|白鹿:0.9|刘亦菲:0.9|杨幂:0.9|赵今麦:0.9|刘浩存:0.9|Lisa:0.9|明星盘点:0.9|田曦薇:0.9|赵丽颖:0.9|张雨绮:0.9|关晓彤:0.9|贾玲:0.9|黄子韬:0.9|吴谨言:0.9|白敬亭:0.9|鹿晗:0.9|古力娜扎:0.9|王鹤棣:0.8|张若昀:0.8|杨超越:0.8|日常记录:0.8|金晨:0.8|欧阳娜娜:0.8|王诗龄:0.8|吴磊:0.8|于正:0.8|沈月:0.8|张婧仪:0.8|萌娃日常:0.8|可爱萌娃:0.8|减肥:0.8|妆容:0.8|杨紫:0.8|移动手机设备:0.8|表情包集锦:0.8|章若楠:0.8|化妆:0.8|范丞丞:0.8|甄嬛传:0.8|徐艺洋:0.8|苹果:0.8|秦霄贤:0.8|网友神评论:0.8|周也:0.8
2024-12-10 17:14:43.268 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|流川枫:0.9|樱木花道:0.9|灌篮高手:0.9|井上雄彦:0.9|The First Slam Dunk:0.9|三井寿:0.9|仙道彰:0.9|仙流:0.9|宫城良田:0.9|深津一成:0.8|泽北荣治:0.8|宇智波鼬:0.8|卡卡西:0.8|水户洋平:0.8|卡卡罗特:0.8|利威尔:0.8|全职猎人:0.8|宇智波佐助:0.8|鸟山明:0.8|火影忍者:博人传:0.8|鸣人:0.8|川木:0.8|牧绅一:0.8|漩涡博人:0.8|北条司:0.8|萨博:0.8|龙珠z:0.8|晓组织:0.8|布尔玛:0.8|日向雏田:0.8|冲锋衣:0.8|宇智波止水:0.8|银魂:0.8|王也:0.8|日向宁次:0.8|岸本齐史:0.8|死神:0.8|诸葛青:0.8|龙珠超:0.8|香吉士:0.8|两面宿傩:0.8|波特卡斯·D·艾斯:0.8|宇智波带土:0.8|漩涡鸣人:0.8|波风水门:0.8|圣斗士星矢:0.8|宇智波佐良娜:0.8|特拉法尔加·罗:0.8|王震球:0.8
2024-12-10 17:14:43.268 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|火影忍者疾风传:0.8|灌篮高手:0.8|NBA 2K20:0.8|超级龙珠英雄:0.8|WWE:0.7|NBA2KOL2:0.7|The First Slam Dunk:0.7|龙珠超:0.7|超龙珠英雄:0.7|刘语熙:0.7|龙珠英雄:0.7|七龙珠:0.7|德隆:0.7|龙珠z:0.7|约翰·塞纳:0.7|NBA2K:0.7|虎扑:0.7|井上雄彦:0.7|布洛克·莱斯纳:0.7|灌篮高手:0.7|美式橄榄球:0.7|塞斯·罗林斯:0.7|洛杉矶公羊:0.7|橄榄球:0.7|nba2k23:0.7|鸟山明:0.7|NBA季后赛:0.7|职业生涯:0.7|梦幻模拟战:0.7|林书豪:0.7|NFL:0.7|罗门伦斯:0.7|海贼王剧场版:0.7|德隆-威廉姆斯:0.7|汤姆-布雷迪:0.7|堪萨斯城酋长:0.7|德里克-罗斯:0.7|火影忍者:0.7|乔-伯罗:0.7|精灵宝可梦:0.7|科迪-罗兹:0.7|约什-阿伦:0.7|我的英雄学院:0.7|超级碗:0.7|马霍姆斯:0.7|萨米辛:0.7|德维恩-韦德:0.7|圣斗士星矢:0.7|火影忍者:博人传:0.7
2024-12-10 17:14:43.268 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|井上雄彦:1.0|The First Slam Dunk:1.0|三井寿:1.0|仙道彰:1.0|樱木花道:1.0|流川枫:1.0|宫城良田:1.0|深津一成:1.0|泽北荣治:1.0|仙流:1.0|牧绅一:1.0|水户洋平:1.0|灌篮高手:0.9|北条司:0.9|中村悠一:0.9|幽游白书:0.9|葛力姆乔:0.9|愿来世为他人:0.9|阿散井恋次:0.9|置鲇龙太郎:0.9|神谷浩史:0.9|唯愿来世不相识:0.9|井上织姬:0.9|石黑英雄:0.9|朽木白哉:0.9|川木:0.9|黑崎一护:0.9|神谷浩史:0.9|岸本齐史:0.9|朽木露琪亚:0.9|小野大辅:0.9|子安武人:0.9|富坚义博:0.9|小野大輔:0.9|石田彰:0.9|杉田智和:0.9|渡部秀:0.9|波风水门:0.9|绯村剑心:0.9|浪客剑心:0.9|晓组织:0.9|三浦凉介:0.9|死神:0.9|久保带人:0.9|最游记:0.9|小西明日翔:0.9|SPYAIR:0.9|柯拉松:0.9|周刊少年Jump:0.9
2024-12-10 17:14:43.272 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|混油:1.0|清洁面膜:1.0|睫毛打底:1.0|镜面唇釉:1.0|眼线液笔:1.0|粉底霜:1.0|粉底膏:1.0|保湿面膜:1.0|诗佩妮Spenny:1.0|眼线液:1.0|遮瑕膏:1.0|露华浓:1.0|美宝莲:1.0|红血丝:1.0|混合皮:1.0|眼线胶笔:1.0|粉霜:1.0|稚优泉CHIOTURE:1.0|蜜粉:1.0|肌底液:1.0|眉刷:1.0|蜜粉饼:1.0|液体眼影:1.0|眉粉:1.0|艾杜纱:1.0|单色眼影:1.0|粉底刷:1.0|医美面膜:1.0|菲鹿儿focallure:1.0|妆前:1.0|小棕瓶:1.0|眼影刷:1.0|水光肌护理:1.0|高光刷:1.0|黛末:1.0|化妆棉:1.0|黛珂:1.0|眼线膏:1.0|唇色:1.0|卸妆水:1.0|精华水:1.0|唇膏笔:1.0|提亮肤色:1.0|唇膜:1.0|黄皮:1.0|毛戈平高光膏:1.0|面膜纸:1.0|魅丝蔻:1.0|拉杜丽:1.0
2024-12-10 17:14:43.277 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|还珠格格:0.9|知否知否应是绿肥红瘦:0.9|如懿传:0.9|步步惊心:0.9|三十而已:0.8|蒋欣:0.8|霍建华:0.8|欢乐颂:0.8|清平乐:0.8|情深深雨濛濛:0.8|美人心计:0.8|蓝盈莹:0.7|斓曦:0.7|三生三世十里桃花:0.7|上错花轿嫁对郎:0.7|周迅:0.7|如懿:0.7|林心如:0.7|请回答1988:0.7|回家的诱惑:0.7|黄圣依:0.7|新还珠格格:0.7|金莎:0.7|甄嬛:0.7|卫嬿婉:0.7|陈建斌:0.7|司藤:0.7|冯绍峰:0.7|安陵容:0.7|浣碧:0.7|欢天喜地七仙女:0.7|华妃:0.7|吴倩:0.7|霍思燕:0.7|重生之慕甄:0.7|花千骨:0.6|张嘉倪:0.6|吴奇隆:0.6|玉娆:0.6|杜江:0.6|东宫:0.6|小燕子:0.6|陈岚(向太):0.6|爸爸去哪儿:0.6|董洁:0.6|与凤行:0.6|我的前半生:0.6|端妃:0.6|三生三世步生莲:0.6
2024-12-10 17:14:43.281 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|金莎:0.9|杜江:0.9|霍思燕:0.9|孙莉:0.9|钟丽缇:0.9|张嘉倪:0.9|陈岚(向太):0.9|李承铉:0.8|窦骁:0.8|幸福三重奏:0.8|应采儿:0.8|甜馨:0.8|张檬:0.8|吴尊:0.8|爸爸去哪儿:0.8|霍建华:0.8|贾静雯:0.8|妻子的浪漫旅行:0.8|蔡少芬:0.8|林依晨:0.8|王子文:0.8|蓝盈莹:0.8|秋瓷炫:0.8|陈小春:0.8|何超莲:0.8|安以轩:0.8|吴倩:0.8|林心如:0.8|刘恺威:0.8|张翰:0.7|王岳伦:0.7|福原爱:0.7|黄奕:0.7|袁咏仪:0.7|蒋欣:0.7|阚清子:0.7|还珠格格:0.7|沈梦辰:0.7|章泽天:0.7|李湘:0.7|我家那闺女:0.7|伊能静:0.7|周扬青:0.7|郎朗:0.7|傅首尔:0.7|张含韵:0.7|吴昕:0.7|陆毅:0.7|张歆艺:0.7
2024-12-10 17:14:43.290 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:1.0|朽木露琪亚:1.0|富坚义博:1.0|朽木白哉:1.0|葛力姆乔:1.0|井上织姬:1.0|艾伦:1.0|飙马野郎:1.0|呪术廻戦:1.0|冰海战记:1.0|三笠:1.0|猎人:1.0|JOJO的奇妙冒险:石之海:1.0|荒木飞吕彦:1.0|黑崎一护:1.0|久保带人:1.0|鲁邦三世:1.0|吉克耶格尔:1.0|利威尔:1.0|阿散井恋次:1.0|格里菲斯:1.0|死神:1.0|炎拳:1.0|小畑健:1.0|电次:1.0|莱纳·布朗:1.0|MAPPA:1.0|空条徐伦:1.0|兵长:1.0|幽游白书:1.0|藤本树:1.0|七大罪:1.0|早川秋:1.0|jojo的奇妙冒险 黄金之风:1.0|吉良吉影:1.0|日番谷冬狮郎:1.0|心理测量者:1.0|再见绘梨:1.0|尤弥尔:1.0|乱马1/2:1.0|烙印战士:1.0|子安武人:1.0|周刊少年Jump:1.0|浪客剑心:1.0|波奇塔:1.0|乱马1/2 两个小茜:1.0|钢之炼金术师:1.0|韩吉·佐耶:1.0|当哒当:1.0
2024-12-10 17:14:43.294 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|大S:0.9|汪小菲:0.9|小s:0.9|倪妮:0.9|高圆圆:0.9|郭晶晶:0.9|郭碧婷:0.9|伊能静:0.9|向佐:0.9|周冬雨:0.9|张柏芝:0.9|具俊晔:0.8|张馨予:0.8|张兰:0.8|李湘:0.8|陈妍希:0.8|孙俪:0.8|刘涛:0.8|林心如:0.8|明星穿搭:0.8|佟丽娅:0.8|唐嫣:0.8|陈晓:0.8|秦岚:0.8|钟楚曦:0.8|王子文:0.8|陈乔恩:0.8|汪峰:0.8|江疏影:0.8|马思纯:0.8|戚薇:0.8|张雨绮:0.8|刘诗诗:0.8|金晨:0.7|古力娜扎:0.7|陈岚(向太):0.7|宋茜:0.7|马伊琍:0.7|林志玲:0.7|张天爱:0.7|胡歌:0.7|何超莲:0.7|李沁:0.7|景甜:0.7|金星:0.7|林更新:0.7|范冰冰:0.7|沈梦辰:0.7|霍建华:0.7
2024-12-10 17:14:43.298 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|网易游戏:1.0|剑侠情缘3:0.9|徐清林:0.8|附魔:0.8|明日方舟:0.8|寻道大千:0.8|式神:0.8|手游:0.8|逆水寒:0.8|剑网3缘起:0.8|武林争霸:0.8|逆水寒手游:0.8|剑网3竞技大师赛:0.8|游戏皮肤:0.8|决战!平安京:0.8|明日之后:0.7|边境之旅:0.7|崩坏:星穹铁道:0.7|剑侠情缘网络版:0.7|第五人格:0.7|零号任务:0.7|光遇:0.7|叫我大掌柜:0.7|余玉贤:0.7|绝区零:0.7|鸣潮:0.7|黎明觉醒:0.7|烟雨江湖:0.7|创造与魔法:0.7|一念逍遥:0.7|剑网3:指尖江湖:0.7|凤凰心计:0.7|原神:0.7|奇妙之旅:0.7|天下3:0.7|梦幻魔法屋:0.7|无期迷途:0.7|正义:0.7|忍者必须死3:0.7|新倩女幽魂:0.7|无界:0.7|哈利波特:魔法觉醒:0.7|江南百景图:0.7|天下:0.7|怒海争锋 captain's fury:0.7|漫画推荐:0.7|枪神纪:0.7|星球:重启:0.7
2024-12-10 17:14:43.303 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|zeekr 001:1.0|理想L9:0.9|理想mpv:0.9|领克:0.9|吉利汽车:0.9|仰望:0.9|智己汽车:0.9|aito:0.9|腾势:0.9|问界M7:0.9|五菱:0.9|cybertruck:0.9|蔚来汽车:0.9|本田:0.9|丰田:0.9|仰望u8:0.8|零跑汽车:0.8|911:0.8|路虎:0.8|zeekr 009:0.8|凯迪拉克:0.8|沃尔沃:0.8|理想l7:0.8|阿维塔:0.8|小鹏汽车:0.8|劳斯莱斯:0.8|法拉利:0.8|坦克:0.8|理想l6:0.8|自动驾驶:0.8|周鸿祎:0.8|保时捷:0.8|日产:0.8|充电桩:0.8|小鹏p7:0.8|余承东:0.8|迈巴赫:0.8|宝马5系:0.8|何小鹏:0.8|model 2:0.8|库里南:0.8|model s:0.8|model x:0.8|鸿蒙智行:0.8|理想l8:0.8|问界m5:0.8|seres赛力斯:0.8|成都车展:0.8
2.2.3 Explicit negSampling(显式+负采样)¶
- 效果最好:比默认的explicit w/o negSamling强太多!
-
效果略高于隐式反馈,相对来说更有一种“准”的感觉(更容易关联到大脑中直接想到的标签)
AUC = 0.904632907494468 Root-mean-square error = 0.14593924382837117
-
缺点是训练时开销增加:由于额外增加负采样,即时只用10%的训练数据,也与全量数据下的隐式负反馈用时接近;内存方面,也需要增扩大2倍的内存,相同配置只能用60%数据训练
- scaling带来的效果提升不明显,10%和60%效果基本相同。
{'regParam': 0.01, 'rank': 24, 'implicitPrefs': False, 'alpha': 500.0, 'transform': 'none', 'sub': '0,1,2,3'}
2024-12-17 16:42:28.569 | INFO | __main__::256 - 数据集的schema:
2024-12-17 16:45:29.508 | INFO | __main__:split_dataset:74 - 数据中总标签数:52822
2024-12-17 16:56:13.029 | INFO | __main__::286 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 24, 'coldStartStrategy': 'drop', 'implicitPrefs': False, 'alpha': 500.0, 'numUserBlocks': 160, 'numItemBlocks': 160}
2024-12-17 16:56:13.063 | INFO | __main__::299 - 使用转换:none -> Column<'weight'>
2024-12-17 17:49:24.981 | INFO | __main__::310 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_24.imp_False.reg_0.01.a_500.0.it_10.tf_none.sub_0%1%2%3
2024-12-17 17:59:14.373 | INFO | __main__:evaluate:93 - Root-mean-square error = 0.1466062193657528
2024-12-17 17:59:26.350 | INFO | __main__:evaluate:97 - AUC = 0.9045460075779788
2024-12-17 17:59:29.257 | INFO | __main__::347 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-17 17:59:29.257 | INFO | __main__::357 - 准备物品特征...
2024-12-17 17:59:33.432 | INFO | __main__:normalize_features:120 - Feature matrix shape: (52822, 24)
2024-12-17 17:59:34.401 | INFO | __main__::363 - 计算相似物品...
2024-12-17 18:01:07.048 | INFO | __main__:log_matches:162 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|袁世凯:1.0|朱元璋:1.0|蒋介石:1.0|蒋经国:1.0|戴笠:1.0|洪秀全:0.9|冯玉祥:0.9|杜月笙:0.9|汪精卫:0.9|斯大林:0.9|彭德怀:0.9|太平天国:0.9|汉朝:0.9|汉高祖:0.9|西安事变:0.9|明成祖:0.9|秦始皇:0.9|元朝:0.9|阎锡山:0.9|唐朝:0.9|赫鲁晓夫:0.9|张学良:0.9|八国联军:0.9|段祺瑞:0.9|明朝:0.9|成吉思汗:0.9|李宗仁:0.9|张作霖:0.9|崇祯:0.9|李自成:0.9|十大元帅:0.9|和珅:0.9|白崇禧:0.9|希特勒:0.9|林彪:0.9|杨虎城:0.9|孙中山:0.9|杨秀清:0.9|努尔哈赤:0.9|项羽:0.9|军统:0.9|陈毅:0.9|汉武帝:0.9|唐太宗:0.9|岳飞:0.9|宋朝:0.9|蒋纬国:0.9|北宋:0.9|黄金荣:0.9
2024-12-17 18:01:07.057 | INFO | __main__:log_matches:162 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|真题:1.0|押题:1.0|模拟题:1.0|选择题:1.0|答题思路:1.0|理论法:0.9|复习计划:0.9|杜洪波:0.9|商经:0.9|戴鹏:0.9|行政法:0.9|刑法:0.9|学习计划:0.9|民诉:0.9|机构:0.9|民刑:0.9|三国法:0.9|柏浪涛:0.9|考点:0.9|商法:0.9|考前焦虑:0.9|鄢梦萱:0.9|成绩:0.9|每日一题:0.9|刑诉:0.9|刷题:0.9|公司法:0.9|考证:0.9|主观题:0.9|法学:0.9|考前冲刺:0.9|众合法考:0.9|国家统一法律职业资格考试:0.9|备考:0.9|法律职业资格:0.9|方鹏:0.9|李晗:0.9|左宁:0.9|判断题:0.9|证书:0.9|逢考必过:0.9|民诉法:0.9|高频考点:0.9|简答题:0.9|准考证号:0.9|考试大纲:0.9|法考证:0.9|张宇琛:0.9
2024-12-17 18:01:07.063 | INFO | __main__:log_matches:162 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|瑞幸咖啡:0.8|影院:0.8|网络暴力:0.8|茉莉绿茶:0.7|手环:0.7|柠季:0.7|特仑苏:0.7|VOGUE服饰与美容:0.7|刘冲(歌手):0.7|出圈:0.7|微博管理员:0.7|戴比尔斯:0.7|团购:0.7|春节:0.7|名誉权:0.7|帆布袋:0.7|流量:0.7|六福:0.7|阿玛尼(Armani):0.7|八月:0.7|EHzZ:0.7|Levi's(李维斯):0.7|可爱多:0.7|票房:0.7|Raf Simons:0.7|营销号:0.7|宝姿(Ports):0.7|周生生珠宝:0.7|毛线帽:0.7|东京国际电影节:0.7|阿玛尼黑钥匙明星修护眼霜:0.7|曼陀罗:0.7|清菡:0.7|渔夫帽:0.7|广告:0.7|CD机:0.7|防诈骗:0.7|Lindberg:0.7|尚品宅配:0.7|张哲:0.7|金爵奖:0.7|棋盘格:0.7|云南白药:0.7|T Magazine:0.7|台湾Hito排行榜:0.7|撤档:0.7|陈可辛:0.7|面包鞋:0.7|时光之城:0.7
2024-12-17 18:01:07.063 | INFO | __main__:log_matches:162 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|丝绒拿铁:0.9|杯子:0.9|茶百道:0.8|喜茶:0.8|百分茶:0.8|茉莉奶白:0.8|奈雪的茶:0.8|肯德基吮指原味鸡:0.8|麦当劳麦辣鸡腿堡:0.8|古茗:0.8|koi奶茶:0.8|瑞幸咖啡:0.8|乳茶:0.8|生酪拿铁:0.8|美团:0.8|雪顶咖啡:0.8|茉莉奶绿:0.8|夹克:0.8|嘉华鲜花饼:0.8|柠季:0.8|眷茶:0.8|原味鸡:0.8|柠檬水:0.8|洞洞鞋:0.8|茉莉绿茶:0.8|鲜果茶:0.8|麦旋风:0.8|紫燕百味鸡:0.8|饮料:0.8|Burt's Bees:0.8|香辣鸡腿堡:0.8|无糖可乐:0.8|蜜雪冰城:0.8|以纯:0.8|茶百道:0.8|短袖:0.8|麦当劳麦乐鸡:0.8|霸王茶姬:0.8|德克士:0.8|酸奶:0.8|话梅:0.8|卡旺卡:0.8|乌龙茶:0.8|kfc:0.8|库迪咖啡:0.8|88VIP:0.8|双肩包:0.8|桂花酒酿:0.8|葡式蛋挞:0.8
2024-12-17 18:01:07.069 | INFO | __main__:log_matches:162 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|冰雪项目:0.9|隋文静:0.9|张可欣:0.9|阿合娜尔:0.9|齐广璞:0.9|韩聪:0.9|张虹:0.9|冰球:0.9|自由式滑雪:0.9|冰壶:0.9|现代五项:0.9|李子君:0.9|吴静钰:0.9|韩雨:0.9|陈虹伊:0.9|张娟娟:0.9|谷燕:0.9|黄雪辰:0.9|冰壶世锦赛:0.9|王心迪:0.9|跆拳道:0.9|帆船帆板:0.9|王子露:0.9|赵雅婷:0.9|高亭宇:0.9|自由滑:0.9|宁忠岩:0.9|郑姝音:0.9|赵帅:0.9|杨皓然:0.9|内村航平:0.9|温哥华冬奥会:0.9|平昌冬奥会:0.9|三项赛:0.9|华天:0.9|李发彬:0.9|安贤洙:0.9|皮划艇:0.9|李倩:0.8|刘秋宏:0.8|许静韬:0.8|万里长城:0.8|世界花样滑冰锦标赛:0.8|安香怡:0.8|闫涵:0.8|梅德韦杰娃:0.8|张会:0.8|亚特兰大奥运会:0.8|金杨:0.8
2024-12-17 18:01:07.069 | INFO | __main__:log_matches:162 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|滑雪装备:0.9|滑雪:0.9|斯巴达勇士赛:0.9|冲浪:0.8|徒步:0.8|日月湾:0.8|海滩:0.8|棒铃:0.8|轮滑:0.8|罗浮山:0.8|悉尼歌剧院:0.8|健身器材:0.8|仙本那:0.8|可可托海:0.8|皇后镇:0.8|过山车:0.8|潜水:0.8|清酒:0.8|圣淘沙岛:0.8|骑马:0.8|后海:0.8|livephoto:0.8|少女峰:0.8|布里斯班:0.8|乐刻:0.8|氮泵:0.8|omakase:0.8|卢塞恩:0.8|乌孙古道:0.8|瑞玛席丹:0.8|马六甲海峡:0.8|马六甲:0.8|佩尼达岛:0.8|跳伞:0.8|富士山:0.8|麦理浩径:0.8|单杠:0.8|米其林餐厅:0.8|引体向上:0.8|哈巴雪山:0.8|新西兰旅行:0.8|黄金海岸:0.8|理光GR3x:0.8|富士GFX 100S:0.8|野餐:0.8|跑步机:0.8|胶片:0.8|四季酒店:0.8|地坛公园:0.8
2024-12-17 18:01:07.075 | INFO | __main__:log_matches:162 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|聂卫平:1.0|连笑:1.0|李昌镐:1.0|古力:1.0|杨鼎新:1.0|芈昱廷:1.0|元晟溱:1.0|三星杯:1.0|常昊:1.0|王星昊:1.0|辜梓豪:1.0|春兰杯:1.0|谢尔豪:1.0|党毅飞:1.0|范廷钰:1.0|於之莹:1.0|卞相壹:1.0|金明训:1.0|丁浩:1.0|崔精:1.0|井山裕太:1.0|许皓鋐:1.0|马晓春:1.0|芝野虎丸:1.0|赵晨宇:1.0|申旻埈:1.0|李轩豪:1.0|李钦诚:1.0|时越:1.0|谢科:1.0|姜东润:1.0|李维清:1.0|许家元:1.0|徐莹:1.0|芮乃伟:1.0|许嘉阳:1.0|吴清源:1.0|唐韦星:1.0|上野爱咲美:1.0|朴廷桓:1.0|刘昌赫:1.0|檀啸:1.0|金恩持:1.0|柁嘉熹:1.0|屠晓宇:1.0|陈耀烨:1.0|俞斌:1.0|廖元赫:1.0|一力辽:1.0
2024-12-17 18:01:07.080 | INFO | __main__:log_matches:162 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|ATP:0.9|罗兰加洛斯:0.9|卡洛斯·阿尔卡拉斯:0.9|法网:0.9|费德勒:0.9|西西帕斯:0.9|卢布列夫:0.9|扬尼克-辛纳:0.9|上海大师赛:0.9|尼克克耶高斯:0.9|史蒂夫-诺瓦克:0.9|安娜·伊万诺维奇:0.9|温网:0.9|霍尔格·鲁内:0.9|迪米特洛夫:0.9|瓦林卡:0.9|吴易昺:0.9|安迪穆雷:0.9|穆塞蒂:0.9|戴维斯杯:0.9|多米尼克蒂姆:0.9|拉沃尔杯:0.9|德尔波特罗:0.9|哈勒普:0.9|上海网球大师赛:0.9|锦织圭:0.9|亚历山大-兹维列夫:0.9|商竣程:0.9|阿尔卡拉兹:0.9|阿加西:0.8|斯维亚泰克:0.8|马林-西里奇:0.8|马德里大师赛:0.8|丹尼尔·梅德韦杰夫:0.8|小威廉姆斯:0.8|帕特里克·莫拉托格鲁:0.8|阿利亚西姆:0.8|维多利亚-阿扎伦卡:0.8|迪米:0.8|大坂直美:0.8|布云朝克特:0.8|萨芬:0.8|莱巴金娜:0.8|斯维托丽娜:0.8|辛辛那提大师赛:0.8|卡恰诺夫:0.8|费雷尔:0.8|贝雷蒂尼:0.8
2024-12-17 18:01:07.086 | INFO | __main__:log_matches:162 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|虞书欣:1.0|田曦薇:1.0|周也:1.0|中餐厅:1.0|迪丽热巴:1.0|赵今麦:1.0|刘浩存:1.0|张予曦:1.0|任敏:1.0|卢昱晓:1.0|章若楠:1.0|吴谨言:1.0|张婧仪:1.0|古力娜扎:1.0|陈都灵:1.0|宋祖儿:1.0|于正:1.0|沈月:1.0|周雨彤:1.0|明星盘点:1.0|杨超越:1.0|杨幂:1.0|鞠婧祎:0.9|王鹤棣:0.9|白鹿:0.9|吴磊:0.9|陈小纭:0.9|花儿与少年:0.9|王楚然:0.9|化妆:0.9|刘亦菲:0.9|张大大:0.9|金靖:0.9|钟楚曦:0.9|宋轶:0.9|妆容:0.9|墨雨云间:0.9|Angelababy:0.9|林一:0.9|Lisa:0.9|林允:0.9|偷偷藏不住:0.9|徐艺洋:0.9|明星同款:0.9|张凌赫:0.9|辛芷蕾:0.9|金晨:0.9|易梦玲:0.9|李一桐:0.9
2024-12-17 18:01:07.091 | INFO | __main__:log_matches:162 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|樱木花道:0.9|流川枫:0.9|井上雄彦:0.9|灌篮高手:0.9|三井寿:0.9|宫城良田:0.8|The First Slam Dunk:0.8|山治:0.8|火影忍者:0.8|泽北荣治:0.8|深津一成:0.8|水户洋平:0.8|死神:0.8|进击的巨人:0.8|仙道彰:0.8|全职猎人:0.8|克里斯·埃文斯:0.8|jojo的奇妙冒险:0.8|卡卡西:0.8|鸣人:0.8|牧绅一:0.8|小罗伯特·唐尼:0.8|银魂:0.8|我的英雄学院:0.8|萨博:0.8|电影剧照:0.8|索隆:0.8|路飞:0.8|邪恶力量:0.8|鬼灭之刃:0.8|索香:0.8|仙流:0.8|卡梅隆·莫纳汉:0.8|尾田荣一郎:0.8|一人之下:0.8|数码宝贝:0.8|海贼王:0.8|谏山创:0.8|火影忍者:博人传:0.8|宇智波佐助:0.8|电影gif:0.8|奥特曼:0.8|冲锋衣:0.8|死神:千年血战篇:0.8|宇智波鼬:0.8|马戏之王:0.8|富坚义博:0.8|七龙珠:0.8|娜美:0.8
2024-12-17 18:01:07.091 | INFO | __main__:log_matches:162 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|火影忍者疾风传:0.9|跑跑卡丁车:0.9|隐形守护者:0.9|速度与激情9:0.8|梦幻模拟战:0.8|大话西游2:0.8|十万个冷笑话:0.8|从零开始:0.8|龙珠超:0.8|生化危机6:终章:0.8|动漫图片:0.8|超级英雄:0.8|grand mer:0.8|复仇者联盟3:无限战争:0.8|迪迦奥特曼:0.8|龙族:0.8|喜羊羊与灰太狼之飞马奇遇记:0.8|永恒之塔:0.8|火影忍者:0.8|日本动画:0.8|复联3:0.8|一路:0.8|鹰眼:0.8|魔兽:0.8|密室逃脱:0.8|X战警:黑凤凰:0.8|蜘蛛侠:英雄远征:0.8|哥斯拉:怪兽之王:0.8|大侦探皮卡丘:0.8|有毛病:0.8|蜘蛛侠:英雄无归:0.8|惊奇队长:0.8|神奇女侠2:0.8|火影忍者OL:0.8|哥斯拉大战金刚:0.8|X战警:天启:0.8|黑寡妇:0.8|猫眼三姐妹:0.8|暴走大事件:0.8|魅族Zero:0.8|斯坦·李:0.8|武本康弘:0.8|海王:0.8|数码宝贝:0.8|洛基:0.8|入殓师:0.8|起小点:0.8|新天龙八部:0.8|はま:0.8
2024-12-17 18:01:07.091 | INFO | __main__:log_matches:162 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|The First Slam Dunk:1.0|井上雄彦:1.0|三井寿:1.0|宫城良田:1.0|仙道彰:1.0|深津一成:1.0|泽北荣治:1.0|流川枫:1.0|樱木花道:0.9|水户洋平:0.9|牧绅一:0.9|仙流:0.9|裘德·洛:0.9|灌篮高手:0.9|GGAD:0.9|神探夏洛克:0.9|邓布利多:0.9|社交网络:0.9|邪恶力量:0.9|杰西·艾森伯格:0.9|神奇动物3:邓布利多之谜:0.9|麦斯·米科尔森:0.9|葛力姆乔:0.9|好兆头第二季:0.9|伞学院:0.9|藏马:0.8|火神大我:0.8|井上织姬:0.8|好兆头:0.8|皇后乐队:0.8|大卫·田纳特:0.8|詹森·阿克斯:0.8|朽木露琪亚:0.8|麦克·辛:0.8|猎人:0.8|马戏之王:0.8|妙警贼探:0.8|詹姆斯·麦卡沃伊:0.8|虎太郎:0.8|尼尔·盖曼:0.8|死神:0.8|鲁邦三世:0.8|青之芦苇:0.8|康伯巴奇:0.8|空条承太郎:0.8|幽游白书:0.8|好兆头:0.8|夜访吸血鬼:0.8|朽木白哉:0.8
2024-12-17 18:01:07.100 | INFO | __main__:log_matches:162 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|艾杜纱:1.0|眉刷:1.0|混合皮:1.0|妆前:1.0|混油:1.0|睫毛打底:1.0|清洁面膜:1.0|粉底霜:0.9|保湿面膜:0.9|魅丝蔻:0.9|遮瑕膏:0.9|眼线液:0.9|美宝莲:0.9|遮瑕笔:0.9|眼线液笔:0.9|粉底膏:0.9|化妆棉:0.9|眼影刷:0.9|镜面唇釉:0.9|菲鹿儿focallure:0.9|诗佩妮Spenny:0.9|美妆蛋:0.9|定妆喷雾:0.9|蜜粉:0.9|精华水:0.9|粉霜:0.9|完美日记PerfectDiary:0.9|肌底液:0.9|卸妆乳:0.9|MAC魅可:0.9|眼线胶笔:0.9|妆前乳:0.9|铁皮:0.9|眼线笔:0.9|提亮肤色:0.9|稚优泉CHIOTURE:0.9|化妆水:0.9|黛珂:0.9|蜜粉饼:0.9|定妆:0.9|眉笔:0.9|黄皮:0.9|乳霜:0.9|磨砂膏:0.9|红血丝:0.9|卸妆水:0.9|3CE:0.9|眼影盘:0.9|橘朵Judydoll:0.9
2024-12-17 18:01:07.108 | INFO | __main__:log_matches:162 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|如懿传:1.0|还珠格格:1.0|蒋欣:1.0|知否知否应是绿肥红瘦:1.0|步步惊心:1.0|甄嬛传:1.0|霍建华:0.9|欢乐颂:0.9|周迅:0.9|三十而已:0.9|孙俪:0.9|冯绍峰:0.9|林心如:0.9|蓝盈莹:0.9|海清:0.9|赵丽颖:0.9|刘诗诗:0.9|陈建斌:0.9|请回答1988:0.9|毛晓彤:0.9|家有儿女:0.9|林更新:0.9|唐嫣:0.9|罗晋:0.9|吴倩:0.9|三生三世十里桃花:0.9|刘涛:0.9|周冬雨:0.9|回家的诱惑:0.9|清平乐:0.9|爸爸去哪儿:0.9|蔡少芬:0.9|情深深雨濛濛:0.9|景甜:0.9|黄磊:0.9|金星:0.9|杨紫:0.9|戚薇:0.9|马思纯:0.9|美人心计:0.9|向往的生活:0.9|李沁:0.9|关晓彤:0.9|杨幂:0.9|黄圣依:0.9|吴奇隆:0.9|张小斐:0.9|唐艺昕:0.9|章子怡:0.9
2024-12-17 18:01:07.117 | INFO | __main__:log_matches:162 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|霍思燕:1.0|杜江:1.0|郭碧婷:1.0|孙莉:1.0|林心如:1.0|陈岚(向太):1.0|张嘉倪:1.0|王子文:1.0|伊能静:1.0|李湘:1.0|向佐:1.0|蔡少芬:1.0|甜馨:1.0|刘涛:1.0|窦骁:1.0|沈梦辰:1.0|吴昕:1.0|钟丽缇:1.0|金莎:1.0|贾静雯:1.0|李承铉:1.0|孙俪:1.0|幸福三重奏:1.0|戚薇:1.0|应采儿:1.0|贾乃亮:1.0|佟丽娅:1.0|章子怡:1.0|吴尊:1.0|霍建华:1.0|张歆艺:1.0|妻子的浪漫旅行:1.0|谢娜:1.0|袁咏仪:1.0|杜海涛:1.0|郎朗:1.0|陈小春:0.9|马思纯:0.9|张馨予:0.9|黄磊:0.9|王岳伦:0.9|大S:0.9|张翰:0.9|爸爸去哪儿:0.9|陈乔恩:0.9|秦昊:0.9|刘恺威:0.9|陆毅:0.9|郑恺:0.9
2024-12-17 18:01:07.134 | INFO | __main__:log_matches:162 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:1.0|利威尔:1.0|艾伦:1.0|富坚义博:1.0|三笠:0.9|JOJO的奇妙冒险:石之海:0.9|猎人:0.9|全职猎人:0.9|死神:0.9|少年JUMP:0.9|野良神:0.9|兵长:0.9|飙马野郎:0.9|荒木飞吕彦:0.9|奇犽:0.9|空条徐伦:0.9|酷拉皮卡:0.9|花牌情缘:0.9|噬谎者:0.9|愿来世为他人:0.9|艾伦耶格尔:0.9|电锯人2:0.9|押见修造:0.9|唯愿来世不相识:0.9|安娜苏:0.9|爱丽丝学园:0.9|西索:0.9|漫画家:0.9|久保带人:0.9|藤本树:0.9|心理测量者:0.9|韩吉:0.9|库洛洛:0.9|小畑健:0.9|MAPPA:0.9|早川秋:0.9|妖精的尾巴:0.9|电锯人X电钻人:0.9|杰富力士:0.9|家庭教师:0.9|jojo的奇妙冒险 黄金之风:0.9|星际牛仔:0.9|朽木露琪亚:0.9|约定的梦幻岛:0.9|月刊少女野崎君:0.9|驱魔少年:0.9|鲁邦三世:0.9|莱纳·布朗:0.9|小西明日翔:0.9
2024-12-17 18:01:07.142 | INFO | __main__:log_matches:162 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|张柏芝:1.0|郭晶晶:1.0|李湘:1.0|伊能静:1.0|孙俪:1.0|大S:1.0|林心如:1.0|马伊琍:1.0|高圆圆:1.0|汪峰:1.0|陈岚(向太):1.0|郭碧婷:1.0|佟丽娅:1.0|向佐:1.0|霍建华:1.0|林志玲:1.0|黄圣依:1.0|周冬雨:1.0|霍思燕:1.0|刘涛:1.0|钟丽缇:1.0|窦骁:1.0|孙莉:1.0|章泽天:1.0|蔡少芬:1.0|王子文:1.0|金星:1.0|何超莲:1.0|李冰冰:1.0|舒淇:1.0|杜江:0.9|谢霆锋:0.9|张雨绮:0.9|倪妮:0.9|小s:0.9|冯绍峰:0.9|汪小菲:0.9|周迅:0.9|甜馨:0.9|蓝盈莹:0.9|贾静雯:0.9|姚晨:0.9|董洁:0.9|李小冉:0.9|张嘉倪:0.9|秦昊:0.9|具俊晔:0.9|黄磊:0.9|福原爱:0.9
2024-12-17 18:01:07.150 | INFO | __main__:log_matches:162 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|网易游戏:1.0|式神:0.9|手游:0.8|游戏皮肤:0.8|御魂:0.8|鬼灭之刃:0.8|花合战:0.8|徐清林:0.8|动漫手办:0.8|进击的巨人:0.8|剑侠情缘3:0.8|柯南:0.8|海贼王:0.8|原神:0.8|网易:0.8|明日方舟:0.8|斗技:0.8|平安京:0.8|逆水寒:0.8|名侦探柯南:0.8|光遇:0.8|逆水寒手游:0.8|阴阳师:百闻牌:0.8|哈利波特:魔法觉醒:0.8|决战!平安京:0.8|非人哉:0.8|边境之旅:0.8|咒术回战:0.8|米哈游:0.8|晴明:0.8|千姬:0.8|不知火:0.8|精灵宝可梦:0.8|阴阳师:超鬼王:0.8|奥特曼:0.8|崩坏:星穹铁道:0.8|腾讯游戏:0.8|缘结神:0.8|阴阳师:妖怪屋:0.8|帝释天:0.7|jojo的奇妙冒险:0.7|源赖光:0.7|漫画推荐:0.7|哔哩哔哩:0.7|叫我大掌柜:0.7|烟烟罗:0.7|五条悟:0.7|面灵气:0.7
2024-12-17 18:01:07.157 | INFO | __main__:log_matches:162 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|蔚来汽车:1.0|理想mpv:0.9|cybertruck:0.9|理想L9:0.9|zeekr 001:0.9|model s:0.9|特斯拉:0.9|model x:0.9|充电桩:0.9|零跑汽车:0.9|小鹏p7:0.9|小鹏汽车:0.9|理想l6:0.9|aito:0.9|高合汽车:0.9|理想l7:0.9|吉利汽车:0.9|model 2:0.9|自动驾驶:0.9|智己汽车:0.9|领克:0.9|何小鹏:0.9|仰望:0.9|蔚来es6:0.9|蔚来es8:0.9|李斌:0.9|腾势:0.9|威马汽车:0.9|蔚来et7:0.9|小米汽车:0.9|问界M7:0.9|小鹏g9:0.9|极氪:0.9|蔚来et5:0.9|五菱:0.9|仰望u8:0.9|丰田:0.9|哪吒汽车:0.9|zeekr 009:0.9|周鸿祎:0.9|理想l8:0.9|比亚迪:0.9|宝马:0.9|roadster:0.9|陈震:0.8|鸿蒙智行:0.8|保时捷:0.8|凯迪拉克:0.8
2024-12-17 18:01:14.116 | INFO | __main__:save_to_database:173 - 向量化标签特征: bigdata_vf_als_tag_encoding partition(dt=20241015, pt=long_obj_all)
2.2.4 word2vec¶
词向量方案:skipgram with negative sampling,效果最好的模型,粒度很细
2.3、因子分析¶
2.3.1 Scaling¶
使用10%的user_code进行训练,
- 显式反馈(无负采样),处于混乱状态
- 对比抽样数据和全量数据的结果,显式反馈提升巨大!!而隐式则差不多
隐式反馈{'maxIter': 10, 'regParam': 0.01, 'rank': 24, 'implicitPrefs': True, 'alpha': 500.0, 'transform': 'power4', 'sub': '5'}
2024-12-12 00:04:12.925 | INFO | __main__::251 - 数据集的schema:
2024-12-12 00:06:13.004 | INFO | __main__:split_dataset:75 - 数据中总标签数:52820
2024-12-12 00:09:03.685 | INFO | __main__::281 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 24, 'coldStartStrategy': 'drop', 'implicitPrefs': True, 'alpha': 500.0, 'numUserBlocks': 160, 'numItemBlocks': 160}
2024-12-12 00:09:03.711 | INFO | __main__::294 - 使用转换:power4 -> Column<'pow(weight, 4)'>
2024-12-12 00:14:41.863 | INFO | __main__::305 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_24.imp_True.reg_0.01.a_500.0.it_10.tf_power4.sub_5
2024-12-12 00:17:01.560 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.18879295358444903
2024-12-12 00:17:07.648 | INFO | __main__:evaluate:93 - AUC = 0.8811286818481509
2024-12-12 00:17:09.632 | INFO | __main__::342 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-12 00:17:09.632 | INFO | __main__::352 - 准备物品特征...
2024-12-12 00:17:12.852 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52818, 24)
2024-12-12 00:17:13.530 | INFO | __main__::358 - 计算相似物品...
2024-12-12 00:17:24.354 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|袁世凯:1.0|蒋经国:1.0|戴笠:1.0|黄金荣:1.0|西安事变:1.0|冯玉祥:1.0|杜月笙:1.0|杨虎城:1.0|蒋纬国:1.0|明成祖:1.0|十大元帅:1.0|汪精卫:1.0|孙殿英:1.0|洪秀全:1.0|林彪:1.0|元朝:1.0|李宗仁:1.0|太平天国:1.0|八国联军:1.0|段祺瑞:1.0|汉朝:1.0|崇祯:1.0|阎锡山:1.0|成吉思汗:1.0|白崇禧:0.9|秦始皇:0.9|努尔哈赤:0.9|李自成:0.9|张学良:0.9|彭德怀:0.9|唐朝:0.9|汉高祖:0.9|朱元璋:0.9|斯大林:0.9|杨秀清:0.9|孙中山:0.9|老视频:0.9|许世友:0.9|和珅:0.9|古代政治家:0.9|杨振宁:0.9|春秋战国:0.9|何应钦:0.9|汉武帝:0.9|军统:0.9|解放战争:0.9|隋朝:0.9|宋子文:0.9|光绪:0.9
2024-12-12 00:17:24.359 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|选择题:1.0|备考期:1.0|真题:1.0|押题:1.0|学习计划:1.0|考试大纲:1.0|答题思路:1.0|机构:1.0|文运:1.0|刷题:1.0|华研法硕:1.0|宪法学:1.0|复习计划:1.0|考点:1.0|成绩:1.0|每日一题:1.0|简答题:1.0|模拟题:1.0|龚成思:1.0|五院四系:1.0|考试时间:1.0|理学:1.0|戴寰宇:0.9|法硕非法学:0.9|岳业鹏:0.9|宪法:0.9|法律硕士:0.9|白斌:0.9|考证:0.9|杜洪波:0.9|民刑:0.9|案例分析题:0.9|逢考必过:0.9|法学:0.9|高频考点:0.9|准考证号:0.9|立法法:0.9|理论法:0.9|作文模板:0.9|李晗:0.9|公司法:0.9|戴鹏:0.9|行政管理:0.9|方鹏:0.9|商法:0.9|商经:0.9|国际法:0.9|徐涛强:0.9
2024-12-12 00:17:24.363 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|影院:0.9|九号:0.9|鞋花:0.9|极兔速递:0.9|Lindberg:0.8|特仑苏:0.8|Emporio Armani:0.8|记忆奇旅:0.8|游乐园:0.8|迪奥锁妆气垫粉底:0.8|乔治·阿玛尼:0.8|刘艳芬:0.8|瑞幸咖啡:0.8|金尘茶:0.8|阿玛尼贵族清新岩兰草香水:0.8|crocs洞洞鞋:0.8|champion:0.8|小小的我:0.8|狂野时代:0.8|马亮:0.8|周正:0.8|刘菲:0.8|英雄赞歌:0.8|暴龙:0.8|回望:0.8|戴比尔斯:0.8|野孩子:0.8|植物医生:0.8|阿玛尼黑钥匙明星修护眼霜:0.8|奇迹:0.8|顾长卫:0.8|水之蔻:0.8|阿玛尼(Armani):0.8|星卡里:0.8|殷若昕:0.8|长津湖之水门桥:0.8|票房:0.8|中秋档:0.8|CD机:0.8|饶晓志:0.8|断·桥:0.8|阿玛尼红管405:0.8|封闭:0.8|crocs:0.8|河北卫视:0.8|刺猬:0.8|王红卫:0.8|功夫之王:0.8|天坑鹰猎:0.8
2024-12-12 00:17:24.363 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|板栗烧鸡:0.8|杯子:0.8|洞洞鞋:0.8|老凤祥:0.8|库迪咖啡:0.8|眷茶:0.8|茉莉奶白:0.8|茶百道:0.8|东鹏特饮:0.8|瑞幸咖啡:0.8|蜜雪冰城柠檬水:0.8|柠檬水:0.8|霸王茶姬:0.8|茉莉奶绿:0.8|丝绒拿铁:0.8|YSL方管唇釉:0.8|冰淇淋蛋糕:0.8|茉莉茶:0.8|飞利浦:0.8|酸奶:0.8|真露:0.8|爱普生(EPSON):0.8|舒肤佳:0.8|打印机:0.8|电脑支架:0.8|膳魔师:0.8|舒肤佳沐浴露:0.8|阿水大杯茶:0.8|维他柠檬茶:0.8|桂花酒酿:0.8|kfc:0.8|戴森吹风机:0.8|奈雪的茶:0.8|华莱士:0.8|德克士:0.7|MOKINGRAN(梦金园):0.7|筋膜枪:0.7|塔斯汀:0.7|无糖可乐:0.7|香辣鸡腿堡:0.7|创意广告:0.7|平板:0.7|椰子粉:0.7|蜜雪冰城:0.7|古茗:0.7|喜茶:0.7|crocs:0.7|韶音:0.7|黄远堂凤梨酥:0.7
2024-12-12 00:17:24.367 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|冰雪项目:1.0|韩雨:0.9|华天:0.9|自由式滑雪:0.9|张可欣:0.9|齐广璞:0.9|马术:0.9|冰壶世锦赛:0.9|张虹:0.9|平昌冬奥会:0.9|冰壶:0.9|隋文静:0.9|安贤洙:0.9|韩聪:0.9|滑冰:0.9|周知方:0.9|高桥大辅:0.9|宁忠岩:0.9|自由滑:0.9|宇野昌磨:0.9|金博洋:0.9|三项赛:0.9|闫涵:0.9|索契冬奥会:0.9|宫原知子:0.9|于之乐:0.9|世界花样滑冰锦标赛:0.9|金杨:0.9|冰球:0.9|陈巍:0.9|车俊焕:0.9|纪平梨花:0.9|铃木明子:0.9|金善台:0.9|水上运动:0.9|刘浩:0.9|彭程:0.9|高亭宇:0.9|温哥华冬奥会:0.9|仙台:0.9|李海仁:0.9|佟健:0.9|1tv:0.9|沈锡希:0.9|山本草太:0.9|许静韬:0.9|阿丽娜·扎吉托娃:0.9|花样游泳:0.9|杨健:0.9
2024-12-12 00:17:24.367 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|滑雪:0.9|滑雪装备:0.9|冲浪:0.9|潜水:0.9|滑雪场:0.9|布里斯班:0.9|骑马:0.9|里斯本:0.8|徒步:0.8|可可托海:0.8|西西里岛:0.8|新疆维吾尔自治区博物馆:0.8|唢呐:0.8|鸡蛋花:0.8|美食纪录片:0.8|清水寺:0.8|风味人间:0.8|圣淘沙岛:0.8|静安寺:0.8|莫高窟:0.8|苏州博物馆:0.8|斯巴达勇士赛:0.8|神户:0.8|爱琴海:0.8|夜郎谷:0.8|瑞士旅行:0.8|瓦伦西亚:0.8|微博旅行家:0.8|绿绒蒿:0.8|藏族:0.8|圣托里尼:0.8|海鲜饭:0.8|古典吉他:0.8|中国国家博物馆:0.8|干巴菌:0.8|南禅寺:0.8|普罗旺斯:0.8|波西塔诺:0.8|精品咖啡:0.8|鹿角蕨:0.8|红脚隼:0.8|泰晤士河:0.8|大提琴:0.8|寺庙:0.8|三星堆博物馆:0.8|艺术节:0.8|响堂山石窟:0.8|安塔利亚:0.8|彝族:0.8
2024-12-12 00:17:24.372 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|李昌镐:1.0|朴廷桓:1.0|古力:1.0|金明训:1.0|丁浩:1.0|时越:1.0|李轩豪:1.0|杨鼎新:1.0|申真谞:1.0|芈昱廷:1.0|卞相壹:1.0|聂卫平:1.0|元晟溱:1.0|王星昊:1.0|辜梓豪:1.0|崔精:1.0|谢科:1.0|范廷钰:1.0|陈耀烨:1.0|连笑:1.0|蒋其润:1.0|申旻埈:1.0|党毅飞:1.0|谢尔豪:1.0|许皓鋐:1.0|於之莹:1.0|许家元:1.0|周泓余:1.0|许嘉阳:1.0|一力辽:1.0|江维杰:1.0|三星杯:1.0|马晓春:1.0|李钦诚:1.0|赵晨宇:1.0|彭立尧:1.0|檀啸:1.0|李维清:1.0|俞斌:1.0|吴清源:1.0|柁嘉熹:1.0|李小溪:1.0|廖元赫:1.0|春兰杯:1.0|王世一:1.0|陈梓健:1.0|夏晨琨:1.0|常昊:1.0|黄云嵩:1.0
2024-12-12 00:17:24.376 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|ATP:1.0|卡洛斯·阿尔卡拉斯:1.0|上海大师赛:1.0|扬尼克-辛纳:1.0|吴易昺:0.9|商竣程:0.9|布云朝克特:0.9|罗兰加洛斯:0.9|大坂直美:0.9|斯瓦泰克:0.9|瓦林卡:0.9|多米尼克蒂姆:0.9|萨芬:0.9|上海网球大师赛:0.9|卢布列夫:0.9|史蒂夫-诺瓦克:0.9|帕特里克·莫拉托格鲁:0.9|佩古拉:0.9|纳瓦罗:0.9|王雅繁:0.9|法网:0.9|西西帕斯:0.9|莱巴金娜:0.9|费雷尔:0.9|穆塞蒂:0.9|尼克克耶高斯:0.9|费德勒:0.9|安迪穆雷:0.9|阿尔卡拉兹:0.9|霍尔格·鲁内:0.9|科里-高芙:0.9|迪米特洛夫:0.9|德尔波特罗:0.9|亚历山大-兹维列夫:0.9|袁悦:0.9|加斯奎特:0.9|卡斯珀-鲁德:0.9|拉沃尔杯:0.9|克雷吉茨科娃:0.9|伯蒂奇:0.9|特松加:0.9|马德里大师赛:0.9|维基奇:0.9|阿加西:0.9|戴维斯杯:0.9|罗德·拉沃尔:0.9|维多利亚-阿扎伦卡:0.9|球场:0.9
2024-12-12 00:17:24.380 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|迪丽热巴:1.0|虞书欣:0.9|刘亦菲:0.9|Angelababy:0.9|赵今麦:0.9|黄晓明:0.9|鞠婧祎:0.9|Lisa:0.9|明星盘点:0.9|白鹿:0.9|贾玲:0.9|刘浩存:0.9|黄子韬:0.9|古力娜扎:0.9|杨幂:0.9|欧阳娜娜:0.9|杨超越:0.9|白敬亭:0.9|吴谨言:0.9|张若昀:0.9|张雨绮:0.8|赵丽颖:0.8|王诗龄:0.8|鹿晗:0.8|秦霄贤:0.8|关晓彤:0.8|田曦薇:0.8|吴磊:0.8|减肥:0.8|于正:0.8|沈月:0.8|萌娃日常:0.8|金晨:0.8|范丞丞:0.8|王鹤棣:0.8|日常记录:0.8|可爱萌娃:0.8|徐艺洋:0.8|移动手机设备:0.8|谷爱凌:0.8|苹果:0.8|网友神评论:0.8|宋轶:0.8|奔跑吧:0.8|迷惑行为:0.8|周雨彤:0.8|章若楠:0.8|周杰伦:0.8|社会百态:0.8
2024-12-12 00:17:24.384 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|樱木花道:0.9|流川枫:0.9|井上雄彦:0.9|灌篮高手:0.9|The First Slam Dunk:0.9|三井寿:0.9|仙道彰:0.9|仙流:0.9|宫城良田:0.9|航海王:红发歌姬:0.9|萨博:0.9|泽北荣治:0.9|深津一成:0.9|波特卡斯·D·艾斯:0.9|田中真弓:0.9|全职猎人:0.9|海贼王 真人版:0.9|尾田荣一郎:0.9|和之国:0.9|山治:0.9|香吉士:0.8|银魂:0.8|卡卡西:0.8|青之芦苇:0.8|乌索普:0.8|娜美:0.8|水户洋平:0.8|香克斯:0.8|特拉法尔加·罗:0.8|巴基:0.8|乌塔:0.8|航海王:红发歌姬:0.8|罗罗诺亚·索隆:0.8|海贼王剧场版:0.8|宇智波佐助:0.8|张灵玉:0.8|牧绅一:0.8|夏禾:0.8|山口胜平:0.8|妮可·罗宾:0.8|吉卜力:0.8|甚平:0.8|王也:0.8|白胡子:0.8|波雅·汉库克:0.8|马尔科:0.8|海贼王 One Piece:0.8|红发:0.8|冯宝宝:0.8
2024-12-12 00:17:24.384 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|从零开始:0.8|灌篮高手:0.8|幽灵公主:0.7|哪吒闹海:0.7|火影忍者剧场版:0.7|动漫图片:0.7|龙猫:0.7|航海王:红发歌姬:0.7|山口胜平:0.7|海贼王剧场版:0.7|火影忍者:博人传:0.7|航海王:红发歌姬:0.7|火影忍者:0.7|鸣人:0.7|宇智波鼬:0.7|我爱罗:0.7|超级龙珠英雄:0.7|铃芽户缔:0.7|罗宾:0.7|萨博:0.7|宠物(动漫作品):0.7|名侦探柯南:绀青之拳:0.7|天气之子:0.7|布鲁克:0.7|灌篮高手:0.7|龙珠超:0.7|The First Slam Dunk:0.7|基德:0.7|弗兰奇:0.7|火影忍者之疾风传:0.7|井上雄彦:0.7|青之芦苇:0.7|洛基:0.7|哥斯拉:怪兽之王:0.7|乔巴:0.7|魔女宅急便:0.7|日漫:0.7|NBA 2K20:0.7|番外篇:0.7|有毛病:0.7|我的英雄学院:0.7|樱木花道:0.7|大护法:0.7|七龙珠:0.7|名侦探柯南剧场版:0.7|活下去:0.7|高木涉:0.7|海贼王:0.7|火影忍者OL:0.7
2024-12-12 00:17:24.384 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|井上雄彦:1.0|三井寿:1.0|仙道彰:1.0|流川枫:1.0|深津一成:1.0|泽北荣治:1.0|樱木花道:1.0|宫城良田:1.0|The First Slam Dunk:1.0|仙流:1.0|牧绅一:0.9|水户洋平:0.9|灌篮高手:0.9|峰仓和也:0.9|吉卜力:0.9|朽木白哉:0.9|井上织姬:0.9|青之芦苇:0.9|最游记:0.9|米津玄师:0.9|幽游白书:0.9|猎人:0.9|朽木露琪亚:0.9|浪客剑心:0.9|富坚义博:0.9|最游记RELOAD BLAST:0.9|东京巴比伦:0.9|香吉士:0.9|愿来世为他人:0.9|唯愿来世不相识:0.9|黑崎一护:0.9|神谷浩史:0.9|张灵玉:0.9|x战记:0.9|久保带人:0.9|山口胜平:0.9|中村悠一:0.9|神谷浩史:0.9|迈尔斯·莫拉莱斯:0.9|子安武人:0.9|绿川光:0.9|妮可·罗宾:0.9|鲁邦三世:0.9|格斯:0.9|全职猎人:0.9|乱马1/2 两个小茜:0.9|巨人:0.9|死神:0.9|特拉法尔加·罗:0.9
2024-12-12 00:17:24.388 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|睫毛打底:1.0|保湿面膜:1.0|粉底霜:1.0|清洁面膜:1.0|遮瑕膏:1.0|混油:1.0|诗佩妮Spenny:1.0|稚优泉CHIOTURE:1.0|艾杜纱:1.0|医美面膜:1.0|眼线液笔:1.0|肌底液:1.0|精华水:1.0|眼线胶笔:1.0|眼线液:1.0|露华浓:1.0|红血丝:1.0|镜面唇釉:1.0|小棕瓶:1.0|化妆棉:1.0|混合皮:1.0|眉粉:1.0|粉底膏:1.0|蜜粉:1.0|黛珂:1.0|粉霜:1.0|眉刷:1.0|黄皮:1.0|悠莱:1.0|蜜粉饼:1.0|悦诗风吟:1.0|面膜纸:1.0|护理液:1.0|染发剂:1.0|单色眼影:1.0|液体眼影:1.0|眼影刷:1.0|菲鹿儿focallure:1.0|祛痘膏:1.0|美宝莲:1.0|唇色:1.0|妆前:1.0|提亮肤色:1.0|粉底刷:1.0|苏菲娜:1.0|卸妆乳:1.0|唇膜:1.0|眼唇卸妆液:1.0|安瓶:1.0
2024-12-12 00:17:24.393 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|还珠格格:0.9|如懿传:0.9|知否知否应是绿肥红瘦:0.9|步步惊心:0.9|三十而已:0.8|欢乐颂:0.8|美人心计:0.8|三生三世十里桃花:0.8|情深深雨濛濛:0.8|蒋欣:0.8|清平乐:0.8|上错花轿嫁对郎:0.8|如懿:0.8|回家的诱惑:0.7|蓝盈莹:0.7|新还珠格格:0.7|霍建华:0.7|花千骨:0.7|甄嬛:0.7|斓曦:0.7|我的前半生:0.7|卫嬿婉:0.7|浣碧:0.7|欢天喜地七仙女:0.7|周迅:0.7|安陵容:0.7|华妃:0.7|小燕子:0.7|陈建斌:0.7|还珠格格第三部:0.7|金粉世家:0.7|司藤:0.7|芈月传:0.7|冯绍峰:0.7|玉娆:0.6|父母爱情:0.6|陶昕然:0.6|蜗居:0.6|宫锁心玉:0.6|武媚娘传奇:0.6|孟静娴:0.6|林心如:0.6|仙剑奇侠传3:0.6|小时代:0.6|晴儿:0.6|与凤行:0.6|至尊红颜:0.6|你是我的荣耀:0.6|楚乔传:0.6
2024-12-12 00:17:24.397 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|杜江:0.9|金莎:0.9|孙莉:0.9|钟丽缇:0.9|霍思燕:0.9|爸爸去哪儿:0.9|张嘉倪:0.9|窦骁:0.9|应采儿:0.8|陈岚(向太):0.8|吴尊:0.8|张檬:0.8|妻子的浪漫旅行:0.8|贾静雯:0.8|蔡少芬:0.8|张歆艺:0.8|蓝盈莹:0.8|李承铉:0.8|幸福三重奏:0.8|甜馨:0.8|王子文:0.8|刘恺威:0.8|霍建华:0.8|王岳伦:0.8|陈小春:0.8|朱丹:0.8|安以轩:0.8|陆毅:0.8|何超莲:0.8|黄奕:0.8|袁弘:0.8|林依晨:0.8|郎朗:0.8|秋瓷炫:0.8|袁咏仪:0.8|吴倩:0.8|王鸥:0.8|蒋欣:0.8|鲍蕾:0.8|林心如:0.8|刘芸:0.7|王丽坤:0.7|李湘:0.7|阚清子:0.7|秦昊:0.7|田亮:0.7|乔欣:0.7|吴奇隆:0.7|金星:0.7
2024-12-12 00:17:24.405 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:1.0|富坚义博:1.0|JOJO的奇妙冒险:石之海:1.0|艾伦:1.0|朽木露琪亚:1.0|三笠:1.0|MAPPA:1.0|猎人:1.0|鲁邦三世:1.0|jojo的奇妙冒险 黄金之风:1.0|呪术廻戦:1.0|早川秋:1.0|安娜苏:1.0|尤弥尔:1.0|井上织姬:1.0|钢之炼金术师:1.0|空条徐伦:1.0|荒木飞吕彦:1.0|翔太郎:1.0|库洛洛:1.0|冰海战记:1.0|乱马1/2:1.0|黑崎一护:1.0|吉克耶格尔:1.0|少年JUMP:1.0|利威尔:1.0|格里菲斯:1.0|小畑健:1.0|电次:1.0|飙马野郎:1.0|莱纳·布朗:1.0|福星小子:1.0|约定的梦幻岛:1.0|久保带人:1.0|月刊少女野崎君:1.0|日番谷冬狮郎:1.0|当哒当:1.0|韩吉:1.0|韩吉·佐耶:1.0|周刊少年Jump:1.0|再见绘梨:1.0|西索:1.0|酷拉皮卡:1.0|艾伦耶格尔:1.0|岸边露伴:1.0|市川春子:1.0|东京巴比伦:1.0|迪亚哥:1.0|关于地球的运动:1.0
2024-12-12 00:17:24.409 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|大S:0.9|张馨予:0.9|向佐:0.9|郭碧婷:0.9|孙俪:0.9|伊能静:0.9|汪小菲:0.9|倪妮:0.9|小s:0.9|周冬雨:0.9|陈妍希:0.9|刘涛:0.9|林心如:0.8|唐嫣:0.8|陈乔恩:0.8|陈晓:0.8|佟丽娅:0.8|李湘:0.8|张柏芝:0.8|高圆圆:0.8|明星穿搭:0.8|戚薇:0.8|具俊晔:0.8|郭晶晶:0.8|马思纯:0.8|汪峰:0.8|范冰冰:0.8|秦岚:0.8|邓超:0.8|张兰:0.8|姚晨:0.8|钟楚曦:0.8|王子文:0.8|林更新:0.8|张雨绮:0.8|刘诗诗:0.8|马伊琍:0.8|陈岚(向太):0.8|冯绍峰:0.8|金晨:0.8|沈梦辰:0.8|霍思燕:0.8|吴昕:0.8|谢娜:0.8|江疏影:0.8|胡歌:0.8|陈伟霆:0.8|孙怡:0.8|宋茜:0.7
2024-12-12 00:17:24.413 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|网易游戏:0.9|游戏皮肤:0.9|明日方舟:0.9|崩坏:星穹铁道:0.9|原神:0.8|绝区零:0.8|steam:0.8|手游:0.8|噩梦:0.7|麻将:0.7|式神:0.7|萤火突击:0.7|决战!平安京:0.7|鸣潮:0.7|胡闹厨房2:0.7|海宁:0.7|剑侠情缘3:0.7|腾讯游戏:0.7|忍者必须死3:0.7|第五人格:0.7|动漫手办:0.7|枪神纪:0.7|永劫无间:0.7|名侦探柯南:0.7|烟雨江湖:0.7|逆水寒手游:0.7|超激斗梦境:0.7|逆水寒:0.7|漫展:0.7|血族:0.7|率土之滨:0.7|失落叶:0.7|奥奇传说:0.7|新天龙八部:0.7|附魔:0.7|零号任务:0.7|光遇:0.7|余玉贤:0.7|正义:0.7|閃耀暖暖:0.7|剑网3竞技大师赛:0.7|奥拉星:0.7|鬼灭之刃:0.7|一念逍遥:0.7|米哈游:0.7|Party Animals:0.7|300英雄:0.7|咒术回战:0.7
2024-12-12 00:17:24.417 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|理想mpv:1.0|理想L9:1.0|zeekr 001:1.0|吉利汽车:0.9|领克:0.9|腾势:0.9|aito:0.9|仰望:0.9|问界M7:0.9|智己汽车:0.9|五菱:0.9|cybertruck:0.9|零跑汽车:0.9|仰望u8:0.9|本田:0.9|丰田:0.9|理想l7:0.9|路虎:0.8|911:0.8|问界m5:0.8|何小鹏:0.8|seres赛力斯:0.8|坦克:0.8|zeekr 009:0.8|法拉利:0.8|余承东:0.8|蔚来汽车:0.8|成都车展:0.8|凯迪拉克:0.8|理想l6:0.8|充电桩:0.8|小鹏p7:0.8|沃尔沃:0.8|自动驾驶:0.8|迈巴赫:0.8|宝马5系:0.8|理想l8:0.8|model s:0.8|劳斯莱斯:0.8|折叠手机:0.8|李斌:0.8|阿维塔:0.8|model x:0.8|大众:0.8|库里南:0.8|model 2:0.8|周鸿祎:0.8|兰博基尼:0.8
显式反馈(无负采样){'maxIter': 10, 'regParam': 0.01, 'rank': 24, 'implicitPrefs': False, 'alpha': 500.0, 'transform': 'power4', 'sub': '5'}
2024-12-11 23:44:38.952 | INFO | __main__::251 - 数据集的schema:
2024-12-11 23:48:05.859 | INFO | __main__:split_dataset:75 - 数据中总标签数:52820
2024-12-11 23:52:19.372 | INFO | __main__::281 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 24, 'coldStartStrategy': 'drop', 'implicitPrefs': False, 'alpha': 500.0, 'numUserBlocks': 160, 'numItemBlocks': 160}
2024-12-11 23:52:19.434 | INFO | __main__::294 - 使用转换:power4 -> Column<'pow(weight, 4)'>
2024-12-11 23:56:27.495 | INFO | __main__::305 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_24.imp_False.reg_0.01.a_500.0.it_10.tf_power4.sub_5
2024-12-11 23:57:41.775 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.32742716513785297
2024-12-11 23:57:45.794 | INFO | __main__:evaluate:93 - AUC = 0.8586846810751223
2024-12-11 23:57:48.169 | INFO | __main__::342 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-11 23:57:48.170 | INFO | __main__::352 - 准备物品特征...
2024-12-11 23:57:51.262 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52818, 24)
2024-12-11 23:57:51.944 | INFO | __main__::358 - 计算相似物品...
2024-12-11 23:58:06.787 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|袁世凯:1.0|清朝:0.9|明朝:0.9|慈禧:0.9|朱元璋:0.8|洪秀全:0.8|秦始皇:0.8|冯玉祥:0.8|唐朝:0.8|蒋介石:0.8|汉朝:0.8|乾隆:0.8|太平天国:0.8|宋朝:0.8|汪精卫:0.8|宋美龄:0.8|明成祖:0.8|央视财经:0.8|斯特瓦诺维奇:0.8|八国联军:0.8|崇祯:0.8|斯大林:0.8|测字算名:0.8|绝望的主妇:0.8|雪之下雪乃:0.8|春秋战国:0.8|李自成:0.8|广州体育学院:0.8|毛主席:0.8|辅助为王:0.8|张学良:0.8|元朝:0.8|火影忍者剧场版:0.8|汉武帝:0.8|黄楼:0.8|和珅:0.8|汉高祖:0.8|宣统:0.8|新疆反恐:0.8|希特勒:0.8|朴赞郁:0.8|蒋经国:0.7|戴资颖:0.7|现代老照片:0.7|南京旅行:0.7|孙中山:0.7|杜月笙:0.7|阎锡山:0.7|发财日记:0.7
2024-12-11 23:58:06.793 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|真题:0.9|押题:0.9|模拟题:0.8|理论法:0.8|备考:0.8|戴鹏:0.8|小黑瓶:0.8|先进个人:0.8|汤家凤:0.7|SK-II:0.7|粉水:0.7|大学英语:0.7|四月是你的谎言:0.7|职高:0.7|悦薇:0.7|儿童牙刷:0.7|圣罗兰:0.7|睫毛液:0.7|美人:0.7|舒唯雅:0.7|阿魏酸:0.7|科颜氏:0.7|砍刀眉笔:0.7|运筹学:0.7|淡香水:0.7|张露文:0.7|陈珊妮:0.7|问卷:0.7|菌菇:0.7|纪伯伦:0.7|养发:0.7|刷题:0.7|roseface玫瑰纯露:0.7|瞰雾:0.7|锁爱三生:0.7|唇刷:0.7|i人:0.7|烈儿宝贝:0.7|欧泊莉:0.7|资生堂悦薇智感紧塑焕白眼霜:0.7|囤货:0.7|雅诗兰黛樱花水:0.7|山竹:0.7|血观音:0.7|醒图:0.7|收紧:0.7|瓦奇拉维特·奇瓦雷:0.7|猫奴:0.7
2024-12-11 23:58:06.797 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|瑞幸咖啡:0.9|烧伤:0.9|笑佳人:0.9|出圈:0.9|护士:0.9|洁颜油:0.9|端午节:0.9|影院:0.9|猝死:0.9|九一八:0.9|截肢:0.9|遗产:0.9|矿泉水:0.9|精子库:0.9|强奸罪:0.9|商场:0.9|蜜雪冰城:0.9|校园霸凌:0.9|裸照:0.9|预制菜:0.9|跳楼:0.9|重庆动物园:0.9|中秋节:0.9|牛油果:0.9|周一(明星):0.9|睡眠:0.9|李金铭:0.9|心脏骤停:0.9|保湿面霜:0.9|蜜蜂:0.9|海关:0.9|跨省:0.9|持刀:0.9|轻轻:0.9|双皮奶:0.9|江浙沪:0.9|职场问答:0.9|广场舞:0.9|姚安娜:0.9|蟑螂:0.9|身份证:0.9|睡眠不足:0.9|INFP:0.9|团建:0.9|花洛莉亚:0.9|工资:0.9|停车费:0.9|章鱼:0.9|认真(歌曲):0.9
2024-12-11 23:58:06.798 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|喜茶:0.9|瑞幸咖啡:0.9|重庆动物园:0.9|牛油果:0.9|kfc:0.9|蜜雪冰城:0.9|兔子:0.9|猫条:0.9|九一八:0.9|学习计划:0.9|雪糕:0.9|美妆技巧:0.9|重启人生:0.9|发夹:0.9|雪碧:0.9|端午节:0.9|认真(歌曲):0.9|安藤樱:0.9|育发液:0.9|冰泉:0.9|饮料:0.9|郭珍霓:0.9|周一(明星):0.9|车厘子:0.9|高马尾:0.9|长发:0.9|影院:0.9|济州岛:0.9|高露洁:0.9|刺猬:0.9|歌词:0.9|子望:0.9|麦当劳:0.9|护唇:0.9|她的城:0.9|肯德基:0.9|小美人鱼:0.9|知音漫客:0.9|乐童音乐家:0.9|年夜饭:0.9|烟熏妆:0.9|保湿面霜:0.9|高颅顶:0.9|尹昉:0.9|幸福:0.9|生生:0.9|洁颜油:0.9|笑佳人:0.9|饼干:0.9
2024-12-11 23:58:06.802 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|吴费曼:0.8|大戏看北京:0.8|猫山王榴莲:0.8|口腔清洁:0.8|竹内凉真:0.8|邱瑞:0.8|猜叔:0.8|都市丽人:0.8|黎明时分见:0.8|性骚扰:0.8|北京邮电大学:0.8|庚戌:0.8|庚辰:0.8|自考:0.8|陈光标:0.8|刑警的日子:0.8|聂远:0.8|胡军:0.8|鸡公煲:0.8|生发:0.8|下水道:0.8|鸡蛋羹:0.8|淋病:0.8|关雪盈:0.8|美团优选:0.8|青海旅行:0.8|TangoZ钟祺:0.8|美人图:0.8|孙红雷:0.8|土豆片:0.8|旅行任意门:0.8|苏翊鸣:0.8|王迅:0.8|樊少皇:0.8|李大海:0.8|百分百出品:0.8|李小雷:0.8|福州大学:0.8|宫世琉弥:0.8|生理性喜欢:0.8|静雪:0.8|2024北京台春晚:0.8|华为nova:0.8|养马岛:0.8|翟天临:0.8|吴赫:0.8|萝卜干:0.8|谢欣:0.8|孙立人:0.8
2024-12-11 23:58:06.803 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|马六甲:0.8|最强蜗牛:0.8|刘悦:0.8|妮娜·杜波夫:0.8|迪卡侬:0.8|宋冬野:0.8|华为Mate40:0.8|皇后镇:0.7|集美大学:0.7|宠物店:0.7|巡回检察组:0.7|宮本留衣:0.7|菜鸟驿站:0.7|梭梭树:0.7|大帝的挑刺日常:0.7|狐臭手术:0.7|臣服:0.7|深圳航空:0.7|赣南师范大学:0.7|贝乐泰:0.7|达尔肤:0.7|吕绍聪:0.7|购物中心:0.7|张嘉佳:0.7|李成昌:0.7|经济触底:0.7|小升初:0.7|何羽霄:0.7|天鹅臂:0.7|黄金时代:0.7|张幼仪:0.7|华为Mate40 Pro:0.7|江山如此多娇:0.7|民谣:0.7|石家庄铁道大学:0.7|儿童房:0.7|段涛:0.7|闽江学院:0.7|孟楠:0.7|杀猪盘:0.7|喵喵:0.7|陈锐:0.7|艺术启蒙:0.7|撸妆:0.7|杭州美食:0.7|空战群英:0.7|智能电视:0.7|浙江工商大学:0.7|曹炳琨:0.7
2024-12-11 23:58:06.807 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|古力:0.8|李昌镐:0.8|华南理工大学:0.8|高晓攀:0.8|初入职场的我们·法医季 第二季:0.8|VSCO:0.8|木秦:0.8|萧正楠:0.8|向阳而生:0.8|慢性:0.7|朱星杰:0.7|郭一凡:0.7|超人回来了:0.7|胶囊咖啡:0.7|周志豪:0.7|马格努森:0.7|木森:0.7|时令攻略:0.7|马达拉茨:0.7|湖南涉外经济学院:0.7|芭芭农场:0.7|超合金魂:0.7|鲁照华:0.7|王蕾:0.7|弘信电子:0.7|唐汉霄:0.7|我家小两口:0.7|主观题:0.7|河北对外经贸职业学院:0.7|java语言:0.7|Super Star:0.7|宁波诺丁汉大学:0.7|张爱玲:0.7|钱钟书:0.7|神探大战:0.7|秘密访客:0.7|见面吧星朋友:0.7|彭楚粤:0.7|曹承佑:0.7|贺州学院:0.7|洪永城:0.7|张泽:0.7|遇见你:0.7|伊丽莎白二世:0.7|破风:0.7|LCS联赛:0.7|邓川:0.7|陈思铭:0.7|怪奇物语第四季:0.7
2024-12-11 23:58:06.812 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|德尔波特罗:0.8|迈阿密大师赛:0.8|伊万尼塞维奇:0.8|李镇赫:0.8|费德勒:0.8|我爱吃冰棒:0.8|山月不知心底事:0.8|史蒂夫-诺瓦克:0.8|马德里大师赛:0.8|大力女子姜南顺:0.8|尼克克耶高斯:0.8|锦织圭:0.8|无间:0.8|阿勒泰旅行:0.7|Still Life:0.7|宋闵浩:0.7|陶艺:0.7|降央卓玛:0.7|米洛斯拉奥尼奇:0.7|YG:0.7|AK刘彰:0.7|火风L:0.7|刘梦:0.7|命运:0.7|风中有朵雨做的云:0.7|天问一号:0.7|麦肯罗:0.7|严基俊:0.7|杨贤硕:0.7|叶青:0.7|宣璐:0.7|泰国航空:0.7|非正式会谈:0.7|辞奺:0.7|特松加:0.7|桥本凉:0.7|罗德·拉沃尔:0.7|刘冠廷:0.7|堡垒之夜:0.7|台湾女篮:0.7|杨若兮:0.7|脊椎:0.7|杨恩又:0.7|罗蕊:0.7|ATP:0.7|危险罗曼史:0.7|八零九零:0.7|罗杰斯杯:0.7
2024-12-11 23:58:06.816 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|双妹:0.8|锈祖诀:0.8|将门独后:0.8|Pam:0.8|化妆:0.8|整容:0.8|虞书欣:0.8|Meow:0.8|邹雨宸:0.8|李彩玟:0.8|佩尼达岛:0.8|凯文-阿尔瓦雷斯:0.8|恩佐-费尔南德斯:0.7|土木工程:0.7|周也:0.7|NaYeon:0.7|李志鹏:0.7|明星盘点:0.7|鱼霜:0.7|补药:0.7|今日晴:0.7|妖制:0.7|YOU:0.7|综合执法:0.7|毛肚火锅:0.7|富勒烯:0.7|金枕榴莲:0.7|王亚飞:0.7|脂溢性皮炎:0.7|金有谦:0.7|阿呆:0.7|一场(舞台剧):0.7|阿安:0.7|凝陇:0.7|电煮锅:0.7|不莱玫:0.7|江豚音乐节:0.7|普达措国家公园:0.7|温以凡:0.7|罢工:0.7|BLUECHARM阅世:0.7|深夜食堂:0.7|HAO:0.7|网红妆:0.7|安静:0.7|M.I.L.K:0.7|弃吴钩:0.7|肌肤之钥光凝润采妆前霜:0.7|张凯莹:0.7
2024-12-11 23:58:06.821 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|贺玄:0.9|巫师3:狂猎:0.9|灌篮高手:0.9|蜘蛛侠:纵横宇宙:0.8|黑客攻击:0.8|海豹:0.8|幽游白书:0.8|黄圣池:0.8|迷途-向彭中:0.8|Love Dive:0.8|农夫山泉:0.8|恒星:0.8|孟楠:0.8|小行星:0.8|一锅出:0.8|流川枫:0.8|SQ:0.8|物价上涨:0.8|新京华烟云:0.8|行星:0.8|哥斯拉大战金刚:0.8|钱三强:0.8|金星:0.8|封神榜:0.8|生化危机4 重制版:0.8|王祖贤:0.8|熊二:0.8|企鹅:0.8|劳动法:0.8|隋朝:0.8|Flow:0.8|彩绘喷漆制作:0.8|解盛岩:0.8|郑娜恩:0.8|建筑摄影:0.8|电影gif:0.8|武内崇:0.8|万磁王:0.8|免职:0.8|布拉芙夫人:0.8|天问二号:0.8|铁道警察学院:0.8|小熊猫:0.8|共享充电宝:0.8|爱乐之城:0.8|画画:0.8|核污染:0.8|迷宫饭:0.8|赵立坚:0.8
2024-12-11 23:58:06.821 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|歼-10C战斗机:0.9|错误:0.8|行为艺术:0.8|贝多芬:0.8|文玩核桃:0.8|银耳汤:0.8|逆水寒:0.8|陈思:0.8|DNF手游:0.8|洛克王国:0.8|瑞虎8:0.8|野餐:0.8|言梦-井童:0.8|临夜传:0.8|arcfox:0.8|戴尔:0.7|非机动车道:0.7|孕妇瑜伽:0.7|护发精华:0.7|Redmi K50:0.7|板蓝根:0.7|地下城与勇士:0.7|反坦克地雷:0.7|柳盈署:0.7|大阪直美:0.7|韩枫:0.7|虾怪:0.7|机械改造:0.7|背德:0.7|乐高星球大战:0.7|大王别慌张:0.7|燃脂运动:0.7|优酷视频:0.7|ofo:0.7|合同法:0.7|无人机:0.7|历史虚无主义:0.7|阵风战斗机:0.7|万能青年旅店:0.7|挖掘机:0.7|海鲜自助:0.7|神操作:0.7|心动的声音:0.7|施工:0.7|迷惑行为:0.7|电池:0.7|翻车现场:0.7|碰瓷:0.7|摩萨德:0.7
2024-12-11 23:58:06.821 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|郑娜恩:0.9|生化危机4 重制版:0.9|一秒钟:0.9|灌篮高手:0.9|熊二:0.9|隋朝:0.8|钢琴:0.8|画画:0.8|Anthony Vaccarello:0.8|企鹅:0.8|宫崎骏:0.8|夏日重现:0.8|小美人鱼:0.8|海豹:0.8|仓鼠:0.8|新番:0.8|爱乐之城:0.8|幽游白书:0.8|蜘蛛侠:纵横宇宙:0.8|英雄联盟全球总决赛:0.8|郭跃:0.8|詹妮弗·安妮斯顿:0.8|赵立坚:0.8|考拉:0.8|Melody:0.8|星期三:0.8|张黎:0.8|iPad Air:0.8|天问二号:0.8|熊出没:0.8|小鱼儿与花无缺:0.8|生化危机4:0.8|岳飞:0.8|猫头鹰:0.8|越轨:0.8|李治廷:0.8|核污染:0.8|金鱼姬:0.8|九一八:0.8|生物:0.8|蒲公英的约定:0.8|青丘狐传说:0.8|印章:0.8|上海大剧院:0.8|范晓萱:0.8|浴血黑帮:0.8|洛杉矶奥运会:0.8|许睿浩:0.8|被骂:0.8
2024-12-11 23:58:06.826 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|汉口学院:0.8|悉尼大学:0.8|卸妆乳:0.8|estar:0.8|肌理画:0.8|岩崎大昇:0.8|懒蛋蛋:0.8|清洁面膜:0.7|说唱巅峰对决音乐节:0.7|海棠微雨共归途:0.7|冻膜:0.7|驴妈妈旅游网:0.7|乌梅:0.7|江苏警官学院:0.7|化妆品:0.7|慢性炎症:0.7|卡诗洗发水:0.7|案例分析题:0.7|口红:0.7|燕山大学:0.7|Dynamite (Cahill Remix):0.7|张浩天:0.7|嫩肤:0.7|威海旅行:0.7|吴沛:0.7|古龙水:0.7|牛梓屹:0.7|宫保鸡丁:0.7|营养均衡:0.7|唇部彩妆:0.7|美妆购物分享:0.7|夹馍:0.7|振德:0.7|书签:0.7|国货护肤:0.7|在一起:0.7|饮水机:0.7|淡香水:0.7|三峡大学:0.7|西京学院:0.7|柳善皓:0.7|封面设计:0.7|鼓鼓:0.7|脑血栓:0.7|中央财经大学:0.7|唇部试色:0.7|搜狐畅游:0.7|福鼎肉片:0.7|特殊教育:0.7
2024-12-11 23:58:06.830 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|芈月传:0.9|如懿传:0.9|美人心计:0.9|妖猫传:0.8|清平乐:0.8|甄嬛传:0.8|玉楼春:0.8|独孤天下:0.8|知否知否应是绿肥红瘦:0.8|还珠格格:0.8|宫锁心玉:0.8|步步惊心:0.8|小时代:0.8|三生三世十里桃花:0.8|暮光之城:0.8|独步天下:0.8|蒋欣:0.8|羞羞的铁拳:0.8|金粉世家:0.8|王欧:0.8|齐齐哈尔工程学院:0.8|Love poem:0.8|凤囚凰:0.8|孝庄秘史:0.8|法证先锋:0.8|霍建华:0.8|宫心计:0.8|画皮:0.8|刘国楠:0.8|周迅:0.8|夏洛特烦恼:0.8|金枝欲孽:0.8|奥之心:0.8|传闻中的陈芊芊:0.8|中国羽毛球协会:0.8|倾世皇妃:0.8|琅琊榜:0.8|欢乐颂:0.8|回家的诱惑:0.8|破墓:0.8|黑胡椒粉:0.8|卫嬿婉:0.7|美人鱼:0.7|还珠格格第三部:0.7|兰陵王:0.7|太子妃升职记:0.7|怪你过分美丽:0.7|防风意映:0.7|健身环大冒险:0.7
2024-12-11 23:58:06.835 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|幸福三重奏:0.9|杨子:0.9|王子文:0.9|黄奕:0.9|伊能静:0.9|金莎:0.9|美丽说:0.9|霍思燕:0.9|郎朗:0.9|再见爱人:0.9|鄢颇:0.9|杜江:0.9|包贝尔:0.9|郭晓冬:0.8|张翰:0.8|刘涛:0.8|韩兆:0.8|白歆惠:0.8|权振东:0.8|福原爱:0.8|蒋小涵:0.8|刘芸:0.8|陈明真:0.8|迟帅:0.8|许还幻:0.8|隋棠:0.8|大嘴巴:0.8|宋丹丹:0.8|佟丽娅:0.8|杨阳洋:0.8|杨一展:0.8|程莉莎:0.8|蒋勤勤:0.8|张勋杰:0.8|王宏恩:0.8|傅首尔:0.8|快的打车:0.8|孙周:0.8|秦昊:0.8|李湘:0.8|海峰:0.8|莫艳琳:0.8|可米小子:0.8|李承鹏:0.8|黄磊:0.8|吉娜:0.8|孙莉:0.8|朴恩惠:0.8|李廷镇:0.8
2024-12-11 23:58:06.843 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:0.9|艾伦:0.9|进击的巨人:0.8|申河均:0.8|利威尔:0.8|三笠:0.8|吴谦:0.8|唐僧:0.8|陈玺达:0.8|张继科:0.8|脂肪:0.8|陈三两:0.8|帕梅拉:0.8|文化传媒:0.8|招财猫:0.8|血源诅咒:0.8|HIT ME HARD AND SOFT:0.8|周蕙:0.8|跨性别:0.8|斑鸠:0.8|营养:0.8|睡眠质量:0.8|张继科:0.8|文相敏:0.8|察尔汗盐湖:0.8|重庆动物园:0.8|飞秒激光:0.8|吴承恩:0.8|串珠编织制作:0.8|医疗保险:0.8|Moving:0.8|睡眠:0.8|暴力:0.8|cv风镜:0.8|天线宝宝:0.8|超燃美食记第二季:0.8|平手友梨奈:0.8|八喜:0.8|铁锈味的雨滴:0.8|红毛丹大侠:0.8|吴冠中:0.8|杨洋:0.8|Billie Eilish:0.7|知足:0.7|邢傲伟:0.7|杨旻浩:0.7|记录:0.7|土豆:0.7|艾扬格:0.7
2024-12-11 23:58:06.848 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|马伊琍:0.9|汪峰:0.9|张柏芝:0.8|伊能静:0.8|杨阳洋:0.8|李冰冰:0.8|孙俪:0.8|刘涛:0.8|王子文:0.8|黄圣依:0.8|佟丽娅:0.8|林志玲:0.8|周冬雨:0.8|郭晶晶:0.8|林心如:0.8|许曦恩:0.8|刘嘉玲:0.8|巩俐:0.8|李湘:0.8|蔡少芬:0.8|苏州古典园林:0.8|一代宗师:0.8|陈可辛:0.8|肖飞:0.8|大S:0.8|舒淇:0.8|范冰冰:0.8|金星:0.8|盛屯矿业:0.8|马志明:0.8|文艺复兴:0.8|澳门风云3:0.8|鲍莉:0.8|李亚鹏:0.8|美丽说:0.8|电吹风:0.8|杨一展:0.8|赵薇:0.8|蒋勤勤:0.8|李小冉:0.7|青岛队:0.7|RAZ:0.7|彭蕾:0.7|天国的阶梯:0.7|蓝盈莹:0.7|新房:0.7|美邦服饰:0.7|U23亚洲杯:0.7|生长因子:0.7
2024-12-11 23:58:06.852 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|应声虫:0.9|食发鬼:0.9|为崽而战:0.9|铁鼠:0.9|网易游戏:0.8|八百比丘尼:0.8|不见岳:0.8|十六:0.8|镇墓兽(御魂):0.8|黑童子:0.8|因幡辉夜姬:0.8|石距:0.8|麓铭大岳丸:0.8|超鬼王:0.8|狂骨:0.8|Stick Out:0.8|三尾狐:0.8|惠比寿:0.8|蔡钟协:0.8|镰鼬:0.8|刘羽琦:0.8|大岳丸:0.8|兰利:0.8|逢魔之时:0.8|犬神:0.8|大话西游2:0.8|帝释天:0.8|海忍:0.8|百鬼弈:0.8|刘迦:0.8|第九农学基地:0.8|风月变:0.8|涂佛:0.8|Porter Robinson:0.8|金智佑:0.8|双人成行:0.7|雁荡山:0.7|久次良:0.7|青年节:0.7|共潜:0.7|内野圣阳:0.7|垢尝:0.7|布布:0.7|岩本照:0.7|天津中医药大学:0.7|帅家默:0.7|Bwipo:0.7|魏雪漫:0.7
2024-12-11 23:58:06.856 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|model x:0.9|model s:0.9|cybertruck:0.8|小贾伦-杰克逊:0.7|飞段:0.7|精灵宝钻:0.7|特斯拉:0.7|日向宁次:0.7|ISLAND:0.7|翁晓君:0.7|贾伦-杰克逊:0.7|银行从业资格考试:0.7|望山楂:0.7|博鳌亚洲论坛:0.7|兰登-多诺万:0.7|银邦股份:0.7|负责:0.7|白鸟蓝良:0.7|超皮秒:0.7|注册城乡规划师:0.7|英语四级成绩:0.7|充电桩:0.7|吾股丰登:0.7|麦浚龙:0.7|雷-阿伦:0.7|相泽南:0.7|日经ETF:0.7|李璇:0.7|小鹏g3:0.7|风林火山:0.7|保健品:0.7|暗黑破坏神4:0.7|偶像大师百万现场:0.7|自动驾驶:0.7|爱美客:0.7|达拉斯小牛队:0.6|肥肥鲨:0.6|去哪儿网:0.6|贾马尔-克劳福德:0.6|苹果11:0.6|香港交易所:0.6|日月湾:0.6|刘玉栋:0.6|黄奇帆:0.6|财富趋势:0.6|普锐斯:0.6|万磁王:0.6|迈克尔-泰森:0.6
2.3.2 超参¶
- 默认维度参数
rank=10
,当数据抽样10%的时候,基本够用,但是全量数据会造成重叠严重,扩展到16维之后才可以区分开;增加到32d过程中,AUC会持续提升,消耗资源会O(rank)级增长 alpha
是配合implicitPrefs=True
的参数,正样本的置信度,alpha=1
以下基本不可用,ALS引用的论文使用的是alpha=40
,实测发现从1增加到500,效果持续有提升。设定与\(r\)的取值范围和数据的稀疏程度有关,\(r\)越小,稀疏程度越高,需要相应调大alpha
maxIter
是迭代次数,没有很大影响,默认10次即可;概念上类比梯度下降(Gradient Descent)里面的epoch
(容易误理解为steps)regParam
是归一化参数 \(\lambda\),默认值0.01即可。对explicit w/o negSampling影响较大,而隐式反馈,explicit w/ negSampling这俩都比较稳定
变动regParam
参数后效果
显式反馈模式,采用相同的参数{'rank': 10, 'transform': 'none', 'implicitPrefs': False, 'sub': '5'}
,
negSampling | regParam |
AUC | RMSE |
---|---|---|---|
True | 0.1 | 0.86637 | 0.22038 |
True | 0.01 | 0.89430 | 0.18770 |
True | 0.001 | 0.89383 | 0.18844 |
False | 1 | 0.74859 | 0.52812 |
False | 0.1 | 0.75439 | 0.43522 |
False | 0.01 | 0.85707 | 0.42712 |
- support:一些实践文章提到,应该预处理过滤掉长尾的item和user;这里测试发现,过滤前后,AUC之类的效果其实差不多,过滤与否主要从性价比角度上考虑的
numUserBlocks/numItemBlocks
:可以看成repartition
数,影响计算的并行任务数,默认10,集群可以调大到160
{'regParam': 0.01, 'rank': 16, 'implicitPrefs': True, 'alpha': 200.0, 'transform': 'power4'}
2024-12-09 18:32:41.816 | INFO | __main__::250 - 数据集的schema:
2024-12-09 18:34:10.764 | INFO | __main__:split_dataset:75 - 数据中总标签数:52822
2024-12-09 18:36:40.243 | INFO | __main__::280 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 16, 'coldStartStrategy': 'drop', 'implicitPrefs': True, 'alpha': 200.0, 'numUserBlocks': 60, 'numItemBlocks': 60}
2024-12-09 18:36:40.270 | INFO | __main__::292 - 使用转换:power4 -> Column<'pow(weight, 4)'>
2024-12-09 19:23:47.631 | INFO | __main__::303 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_16.imp_True.reg_0.01.a_200.0.it_10.tf_power4.sub_0%1%2%3%4%5%6%7%8%9
2024-12-09 19:26:11.078 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.19562840395208686
2024-12-09 19:26:23.166 | INFO | __main__:evaluate:93 - AUC = 0.8770805285878449
2024-12-09 19:26:25.946 | INFO | __main__::340 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-09 19:26:25.947 | INFO | __main__::350 - 准备物品特征...
2024-12-09 19:26:29.269 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52822, 16)
2024-12-09 19:26:29.734 | INFO | __main__::356 - 计算相似物品...
2024-12-09 19:27:01.495 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|段祺瑞:1.0|袁世凯:1.0|蒋经国:1.0|戴笠:1.0|冯玉祥:1.0|黄金荣:1.0|朱元璋:1.0|十大元帅:1.0|明成祖:1.0|西安事变:1.0|崇祯:1.0|杨虎城:1.0|唐朝:1.0|汉朝:1.0|宋朝:1.0|成吉思汗:1.0|秦始皇:1.0|林彪:1.0|洪秀全:1.0|蒋纬国:1.0|李自成:1.0|元朝:1.0|李宗仁:1.0|汉高祖:1.0|阎锡山:1.0|吴佩孚:1.0|杜月笙:1.0|春秋战国:1.0|汉武帝:1.0|汪精卫:1.0|许世友:1.0|北宋:1.0|蒋介石:1.0|安禄山:1.0|彭德怀:1.0|军统:1.0|努尔哈赤:1.0|隋朝:1.0|古代政治家:1.0|太平天国:1.0|明惠帝:1.0|明朝:1.0|粟裕:1.0|八国联军:1.0|项羽:1.0|解放战争:1.0|白崇禧:1.0|老视频:1.0|孙中山:1.0
2024-12-09 19:27:01.501 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|真题:1.0|逢考必过:1.0|选择题:1.0|刷题:1.0|学习计划:1.0|每日一题:1.0|押题:1.0|答题思路:1.0|复习计划:1.0|艾宾浩斯:1.0|模拟题:1.0|判断题:1.0|成绩:1.0|高频考点:1.0|机构:1.0|理论法:1.0|民刑:1.0|考点:1.0|考前焦虑:1.0|备考期:1.0|华研法硕:1.0|刑法:1.0|考证:1.0|宪法学:1.0|简答题:1.0|主观题:1.0|考试时间:1.0|杜洪波:1.0|国家统一法律职业资格考试:1.0|法学:1.0|商经:1.0|行政法:1.0|李晗:1.0|考试大纲:1.0|三国法:1.0|文运:1.0|戴鹏:1.0|商法:1.0|鄢梦萱:1.0|备考:1.0|白斌:1.0|民诉:1.0|法律职业资格:1.0|柏浪涛:1.0|龚成思:1.0|学校教育:1.0|公司法:1.0|宪法:1.0
2024-12-09 19:27:01.508 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|丝绒拿铁:0.9|奈雪的茶:0.9|茉莉奶白:0.9|杯子:0.9|库迪咖啡:0.9|德克士:0.9|麦咖啡:0.9|洞洞鞋:0.9|茉莉奶绿:0.9|塔斯汀:0.9|茶百道:0.9|鲜果茶:0.9|香辣鸡腿堡:0.9|麦当劳麦辣鸡腿堡:0.9|和府捞面:0.9|爸爸糖吐司:0.9|蜜雪冰城柠檬水:0.9|紫燕百味鸡:0.9|冻干草莓:0.9|柠檬水:0.9|手机支架:0.9|板栗烧鸡:0.9|三得利:0.9|百分茶:0.9|MOKINGRAN(梦金园):0.9|kfc:0.9|koi奶茶:0.9|幸福西饼:0.9|椰子粉:0.9|海苔小贝:0.9|人体工学椅:0.9|六桂福:0.9|清扬:0.9|原味鸡:0.9|海马体:0.9|茶百道:0.9|照片打印机:0.9|西伯利亚:0.9|帆布包:0.9|双汇:0.9|眷茶:0.9|零食很忙:0.9|以纯:0.9|app:0.9|爱华仕:0.9|汉堡王:0.9|洛斐:0.9|华莱士:0.9|筋膜枪:0.9
2024-12-09 19:27:01.508 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|影院:0.9|苹果 iWatch:0.9|九号:0.9|特仑苏:0.8|费加罗男士:0.8|清朗:0.8|偏爱人间烟火:0.8|出圈:0.8|封闭:0.8|陆川:0.8|支架:0.8|康师傅:0.8|crocs洞洞鞋:0.8|小小的我:0.8|华为nova:0.8|次次:0.8|霓虹甜心:0.8|Emporio Armani:0.8|魏子昕:0.8|健饼果紫:0.8|南京青奥体育公园:0.8|莫欺少年穷:0.8|JC:0.8|韶音:0.8|可爱多:0.8|狂野时代:0.8|crocs:0.8|等不到的等待:0.8|戴比尔斯:0.8|李亦非:0.8|睿士ELLE MEN:0.8|迪奥锁妆气垫粉底:0.8|朝夕:0.8|记忆奇旅:0.8|艺人:0.8|唐奇:0.8|749局:0.8|一念无明:0.8|冰红茶:0.8|梦境:0.8|PradaGalleria手袋:0.8|阿玛尼红管405:0.8|CD机:0.8|迪奥旷野信步香水:0.8|暴龙:0.8|华伦天奴口红:0.8|神奇:0.8|石头科技:0.8|蒙娜丽莎:0.8
2024-12-09 19:27:01.515 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|冲浪:0.9|斯巴达勇士赛:0.9|轮滑:0.9|静安寺:0.9|城市摄影:0.9|隋凯:0.8|搏击:0.8|威士忌:0.8|多瑙河:0.8|悉尼歌剧院:0.8|爵士鼓:0.8|布里斯班:0.8|爱琴海:0.8|水上乐园:0.8|滑雪装备:0.8|滑雪:0.8|瑞玛席丹:0.8|死亡金属:0.8|扭曲机器:0.8|米其林餐厅:0.8|滑板:0.8|李延亮:0.8|街头摄影:0.8|武康路:0.8|潜水:0.8|METALLICA:0.8|slipknot:0.8|理光GR3:0.8|四季酒店:0.8|精品咖啡:0.8|黄金海岸:0.8|架子鼓:0.8|王澜:0.8|工业建筑:0.8|徒步:0.8|温泉:0.8|柔术:0.8|顺峰山公园:0.8|电吉他:0.8|张沛勉:0.8|夏炎:0.8|艾尔肯:0.8|胶片摄影:0.8|新西兰旅行:0.8|金属乐:0.8|许巍:0.8|南迦巴瓦峰:0.8|梅里雪山:0.8|布达拉宫:0.8
2024-12-09 19:27:01.515 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|冰球:1.0|闫涵:1.0|冰壶世锦赛:1.0|跆拳道:1.0|宁忠岩:1.0|冰雪项目:1.0|韩聪:1.0|坂本花织:1.0|隋文静:1.0|张可欣:1.0|佐藤骏:1.0|周知方:0.9|键山优真:0.9|三浦佳生:0.9|三原舞依:0.9|木原龙一:0.9|三浦璃来:0.9|渡边伦果:0.9|友野一希:0.9|纪平梨花:0.9|山本草太:0.9|齐广璞:0.9|超级杯:0.9|世界花样滑冰锦标赛:0.9|陈巍:0.9|花剑:0.9|吉田阳菜:0.9|庞清:0.9|自由式滑雪:0.9|1tv:0.9|马琳琳:0.9|佟健:0.9|内村航平:0.9|韩雨:0.9|李子君:0.9|栉田育良:0.9|李海仁:0.9|千叶百音:0.9|车俊焕:0.9|王子露:0.9|王新康:0.9|陈溪梓:0.9|金彩然:0.9|李宣潼:0.9|自由滑:0.9|彭程:0.9|世界花样滑冰大奖赛:0.9|邢珈宁:0.9|花样滑冰锦标赛:0.9
2024-12-09 19:27:01.521 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|李昌镐:1.0|古力:1.0|姜东润:1.0|连笑:1.0|崔精:1.0|申旻埈:1.0|井山裕太:1.0|金恩持:1.0|许家元:1.0|芮乃伟:1.0|春兰杯:1.0|常昊:1.0|芝野虎丸:1.0|刘昌赫:1.0|藤泽里菜:1.0|於之莹:1.0|许皓鋐:1.0|上野爱咲美:1.0|范廷钰:1.0|赵晨宇:1.0|陈耀烨:1.0|金明训:1.0|芈昱廷:1.0|廖元赫:1.0|马晓春:1.0|吴侑珍:1.0|周泓余:1.0|三星杯:1.0|王星昊:1.0|李钦诚:1.0|李维清:1.0|檀啸:1.0|谢尔豪:1.0|党毅飞:1.0|范胤:1.0|杨鼎新:1.0|许嘉阳:1.0|金禹丞:1.0|陆敏全:1.0|王世一:1.0|屠晓宇:1.0|朴廷桓:1.0|彭立尧:1.0|辜梓豪:1.0|俞斌:1.0|丁浩:1.0|时越:1.0|叶长欣:1.0|卞相壹:1.0
2024-12-09 19:27:01.527 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|多米尼克蒂姆:1.0|ATP:1.0|瓦林卡:1.0|萨芬:1.0|费雷尔:1.0|特松加:1.0|伯蒂奇:1.0|加斯奎特:1.0|亚历山大-兹维列夫:1.0|史蒂夫-诺瓦克:1.0|上海大师赛:1.0|卡洛斯·阿尔卡拉斯:1.0|扬尼克-辛纳:1.0|罗兰加洛斯:1.0|德尔波特罗:1.0|卡斯珀-鲁德:1.0|尼克克耶高斯:1.0|贝尔滕斯:1.0|小威廉姆斯:1.0|麦迪逊-凯斯:1.0|阿尔卡拉兹:1.0|罗杰斯杯:1.0|斯蒂芬斯:1.0|斯托瑟:1.0|丹尼尔·梅德韦杰夫:1.0|马德里大师赛:1.0|塞瓦斯托娃:1.0|西西帕斯:1.0|孔塔:1.0|库兹涅佐娃:1.0|拉沃尔杯:1.0|科维托娃:1.0|吴易昺:1.0|商竣程:1.0|费德勒:1.0|安迪穆雷:1.0|罗德·拉沃尔:1.0|卢布列夫:1.0|沃兹尼亚奇:1.0|扬科维奇:1.0|辛吉斯:1.0|迈阿密大师赛:1.0|布云朝克特:1.0|霍尔格·鲁内:1.0|上海网球大师赛:1.0|戴维斯杯:1.0|阿加西:1.0|锦织圭:1.0
2024-12-09 19:27:01.533 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|Angelababy:1.0|虞书欣:1.0|鞠婧祎:1.0|迪丽热巴:1.0|白鹿:0.9|杨幂:0.9|黄晓明:0.9|刘亦菲:0.9|赵丽颖:0.9|赵今麦:0.9|古力娜扎:0.9|关晓彤:0.9|王鹤棣:0.9|Lisa:0.9|吴谨言:0.9|明星盘点:0.8|张雨绮:0.8|刘浩存:0.8|贾玲:0.8|金晨:0.8|田曦薇:0.8|黄子韬:0.8|鹿晗:0.8|于正:0.8|萌娃日常:0.8|减肥:0.8|可爱萌娃:0.8|范丞丞:0.8|秦霄贤:0.8|王诗龄:0.8|杨超越:0.8|张若昀:0.8|日常记录:0.8|秦岚:0.8|女生穿搭:0.8|白敬亭:0.8|沈月:0.8|张凌赫:0.8|妆容:0.7|杨紫:0.7|少年感帅哥:0.7|情感语录:0.7|纯欲美女:0.7|唐嫣:0.7|甄嬛传:0.7|宋轶:0.7|谷爱凌:0.7|苹果:0.7|移动手机设备:0.7
2024-12-09 19:27:01.539 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|井上雄彦:1.0|The First Slam Dunk:1.0|樱木花道:0.9|灌篮高手:0.9|流川枫:0.9|裘德·洛:0.9|山治:0.9|三井寿:0.9|社交网络:0.9|宫城良田:0.9|丹尼尔·雷德克里夫:0.9|邪恶力量:0.9|香吉士:0.9|美国队长2:0.9|仙道彰:0.9|康伯巴奇:0.9|神探夏洛克:0.9|哈利·波特与火焰杯:0.9|深津一成:0.9|泽北荣治:0.9|波特卡斯·D·艾斯:0.9|青之芦苇:0.9|罗罗诺亚·索隆:0.9|鲁伯特·格林特:0.9|本尼迪克特·康伯巴奇:0.9|指环王:0.9|特拉法尔加·罗:0.9|仙流:0.9|麦斯·米科尔森:0.9|马尔科:0.9|水户洋平:0.9|哈利·波特与混血王子:0.9|哈利波特:0.9|哥谭:0.9|妙警贼探:0.9|牧绅一:0.9|萨博:0.9|汤姆·希德勒斯顿:0.9|大卫·田纳特:0.9|X战警:第一战:0.9|邓布利多:0.9|妮可·罗宾:0.9|神奇动物3:邓布利多之谜:0.9|詹姆斯·麦卡沃伊:0.9|神奇动物在哪里:0.9|哈利·波特与凤凰社:0.9|麦克·辛:0.9|七王国的骑士:0.9|迈克尔·法斯宾德:0.9
2024-12-09 19:27:01.539 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|火影忍者疾风传:0.9|行尸走肉:0.9|布洛克·莱斯纳:0.9|塞斯·罗林斯:0.9|约翰·塞纳:0.9|fly100%:0.9|皇室战争:0.9|魔兽争霸3:0.9|超级龙珠英雄:0.9|绿茵信仰:0.8|NBA 2K20:0.8|WWE:0.8|天秀杯:0.8|天下足球:0.8|魔兽争霸:0.8|复联3:0.8|实况足球:0.8|龙珠超:0.8|游戏直播:0.8|钢铁侠2:0.8|武磊:0.8|银河护卫队2:0.8|focus:0.8|复仇者联盟3:无限战争:0.8|速度与激情9:0.8|刘语熙:0.8|超龙珠英雄:0.8|七龙珠:0.8|隐形守护者:0.8|巴塞罗那:0.8|Soin:0.8|多多自走棋:0.8|梅西:0.8|刘语熙:0.8|Moon:0.8|罗门伦斯:0.8|哥斯拉:怪兽之王:0.8|FIFA 20:0.8|龙珠英雄:0.8|蜘蛛侠:英雄远征:0.8|曼联公司:0.8|虎扑:0.8|放置奇兵:0.8|鹰眼:0.8|行尸走肉:生存者:0.8|巴比-莱斯利:0.8|萨米辛:0.8|尤文图斯:0.8|万宝路(Marlboro):0.8
2024-12-09 19:27:01.540 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|The First Slam Dunk:1.0|井上雄彦:1.0|三井寿:1.0|宫城良田:1.0|深津一成:1.0|泽北荣治:1.0|樱木花道:1.0|仙道彰:1.0|裘德·洛:1.0|社交网络:1.0|牧绅一:1.0|流川枫:1.0|水户洋平:1.0|仙流:1.0|丹尼尔·雷德克里夫:1.0|大卫·田纳特:1.0|麦斯·米科尔森:1.0|妙警贼探:1.0|麦克·辛:1.0|康伯巴奇:0.9|神探夏洛克:0.9|灌篮高手:0.9|邪恶力量:0.9|尼尔·盖曼:0.9|好兆头第二季:0.9|青之芦苇:0.9|杰西·艾森伯格:0.9|邓布利多:0.9|詹姆斯·麦卡沃伊:0.9|霍比特人:0.9|指环王:0.9|哈利·波特与火焰杯:0.9|好兆头:0.9|松山研一:0.9|本尼迪克特·康伯巴奇:0.9|埃迪·雷德梅恩:0.9|伞学院:0.9|詹森·阿克斯:0.9|精灵宝钻:0.9|鲁伯特·格林特:0.9|神秘博士:0.9|哈利波特:0.9|神奇动物3:邓布利多之谜:0.9|迈克尔·法斯宾德:0.9|哈利·波特与凤凰社:0.9|机动搜查队404:0.9|哈利·波特与阿兹卡班的囚徒:0.9|X战警:第一战:0.9|汤姆·希德勒斯顿:0.9
2024-12-09 19:27:01.546 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|粉底膏:1.0|混合皮:1.0|粉底霜:1.0|眼线液:1.0|医美面膜:1.0|保湿面膜:1.0|睫毛打底:1.0|魅丝蔻:1.0|清洁面膜:1.0|眉刷:1.0|镜面唇釉:1.0|诗佩妮Spenny:1.0|红血丝:1.0|精华水:1.0|艾杜纱:1.0|遮瑕膏:1.0|菲鹿儿focallure:1.0|韩熙贞:1.0|混油:1.0|化妆棉:1.0|小棕瓶:1.0|悦诗风吟水乳:1.0|唇膏笔:1.0|肌底液:1.0|美宝莲:1.0|面膜纸:1.0|粉霜:1.0|悦诗风吟:1.0|拉杜丽:1.0|妆前:1.0|染发剂:1.0|眼线液笔:1.0|露华浓:1.0|液体眼影:1.0|铁皮:1.0|眼唇卸妆液:1.0|MAC魅可:1.0|苏菲娜:1.0|眼线胶笔:1.0|眼影粉:1.0|卸妆乳:1.0|水光肌护理:1.0|卸妆水:1.0|Urban Decay:1.0|colorkey小黑镜唇釉:1.0|护理液:1.0|稚优泉CHIOTURE:1.0|cc霜:1.0|眼影刷:1.0
2024-12-09 19:27:01.552 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|还珠格格:1.0|知否知否应是绿肥红瘦:1.0|如懿传:0.9|步步惊心:0.9|蒋欣:0.9|三十而已:0.9|欢乐颂:0.9|情深深雨濛濛:0.9|美人心计:0.8|霍建华:0.8|清平乐:0.8|三生三世十里桃花:0.8|上错花轿嫁对郎:0.8|回家的诱惑:0.8|家有儿女:0.8|周迅:0.8|金粉世家:0.8|司藤:0.8|冯绍峰:0.8|新还珠格格:0.8|蜗居:0.8|我的前半生:0.7|蓝盈莹:0.7|欢天喜地七仙女:0.7|如懿:0.7|芈月传:0.7|卫嬿婉:0.7|王莎莎:0.7|武媚娘传奇:0.7|还珠格格第三部:0.7|鹤唳华亭:0.7|宫锁心玉:0.7|斓曦:0.7|小燕子:0.7|至尊红颜:0.7|浣碧:0.7|请回答1988:0.7|罗晋:0.7|甄嬛:0.7|林心如:0.7|孙俪:0.7|陈建斌:0.7|宫锁珠帘:0.7|花千骨:0.7|华妃:0.7|香蜜沉沉烬如霜:0.7|太子妃升职记:0.7|吴奇隆:0.7|玉娆:0.7
2024-12-09 19:27:01.558 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|杜江:1.0|霍思燕:1.0|孙莉:0.9|金莎:0.9|钟丽缇:0.9|陈岚(向太):0.9|应采儿:0.9|幸福三重奏:0.9|吴尊:0.9|张嘉倪:0.9|李承铉:0.9|贾静雯:0.9|窦骁:0.9|安以轩:0.9|甜馨:0.9|麦迪娜:0.9|蔡少芬:0.9|妻子的浪漫旅行:0.9|王子文:0.9|王岳伦:0.9|爸爸去哪儿:0.9|张歆艺:0.9|陈小春:0.9|袁弘:0.9|刘恺威:0.9|张檬:0.9|李湘:0.9|买超:0.9|邓莎:0.8|伊能静:0.8|郎朗:0.8|冉莹颖:0.8|袁咏仪:0.8|王丽坤:0.8|秋瓷炫:0.8|林心如:0.8|杜淳:0.8|王灿:0.8|何超莲:0.8|吴昕:0.8|郭碧婷:0.8|颖儿:0.8|洪欣:0.8|包文婧:0.8|田亮:0.8|沈梦辰:0.8|林志颖:0.8|于晓光:0.8|刘芸:0.8
2024-12-09 19:27:01.569 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:1.0|呪术廻戦:1.0|葛力姆乔:1.0|富坚义博:1.0|JOJO的奇妙冒险:石之海:1.0|艾伦:1.0|朽木白哉:1.0|猎人:1.0|心理测量者:1.0|三笠:1.0|朽木露琪亚:1.0|荒木飞吕彦:1.0|全职猎人:1.0|飙马野郎:1.0|井上织姬:1.0|李伟:1.0|空条徐伦:1.0|兵长:1.0|jojo的奇妙冒险 黄金之风:1.0|利威尔:1.0|小野大辅:1.0|MAPPA:1.0|阿散井恋次:1.0|吉克耶格尔:1.0|安娜苏:1.0|少年JUMP:1.0|中村悠一:1.0|鲁邦三世:1.0|约定的梦幻岛:1.0|忍者乱太郎:1.0|神谷浩史:1.0|怪化猫:1.0|堀越耕平:1.0|岸边露伴:1.0|东方仗助:1.0|月刊少女野崎君:1.0|艾伦耶格尔:1.0|冰海战记:1.0|安德瓦:1.0|樱井孝宏:1.0|东京巴比伦:1.0|榎木淳弥:1.0|黄金神威:1.0|莱纳·布朗:1.0|废渊战鬼:1.0|花江夏树:1.0|韩吉·佐耶:1.0|伊路:1.0|早川秋:1.0
2024-12-09 19:27:01.574 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|大S:0.9|张柏芝:0.9|郭晶晶:0.9|向佐:0.9|汪小菲:0.9|高圆圆:0.9|郭碧婷:0.9|小s:0.9|孙俪:0.9|林心如:0.9|佟丽娅:0.9|伊能静:0.9|周冬雨:0.9|张馨予:0.8|陈妍希:0.8|倪妮:0.8|具俊晔:0.8|刘涛:0.8|王子文:0.8|贾静雯:0.8|陈乔恩:0.8|马伊琍:0.8|陈晓:0.8|窦骁:0.8|李湘:0.8|唐嫣:0.8|章泽天:0.8|张兰:0.8|汪峰:0.8|霍建华:0.8|何超莲:0.8|张雨绮:0.8|陈岚(向太):0.8|刘诗诗:0.8|林志玲:0.8|宋慧乔:0.8|姚晨:0.8|明星穿搭:0.8|冯绍峰:0.8|范冰冰:0.8|霍思燕:0.8|张嘉倪:0.8|林更新:0.8|江疏影:0.8|谢霆锋:0.8|张钧甯:0.8|刘恺威:0.8|戚薇:0.8|景甜:0.8
2024-12-09 19:27:01.580 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|徐清林:1.0|网易游戏:1.0|附魔:0.9|剑侠情缘3:0.9|神都夜行录:0.9|天涯明月刀手游:0.9|网易:0.9|梦江湖:0.9|天谕:0.9|龙族幻想:0.9|剑侠情缘网络版:0.9|克制:0.9|武林争霸:0.9|代号·世界:0.9|逆水寒:0.9|余玉贤:0.9|阴阳师:超鬼王:0.9|剑网3竞技大师赛:0.9|剑网3:指尖江湖:0.9|手游:0.9|猫和老鼠:0.9|哈利波特:魔法觉醒:0.9|OPL常规赛:0.9|剑网3缘起:0.9|逆水寒手游:0.9|天涯明月刀:0.9|面灵气:0.9|游戏皮肤:0.9|式神:0.9|ZGDX:0.9|LF:0.9|ESG:0.9|正义:0.9|ODG:0.9|LNGM:0.9|一梦江湖:0.9|幻书启世录:0.9|孟婆:0.9|阴阳师:妖怪屋:0.9|加点:0.9|决战!平安京:0.9|地震鲶:0.9|TK:0.9|侠客行:0.9|天谕手游:0.9|教程:0.8|决战:0.8|花合战:0.8
2024-12-09 19:27:01.585 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|理想L9:1.0|理想mpv:1.0|zeekr 001:1.0|零跑汽车:1.0|何小鹏:1.0|吉利汽车:1.0|李斌:1.0|智己汽车:1.0|cybertruck:1.0|model 2:0.9|威马ex5:0.9|理想l7:0.9|哪吒汽车:0.9|高合hiphi x:0.9|威马汽车:0.9|领克:0.9|仰望:0.9|小鹏p7:0.9|高合汽车:0.9|zeekr 009:0.9|高合hiphi z:0.9|model s:0.9|model x:0.9|充电桩:0.9|零跑t03:0.9|理想l8:0.9|王自如:0.9|李想:0.9|aito:0.9|集度汽车:0.9|哪吒S:0.9|仰望u8:0.9|长城:0.9|理想l6:0.9|小鹏g9:0.9|零跑c11:0.9|自动驾驶:0.9|蔚来es6:0.9|蔚来汽车:0.9|腾势:0.9|roadster:0.9|智己ls7:0.9|问界M7:0.9|飞凡r7:0.9|零跑c01:0.9|海豹:0.9|智己:0.9|蔚来es8:0.9
{'regParam': 0.01, 'rank': 16, 'implicitPrefs': True, 'alpha': 1000.0, 'transform': 'power4'}
2024-12-10 12:03:36.804 | INFO | __main__::250 - 数据集的schema:
2024-12-10 12:05:24.089 | INFO | __main__:split_dataset:75 - 数据中总标签数:52822
2024-12-10 12:08:35.004 | INFO | __main__::280 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 16, 'coldStartStrategy': 'drop', 'implicitPrefs': True, 'alpha': 1000.0, 'numUserBlocks': 120, 'numItemBlocks': 120}
2024-12-10 12:08:35.040 | INFO | __main__::292 - 使用转换:power4 -> Column<'pow(weight, 4)'>
2024-12-10 12:45:14.598 | INFO | __main__::303 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_16.imp_True.reg_0.01.a_1000.0.it_10.tf_power4.sub_0%1%2%3%4%5%6%7%8%9
2024-12-10 12:46:57.084 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.1962106829603119
2024-12-10 12:47:05.712 | INFO | __main__:evaluate:93 - AUC = 0.8763941393791078
2024-12-10 12:47:13.408 | INFO | __main__::340 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-10 12:47:13.409 | INFO | __main__::350 - 准备物品特征...
2024-12-10 12:47:18.136 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52822, 16)
2024-12-10 12:47:18.619 | INFO | __main__::356 - 计算相似物品...
2024-12-10 12:47:33.401 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|蒋经国:1.0|袁世凯:1.0|元朝:1.0|戴笠:1.0|汪精卫:1.0|汉朝:1.0|西安事变:1.0|杨虎城:1.0|成吉思汗:1.0|明成祖:1.0|段祺瑞:1.0|杜月笙:1.0|孙殿英:1.0|汉高祖:1.0|李宗仁:1.0|秦始皇:1.0|努尔哈赤:1.0|彭德怀:1.0|孙中山:1.0|太平天国:1.0|汉武帝:1.0|唐朝:1.0|朱元璋:1.0|蒋纬国:1.0|冯玉祥:1.0|八国联军:1.0|崇祯:1.0|洪秀全:1.0|张学良:1.0|北宋:1.0|岳飞:0.9|十大元帅:0.9|明太祖:0.9|林彪:0.9|南宋:0.9|蒋介石:0.9|光绪:0.9|和珅:0.9|黄金荣:0.9|何应钦:0.9|隋朝:0.9|阎锡山:0.9|宋子文:0.9|朱德:0.9|李自成:0.9|黄埔军校:0.9|春秋战国:0.9|秦桧:0.9|唐玄宗:0.9
2024-12-10 12:47:33.406 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|英语阅读:1.0|逢考必过:1.0|学习计划:1.0|考证:1.0|选择题:1.0|判断题:1.0|押题:1.0|高频考点:1.0|英语作文:1.0|证书:1.0|答题思路:1.0|真题:1.0|作文模板:1.0|二级造价工程师:1.0|经济专业技术资格:1.0|小学教育:1.0|模拟题:1.0|方程:1.0|考研写作:1.0|准考证号:1.0|计算题:1.0|学校教育:1.0|四六级词汇:1.0|复习计划:1.0|考试大纲:1.0|刷题:1.0|商经:1.0|备考期:1.0|曲根:1.0|三国法:1.0|成绩:1.0|每日一题:1.0|有道考神:1.0|徐影:1.0|民诉:1.0|考试报名:1.0|理论法:1.0|戴鹏:1.0|财务管理:1.0|会计分录:1.0|考点:1.0|国际税收:1.0|商法:1.0|徐涛强:1.0|东奥会计在线:1.0|高级会计:1.0|考试时间:1.0|高中英语:1.0
2024-12-10 12:47:33.412 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|欧诗漫:0.9|瑞幸咖啡:0.9|冲锋衣:0.9|颐莲Rellet:0.9|茶百道:0.9|茉莉奶绿:0.9|骆驼:0.9|茉莉奶白:0.8|Burt's Bees:0.8|丝绒拿铁:0.8|瑷尔博士:0.8|喜茶:0.8|薄荷奶绿:0.8|胶原:0.8|泛红:0.8|烟酰胺:0.8|杯子:0.8|小天才电话手表:0.8|酸奶:0.8|零食:0.8|出油:0.8|敏感肌:0.8|kfc:0.8|益禾堂:0.8|运动手环:0.8|茶百道:0.8|布蕾脆脆奶芙:0.8|HBN:0.8|甜筒:0.8|芝士奶盖:0.8|A醇:0.8|森马:0.8|嘉华鲜花饼:0.8|黑色素:0.8|洞洞鞋:0.8|一点点:0.8|大耳狗:0.8|美白精华:0.8|养肤:0.8|乳茶:0.8|微博会员:0.8|隔离:0.8|卡粉:0.8|伪素颜妆:0.8|鞋花:0.8|氨基酸:0.8|春季护肤:0.8|德克士:0.8|胶原蛋白:0.8
2024-12-10 12:47:33.412 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|瑞幸咖啡:0.9|韶音:0.9|薇姿:0.9|WHOO:0.9|波司登:0.9|意面:0.8|影院:0.8|老头衫:0.8|九号:0.8|冲锋衣:0.8|特仑苏:0.8|波司登羽绒服:0.8|人头马:0.8|周大生珠宝:0.8|crocs:0.8|脆升升薯条:0.8|路铂廷(Christian Louboutin):0.8|汇源果汁:0.8|封闭:0.8|apm:0.8|甜筒:0.8|无糖茶:0.8|云南白药:0.8|向远生:0.8|欧诗漫:0.8|阿玛尼:0.8|倩碧302美白镭射瓶:0.8|卸妆品:0.8|全棉时代:0.8|硬核防晒:0.8|东京国际电影节:0.8|清扬:0.8|骆驼:0.8|春季护肤:0.8|芭比波朗(Bobbi Brown):0.8|OLAPLEX:0.8|七度空间:0.8|Hazzys:0.8|兰蔻珍藏版小黑瓶:0.8|胶原:0.8|九层妖塔:0.8|斯凯奇(Skechers):0.8|小天才电话手表:0.8|阿玛尼高定私藏香水:0.8|crocs洞洞鞋:0.8|有棵树:0.8|小小的我:0.8|伯希和:0.8|骆驼冲锋衣:0.8
2024-12-10 12:47:33.417 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|跆拳道:1.0|张可欣:0.9|自由式滑雪:0.9|冰球:0.9|德雷塞尔:0.9|马克-霍顿:0.9|张虹:0.9|李子君:0.9|隋文静:0.9|杨健:0.9|韩雨:0.9|韩聪:0.9|谌龙:0.9|唐怡萱:0.9|闫涵:0.9|何诗蓓:0.9|凯蒂-莱德基:0.9|杨浚瑄:0.9|接力:0.9|程玉洁:0.9|康怡萱:0.9|汤慕涵:0.9|余贺新:0.9|周知方:0.9|莱昂·马尔尚:0.9|李冰洁:0.9|黄雪辰:0.9|郑在成:0.9|李宁:0.9|阿合娜尔:0.9|汪雪儿:0.9|任茜:0.9|自由滑:0.9|黄宣优:0.9|滑冰:0.9|濑户大也:0.9|王诗玥:0.9|本田真凛:0.9|水球:0.9|葛楚彤:0.9|吴卿风:0.9|陈俊儿:0.9|松元克央:0.9|陈巍:0.9|安赛龙:0.9|柳鑫宇:0.9|垒球:0.9|万乐天:0.9|艾衍含:0.9
2024-12-10 12:47:33.417 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|引体向上:1.0|精神氮泵:1.0|冲浪:1.0|滑雪:0.9|杠铃:0.9|力量举:0.9|哑铃:0.9|增肌:0.9|硬拉:0.9|引体:0.9|陈康:0.9|滑雪装备:0.9|鹿晨辉:0.9|搏击:0.9|泰拳:0.9|程华清:0.9|斯巴达勇士赛:0.9|星月菩提:0.9|氮泵:0.9|单杠:0.9|卧推:0.9|三角肌:0.9|肩部训练:0.9|棒铃:0.9|背阔肌:0.9|肱二头肌:0.9|哑铃卧推:0.9|流瑜伽:0.9|胸部训练:0.9|背部训练:0.9|滑雪场:0.9|crossfit:0.9|阿诺德·施瓦辛格:0.9|侧平举:0.9|泳衣:0.9|深蹲:0.9|奥赛中国:0.9|腿屈伸:0.9|练腹肌:0.9|奥林匹亚健美大赛:0.9|新荣记:0.9|训练动作:0.9|文玩核桃:0.9|俯身划船:0.9|推胸:0.9|杠铃深蹲:0.9|枫:0.9|肱三头肌:0.9|柔术:0.9
2024-12-10 12:47:33.422 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|李昌镐:1.0|古力:1.0|连笑:1.0|常昊:1.0|朴廷桓:1.0|聂卫平:1.0|马晓春:1.0|春兰杯:1.0|崔精:1.0|芈昱廷:1.0|三星杯:1.0|姜东润:1.0|申旻埈:1.0|於之莹:1.0|杨鼎新:1.0|谢尔豪:1.0|辜梓豪:1.0|芮乃伟:1.0|李钦诚:1.0|党毅飞:1.0|丁浩:1.0|赵晨宇:1.0|范廷钰:1.0|井山裕太:1.0|许皓鋐:1.0|金明训:1.0|王星昊:1.0|李轩豪:1.0|陈耀烨:1.0|卞相壹:1.0|许家元:1.0|芝野虎丸:1.0|元晟溱:1.0|刘昌赫:1.0|时越:1.0|檀啸:1.0|俞斌:1.0|李维清:1.0|谢科:1.0|金恩持:1.0|许嘉阳:1.0|周泓余:1.0|刘宇航:1.0|廖元赫:1.0|申真谞:1.0|陶欣然:1.0|屠晓宇:1.0|柁嘉熹:1.0|彭立尧:1.0
2024-12-10 12:47:33.426 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|ATP:1.0|卡洛斯·阿尔卡拉斯:0.9|扬尼克-辛纳:0.9|上海大师赛:0.9|商竣程:0.9|费德勒:0.9|吴易昺:0.9|布云朝克特:0.9|安娜·伊万诺维奇:0.9|大坂直美:0.9|张康阳:0.9|斯瓦泰克:0.9|帆船帆板:0.9|罗兰加洛斯:0.9|世俱杯:0.9|佩古拉:0.9|法网:0.9|NHL:0.9|欧冠冠军:0.9|汤姆-布雷迪:0.9|王雅繁:0.9|黄雪辰:0.9|克拉拉·马特奥:0.9|劳塔罗-马丁内斯:0.9|莱万多夫斯基:0.9|乔-伯罗:0.9|卡洛斯·贝拉:0.9|多特蒙德:0.9|纳瓦罗:0.9|巴尔的摩乌鸦:0.9|汤媛媛:0.9|恩佐-费尔南德斯:0.9|马拉多纳:0.9|格列兹曼:0.9|马德里竞技:0.9|堪萨斯城酋长:0.9|诺伊尔:0.9|德布劳内:0.9|迪巴拉:0.9|英式橄榄球:0.9|旧金山49人:0.9|马霍姆斯:0.9|布法罗比尔:0.9|哈里凯恩:0.9|超级碗:0.9|踢球手:0.9|多米尼克蒂姆:0.9|卢布列夫:0.9
2024-12-10 12:47:33.430 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|Angelababy:1.0|迪丽热巴:1.0|鞠婧祎:1.0|虞书欣:1.0|白鹿:1.0|赵今麦:1.0|黄晓明:1.0|刘亦菲:1.0|杨幂:1.0|Lisa:1.0|赵丽颖:1.0|刘浩存:1.0|鹿晗:1.0|关晓彤:1.0|明星盘点:1.0|贾玲:1.0|黄子韬:1.0|王鹤棣:1.0|白敬亭:1.0|田曦薇:1.0|移动手机设备:1.0|古力娜扎:1.0|苹果:1.0|王俊凯:1.0|张若昀:1.0|表情包集锦:0.9|萌娃日常:0.9|可爱萌娃:0.9|日常记录:0.9|张雨绮:0.9|易烊千玺:0.9|网友神评论:0.9|减肥:0.9|张杰:0.9|妆容:0.9|国庆节:0.9|欧阳娜娜:0.9|社会百态:0.9|金晨:0.9|吴谨言:0.9|壁纸插画:0.9|迷惑行为:0.9|黄景瑜:0.9|直播:0.9|杨超越:0.9|吴磊:0.9|秦霄贤:0.9|章若楠:0.9|情感语录:0.9
2024-12-10 12:47:33.434 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|萨博:0.9|波特卡斯·D·艾斯:0.9|山治:0.9|尾田荣一郎:0.9|乌索普:0.9|流川枫:0.9|海贼王 真人版:0.9|航海王:红发歌姬:0.9|罗布·路奇:0.9|娜美:0.9|罗罗诺亚·索隆:0.9|马尔科:0.9|航海王:红发歌姬:0.9|樱木花道:0.9|哈利·波特与阿兹卡班的囚徒:0.9|和之国:0.9|田中真弓:0.9|巴基:0.9|佩罗娜:0.9|特拉法尔加·罗:0.9|香克斯:0.9|初代吸血鬼:0.9|哈利·波特与凤凰社:0.9|井上雄彦:0.9|灌篮高手:0.9|哈利·波特与密室:0.9|斯摩格:0.9|乌塔:0.9|甚平:0.9|沙·克洛克达尔:0.9|加菲猫:0.9|哈利·波特与火焰杯:0.9|香吉士:0.9|宫崎骏:0.9|吉卜力:0.9|你想活出怎样的人生:0.9|桃之助:0.9|德雷斯罗萨:0.9|大和:0.9|红发海贼团:0.9|库赞:0.9|花生漫画:0.9|妮可·罗宾:0.9|基德:0.9|The First Slam Dunk:0.9|克比:0.9|中国美术学院:0.9|死神:0.9|山口胜平:0.9
2024-12-10 12:47:33.434 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|行尸走肉:0.9|超级龙珠英雄:0.9|火影忍者疾风传:0.8|阿迪达斯:0.8|龙珠超:0.8|海贼王剧场版:0.8|超龙珠英雄:0.8|运动品牌:0.8|后卫:0.8|刘语熙:0.8|佩林:0.8|龙珠英雄:0.8|天下足球:0.8|Li-Ning:0.8|海贼王:0.8|行尸走肉:生存者:0.8|本泽马:0.8|皇室战争:0.8|马文-威廉姆斯:0.8|卡尔:0.8|跑跑卡丁车:0.8|龙珠z:0.8|under armour:0.8|蜘蛛侠:英雄无归:0.8|绿茵信仰:0.8|Reebok锐步:0.8|名宿:0.8|洛基:0.8|万宝路(Marlboro):0.8|NBA 2K20:0.8|NBA2KOL2:0.8|埃登-阿扎尔:0.8|速度与激情9:0.8|火影忍者:0.8|蜘蛛侠3:0.8|鸟山明:0.8|哥斯拉:怪兽之王:0.8|动漫图片:0.8|FIFA 20:0.8|黑寡妇:0.8|绿箭侠:0.8|刘语熙:0.8|七龙珠:0.8|毒液2:0.8|航海王:红发歌姬:0.8|尾田荣一郎:0.8|龙珠:0.8|实况足球:0.8|afc:0.8
2024-12-10 12:47:33.434 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|The First Slam Dunk:1.0|井上雄彦:1.0|樱木花道:1.0|流川枫:1.0|三井寿:1.0|仙道彰:1.0|宫城良田:1.0|仙流:1.0|深津一成:1.0|泽北荣治:1.0|牧绅一:0.9|青之芦苇:0.9|水户洋平:0.9|蓦然回首:0.9|你想活出怎样的人生:0.9|红猪:0.9|乙一:0.9|幽游白书:0.9|特拉法尔加·罗:0.9|柯拉松:0.9|米津玄师:0.9|山口胜平:0.9|天空之城:0.9|浪客剑心:0.9|阿散井恋次:0.9|松山研一:0.9|藤本树:0.9|朽木白哉:0.9|秒速五厘米:0.9|白色巨塔:0.9|娜娜明:0.9|吉卜力:0.9|葛力姆乔:0.9|香吉士:0.9|周刊少年Jump:0.9|蓝箱:0.9|古谷彻:0.9|异世界失格:0.9|宇髄天元:0.9|当哒当:0.9|乱马1/2 两个小茜:0.9|非自然死亡:0.9|京极夏彦:0.9|黑崎一护:0.9|朽木露琪亚:0.9|安藤政信:0.9|呪术廻戦:0.9|罗罗诺亚·索隆:0.9|中村悠一:0.9
2024-12-10 12:47:33.439 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|粉底膏:1.0|小棕瓶:1.0|保湿面膜:1.0|睫毛打底:1.0|眼线液:1.0|遮瑕膏:1.0|混合皮:1.0|混油:1.0|黛珂:1.0|镜面唇釉:1.0|粉底霜:1.0|肌底液:1.0|清洁面膜:1.0|诗佩妮Spenny:1.0|眼线液笔:1.0|医美面膜:1.0|粉霜:1.0|妆前:1.0|蜜粉:1.0|染发剂:1.0|液体眼影:1.0|SUQQU:1.0|红血丝:1.0|单色眼影:1.0|化妆棉:1.0|蜜粉饼:1.0|眉粉:1.0|粉底刷:1.0|唇膏笔:1.0|眼线胶笔:1.0|露华浓:1.0|艾杜纱:1.0|唇色:1.0|拉杜丽:1.0|卸妆水:1.0|Urban Decay:1.0|眉刷:1.0|安瓶:1.0|眼影膏:1.0|眼影粉:1.0|悦诗风吟:1.0|科颜氏:1.0|护理液:1.0|精华水:1.0|兰芝:1.0|隔离霜:1.0|卡拉泡泡(colourpop):1.0|提亮肤色:1.0|美宝莲:0.9
2024-12-10 12:47:33.443 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|知否知否应是绿肥红瘦:1.0|还珠格格:0.9|步步惊心:0.9|蒋欣:0.9|如懿传:0.9|三十而已:0.9|霍建华:0.9|欢乐颂:0.8|蓝盈莹:0.8|情深深雨濛濛:0.8|吴倩:0.8|林心如:0.8|宋慧乔:0.8|冯绍峰:0.8|清平乐:0.8|陈建斌:0.8|周迅:0.8|三生三世十里桃花:0.8|霍思燕:0.8|请回答1988:0.8|窦骁:0.8|杜江:0.8|黄圣依:0.8|陈岚(向太):0.8|蔡少芬:0.8|伊能静:0.8|刘恺威:0.8|张檬:0.8|吴奇隆:0.8|金莎:0.8|林依晨:0.8|美人心计:0.7|孙莉:0.7|钟丽缇:0.7|张嘉倪:0.7|宋仲基:0.7|爸爸去哪儿:0.7|罗晋:0.7|司藤:0.7|董洁:0.7|安以轩:0.7|贾静雯:0.7|袁咏仪:0.7|具俊晔:0.7|何超莲:0.7|你是我的荣耀:0.7|幸福三重奏:0.7|李湘:0.7|甜馨:0.7
2024-12-10 12:47:33.446 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|金莎:1.0|孙莉:1.0|杜江:1.0|钟丽缇:1.0|霍思燕:1.0|窦骁:1.0|应采儿:0.9|张嘉倪:0.9|陈岚(向太):0.9|吴尊:0.9|幸福三重奏:0.9|刘恺威:0.9|张檬:0.9|何超莲:0.9|王子文:0.9|甜馨:0.9|贾静雯:0.9|李承铉:0.9|袁咏仪:0.9|陈小春:0.9|爸爸去哪儿:0.9|王丽坤:0.9|安以轩:0.9|林依晨:0.9|陆毅:0.9|蔡少芬:0.9|霍建华:0.9|妻子的浪漫旅行:0.9|吴倩:0.9|乔欣:0.9|王岳伦:0.9|颖儿:0.9|蓝盈莹:0.9|买超:0.9|黄奕:0.9|袁弘:0.9|张歆艺:0.9|吴奇隆:0.9|朱丹:0.9|伊能静:0.9|秋瓷炫:0.9|秦昊:0.9|张智霖:0.9|林心如:0.9|田亮:0.9|李湘:0.9|鲍蕾:0.9|李敏镐:0.9|钟欣潼:0.9
2024-12-10 12:47:33.454 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:1.0|林原惠美:1.0|艾伦:1.0|利威尔:1.0|JOJO的奇妙冒险:石之海:1.0|电锯人2:1.0|呪术廻戦:1.0|富坚义博:1.0|三笠:1.0|御坂美琴:1.0|鲁邦三世:1.0|兵长:1.0|名侦探柯南:1.0|炎拳:1.0|朽木露琪亚:1.0|藤本树:1.0|荒木飞吕彦:1.0|早川秋:1.0|吉田步美:1.0|安娜苏:1.0|古谷彻:1.0|网代慎平:1.0|波奇塔:1.0|高木:1.0|心理测量者:1.0|空条徐伦:1.0|电锯人X电钻人:1.0|约定的梦幻岛:0.9|贝尔摩德:0.9|艾笠:0.9|少年JUMP:0.9|三鹰朝:0.9|名侦探柯南:犯人犯泽先生:0.9|野良神:0.9|电次:0.9|飙马野郎:0.9|宫野志保:0.9|高佐:0.9|猎人:0.9|银神:0.9|冰海战记:0.9|朽木白哉:0.9|佐藤美和子:0.9|滑头鬼之孙:0.9|夏日重现:0.9|圣少女:0.9|琴酒:0.9|少年侦探团:0.9|食戟之灵:0.9
2024-12-10 12:47:33.458 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|向佐:1.0|郭晶晶:1.0|汪小菲:1.0|大S:0.9|郭碧婷:0.9|小s:0.9|孙俪:0.9|高圆圆:0.9|倪妮:0.9|佟丽娅:0.9|范冰冰:0.9|张柏芝:0.9|张馨予:0.9|林志玲:0.9|李湘:0.9|姚晨:0.9|陈妍希:0.9|伊能静:0.9|刘涛:0.9|谢霆锋:0.9|昆凌:0.9|具俊晔:0.9|汪峰:0.9|林心如:0.9|马思纯:0.9|宋佳:0.9|周迅:0.9|周冬雨:0.9|舒淇:0.9|江疏影:0.9|陈晓:0.9|马伊琍:0.9|张兰:0.9|胡歌:0.9|黄磊:0.9|景甜:0.9|刘诗诗:0.9|明星穿搭:0.9|唐嫣:0.9|朱珠:0.9|钟楚曦:0.8|金星:0.8|王思聪:0.8|张钧甯:0.8|刘德华:0.8|王子文:0.8|戚薇:0.8|贾静雯:0.8|玫瑰的故事:0.8
2024-12-10 12:47:33.462 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|网易游戏:1.0|徐清林:0.9|决战!平安京:0.9|哈利波特:魔法觉醒:0.9|糖豆人:终极淘汰赛:0.9|守望先锋:0.9|任天堂Switch:0.8|最终幻想14:0.8|NS:0.8|式神:0.8|剑侠情缘3:0.8|崩坏3:0.8|明日方舟:0.8|坎特伯雷公主与骑士唤醒冠军之剑的奇幻冒险:0.8|妙奇星球:0.8|环行旅舍:0.8|枪神纪:0.8|创造与魔法:0.8|剑侠情缘网络版:0.8|武林争霸:0.8|剑网3:指尖江湖:0.8|零号任务:0.8|附魔:0.8|枪神纪:0.8|龙之谷:0.8|鬼谷八荒:0.8|跃迁旅人:0.8|Party Animals:0.8|卡通农场:0.8|永恒之塔:0.8|暴雪:0.8|彩虹岛:0.8|小森灵:0.8|猫之城:0.8|光遇:0.8|轨迹:0.8|奇妙之旅:0.8|剑网3缘起:0.8|边境之旅:0.8|天谕:0.8|惊悚乐园:0.8|最终幻想:0.8|爆炒江湖:0.8|动物派对:0.8|梦境侦探:0.8|克鲁赛德战记:0.8|血族:0.8|剑灵:0.8
2024-12-10 12:47:33.465 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|理想L9:1.0|理想mpv:1.0|zeekr 001:0.9|蔚来汽车:0.9|aito:0.9|周鸿祎:0.9|领克:0.9|仰望:0.9|五菱:0.9|吉利汽车:0.9|问界M7:0.9|余承东:0.9|华为:0.9|腾势:0.9|cybertruck:0.9|本田:0.9|小鹏汽车:0.9|仰望u8:0.9|丰田:0.8|路虎:0.8|蒂姆·库克:0.8|智己汽车:0.8|911:0.8|比特币:0.8|坦克:0.8|理想l7:0.8|零跑汽车:0.8|折叠屏:0.8|凯迪拉克:0.8|鸿蒙智行:0.8|沃尔沃:0.8|红旗:0.8|理想l6:0.8|库里南:0.8|迈巴赫:0.8|宝马5系:0.8|大众:0.8|法拉利:0.8|三星:0.8|Apple Watch:0.8|劳斯莱斯:0.8|折叠手机:0.8|zeekr 009:0.8|贾跃亭:0.8|芯片:0.8|充电桩:0.8|特斯拉:0.8|保时捷:0.8
{'regParam': 0.01, 'rank': 10, 'implicitPrefs': True, 'alpha': 500.0, 'transform': 'power4'}
2024-12-09 17:54:56.222 | INFO | __main__::250 - 数据集的schema:
2024-12-09 17:57:44.411 | INFO | __main__:split_dataset:75 - 数据中总标签数:52822
2024-12-09 18:02:33.428 | INFO | __main__::280 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 10, 'coldStartStrategy': 'drop', 'implicitPrefs': True, 'alpha': 500.0, 'numUserBlocks': 60, 'numItemBlocks': 60}
2024-12-09 18:02:33.468 | INFO | __main__::292 - 使用转换:power4 -> Column<'pow(weight, 4)'>
2024-12-09 18:39:29.440 | INFO | __main__::303 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_10.imp_True.reg_0.01.a_500.0.it_10.tf_power4.sub_0%1%2%3%4%5%6%7%8%9
2024-12-09 18:42:54.094 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.1977529484829076
2024-12-09 18:43:11.455 | INFO | __main__:evaluate:93 - AUC = 0.8708332078319747
2024-12-09 18:43:16.618 | INFO | __main__::340 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-09 18:43:16.618 | INFO | __main__::350 - 准备物品特征...
2024-12-09 18:43:20.994 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52822, 10)
2024-12-09 18:43:21.328 | INFO | __main__::356 - 计算相似物品...
2024-12-09 18:43:50.147 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|胡锦涛:1.0|段祺瑞:1.0|冯玉祥:1.0|八国联军:1.0|袁世凯:1.0|成吉思汗:1.0|戴笠:1.0|西安事变:1.0|林彪:1.0|十大元帅:1.0|江泽民:1.0|蒋经国:1.0|崇祯:1.0|汪精卫:1.0|杨虎城:1.0|抗日:1.0|阎锡山:1.0|长征:1.0|解放战争:1.0|军统:1.0|李宗仁:1.0|元朝:1.0|黄金荣:1.0|李自成:1.0|老视频:1.0|洪秀全:1.0|第二次世界大战:1.0|明成祖:1.0|许世友:1.0|吴佩孚:1.0|朱元璋:1.0|朝鲜战争:1.0|汉朝:1.0|黄埔军校:1.0|粟裕:1.0|战争史:1.0|蒋纬国:1.0|马步芳:1.0|二战:1.0|汉高祖:1.0|原子弹:1.0|白崇禧:1.0|孙中山:1.0|希特勒:1.0|杜月笙:1.0|北洋水师:1.0|彭德怀:1.0|北宋:1.0|安禄山:1.0
2024-12-09 18:43:50.161 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|押题:1.0|白斌:1.0|真题:1.0|模拟题:1.0|答题思路:1.0|复习计划:1.0|三国法:1.0|商经:1.0|理论法:1.0|刷题:1.0|选择题:1.0|鄢梦萱:1.0|民诉:1.0|杜洪波:1.0|李晗:1.0|行政法:1.0|戴鹏:1.0|商法:1.0|刑诉:1.0|每日一题:1.0|考点:1.0|逢考必过:1.0|柏浪涛:1.0|判断题:1.0|李劲松:1.0|左宁:1.0|民商法:1.0|考前冲刺:1.0|孟献贵:1.0|民刑:1.0|张宇琛:1.0|机构:1.0|众合法考:1.0|考前焦虑:1.0|厚大法考:1.0|公司法:1.0|行政诉讼法:1.0|国际法:1.0|考试大纲:1.0|瑞达法考:1.0|华研法硕:1.0|学习计划:1.0|方鹏:1.0|民诉法:1.0|刑法:1.0|行政管理:1.0|宪法学:1.0|宪法:1.0
2024-12-09 18:43:50.173 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|薇诺娜精华液:1.0|丝绒拿铁:1.0|RARE:0.9|欧诗漫:0.9|夸克网盘:0.9|gxg:0.9|祛黑头:0.9|肥牛卷:0.9|空刻意面:0.9|茉莉奶白:0.9|欧舒丹:0.9|哈根达斯:0.9|帕莎眼镜:0.9|春卷:0.9|卡诗:0.9|云南白药:0.9|粉刺:0.9|丝塔芙:0.9|粉刺针:0.9|丝可:0.9|茉莉绿茶:0.9|痘痘:0.9|OLAPLEX:0.9|馥蕾诗红茶精华水:0.9|卡诗护发精油:0.9|多特倍斯:0.9|珂拉琪:0.9|护发:0.9|可露丽:0.9|高颅顶:0.9|欧珑:0.9|紫燕百味鸡:0.9|黑头粉刺:0.9|黑皮:0.9|脸部清洁:0.9|珂润洗面奶:0.9|杯子:0.9|无语WUYU:0.9|三得利:0.9|洗护:0.9|雀巢:0.9|油皮亲妈:0.9|护舒宝:0.9|吹风机:0.9|头部:0.9|波司登:0.9|茉莉奶绿:0.9|春季护肤:0.9|乳茶:0.9
2024-12-09 18:43:50.173 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|剪映:0.9|跳舞:0.9|尹涛:0.9|营销号:0.9|霓虹甜心:0.9|睿士ELLE MEN:0.9|JC:0.9|暗河传:0.9|国色芳华:0.9|全棉时代:0.9|钱多多:0.9|任辛:0.9|浪琴(Longines):0.9|莫欺少年穷:0.9|尚品宅配:0.9|方思哲:0.9|未完待续:0.9|戴比尔斯:0.9|漠风吟:0.9|辛光:0.9|次次:0.9|亚洲电影大奖:0.9|浪琴康卡斯:0.9|追风:0.9|梦境:0.9|七夜雪:0.9|易小雅:0.9|东方淮竹:0.9|出圈:0.9|伊菲丹超级面膜:0.9|apm:0.9|播放量:0.9|果子熟了:0.9|李同光:0.9|叶冰:0.9|周木楠:0.9|伊菲丹:0.9|艺人:0.9|叶平安:0.9|皇甫令歌:0.9|赵晋:0.9|刘润铭:0.9|张黎:0.9|科目三:0.9|任如意:0.9|李亦非:0.9|曾曾:0.9|李俊逸:0.9|邱饼:0.9
2024-12-09 18:43:50.180 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|斯巴达勇士赛:1.0|冲浪:1.0|精神氮泵:1.0|阿诺德·施瓦辛格:1.0|陈康:0.9|理光GR3:0.9|氮泵:0.9|理光 GR:0.9|鹿晨辉:0.9|清新甜美风:0.9|四季酒店:0.9|肱二头肌:0.9|肚皮舞:0.9|手表:0.9|胶片摄影:0.9|滑雪装备:0.9|引体向上:0.9|胶片相机:0.9|增肌:0.9|杠铃:0.9|时装模特:0.9|泳衣:0.9|舞韵瑜伽:0.9|肱三头肌:0.9|张沛勉:0.9|素人街拍:0.9|威士忌:0.9|奥赛中国:0.9|时尚摄影:0.9|硬拉:0.9|奥林匹亚健美大赛:0.9|男士发型:0.9|理光GR3x:0.9|商业摄影:0.9|引体:0.9|力量举:0.9|中国健美协会:0.9|柯达(Kodak):0.9|程华清:0.9|越野跑:0.9|三角肌:0.9|减肥瑜伽:0.9|佳明:0.9|哑铃卧推:0.9|跑鞋:0.9|哑铃:0.9|健身赛事:0.9|徽菜:0.9|肩部训练:0.9
2024-12-09 18:43:50.180 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|冰球:1.0|刘少林:1.0|孙龙:1.0|沈锡希:1.0|宁忠岩:1.0|中国短道速滑队:1.0|李文龙:1.0|李子君:1.0|任子威:1.0|刘少昂:1.0|范忆琳:1.0|金建宇:1.0|范可新:1.0|自由体操:1.0|管晨辰:1.0|安贤洙:1.0|齐广璞:1.0|钟宇晨:1.0|跳马:1.0|高低杠:1.0|陈虹伊:1.0|韩雨:1.0|跆拳道:1.0|唐茜靖:1.0|平衡木:1.0|韦筱圆:1.0|短道速滑世界杯:1.0|冰壶:1.0|崔敏静:1.0|金健優:1.0|王仪涵:1.0|芦玉菲:1.0|张楚桐:1.0|林孝俊:1.0|速度滑冰:1.0|曲春雨:1.0|刘冠逸:1.0|高亭宇:1.0|李坤:1.0|双杠:1.0|黄大宪:1.0|德雷塞尔:1.0|体操世锦赛:1.0|刘婷婷:1.0|朱祎玎:1.0|鞍马:1.0|吕修诚:1.0|韩天宇:1.0|商春松:1.0
2024-12-09 18:43:50.189 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|李昌镐:1.0|古力:1.0|申旻埈:1.0|吴侑珍:1.0|连笑:1.0|刘昌赫:1.0|姜东润:1.0|许家元:1.0|春兰杯:1.0|刘宇航:1.0|崔精:1.0|陈耀烨:1.0|藤泽里菜:1.0|芮乃伟:1.0|金恩持:1.0|马晓春:1.0|廖元赫:1.0|李钦诚:1.0|井山裕太:1.0|上野爱咲美:1.0|聂卫平:1.0|於之莹:1.0|许皓鋐:1.0|赵晨宇:1.0|檀啸:1.0|俞斌:1.0|芝野虎丸:1.0|范胤:1.0|金禹丞:1.0|许嘉阳:1.0|周泓余:1.0|李维清:1.0|叶长欣:1.0|金明训:1.0|陶欣然:1.0|三星杯:1.0|李赫:1.0|陆敏全:1.0|谢尔豪:1.0|王世一:1.0|常昊:1.0|时越:1.0|屠晓宇:1.0|范廷钰:1.0|芈昱廷:1.0|夏晨琨:1.0|朴廷桓:1.0|彭立尧:1.0|黄云嵩:1.0
2024-12-09 18:43:50.198 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|费德勒:1.0|ATP:1.0|多米尼克蒂姆:1.0|费雷尔:1.0|刘浩:1.0|瓦林卡:1.0|特松加:1.0|安娜·伊万诺维奇:1.0|萨芬:1.0|伯蒂奇:1.0|上海大师赛:1.0|加斯奎特:1.0|花剑:1.0|重剑:1.0|水球:1.0|德雷塞尔:1.0|石宇奇:1.0|卡洛斯·阿尔卡拉斯:1.0|马克-霍顿:1.0|亚历山大-兹维列夫:0.9|安洗莹:0.9|扬尼克-辛纳:0.9|菲尔普斯:0.9|上海网球大师赛:0.9|史蒂夫-诺瓦克:0.9|罗兰加洛斯:0.9|郑在成:0.9|现代五项:0.9|陈雨菲:0.9|黄东萍:0.9|德尔波特罗:0.9|凯蒂-莱德基:0.9|何冰娇:0.9|贝尔滕斯:0.9|李冰洁:0.9|叶诗文:0.9|蛙泳:0.9|李诗沣:0.9|卡斯珀-鲁德:0.9|中国羽毛球公开赛:0.9|塞瓦斯托娃:0.9|罗杰斯杯:0.9|何诗蓓:0.9|法网:0.9|斯蒂芬斯:0.9|麦迪逊-凯斯:0.9|蝶泳:0.9|冰壶:0.9
2024-12-09 18:43:50.206 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|Angelababy:1.0|迪丽热巴:1.0|赵今麦:1.0|鞠婧祎:1.0|虞书欣:1.0|杨幂:1.0|黄晓明:1.0|黄子韬:1.0|田曦薇:1.0|白鹿:1.0|刘浩存:1.0|鹿晗:1.0|刘亦菲:1.0|秦霄贤:0.9|关晓彤:0.9|孙颖莎:0.9|徐艺洋:0.9|张杰:0.9|王鹤棣:0.9|白敬亭:0.9|壁纸插画:0.9|章若楠:0.9|贾玲:0.9|Lisa:0.9|古力娜扎:0.9|王楚钦:0.9|可爱萌娃:0.9|萌娃日常:0.9|明星盘点:0.9|林更新:0.9|赵丽颖:0.9|张若昀:0.9|张婧仪:0.9|韩安冉:0.9|张雨绮:0.9|王诗龄:0.9|减肥:0.9|宋轶:0.9|易烊千玺:0.9|薛之谦:0.9|李佳琦:0.9|表情包集锦:0.9|少年感帅哥:0.9|全红婵:0.9|王俊凯:0.9|吴谨言:0.9|美甲分享:0.9|金晨:0.9|移动手机设备:0.9
2024-12-09 18:43:50.215 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|月光骑士:1.0|x战警:1.0|夜魔侠:1.0|终极蜘蛛侠:1.0|乔·曼根尼罗:1.0|蜘蛛侠:纵横宇宙:1.0|星球大战:1.0|曼达洛人:1.0|哈莉·奎茵:1.0|猫眼三姐妹:1.0|月光骑士:1.0|蜘蛛侠:超越宇宙:1.0|蝙蝠侠:1.0|The First Slam Dunk:1.0|星球大战:1.0|侦探漫画:1.0|超人:0.9|北条司:0.9|one ok rock:0.9|金刚狼3:殊死一战:0.9|tumblr:0.9|MY FIRST STORY:0.9|金刚狼:0.9|新垣结衣:0.9|最后生还者:0.9|井上雄彦:0.9|指环王:护戒使者:0.9|终结者2:审判日:0.9|新蝙蝠侠:0.9|X战警:第一战:0.9|SPYAIR:0.9|流媒体:0.9|圣斗士星矢:0.9|马戏之王:0.9|亨利·卡维尔:0.9|克里斯·埃文斯:0.9|美国队长2:0.9|灌篮高手:0.9|山田孝之:0.9|车田正美:0.9|舞曲:0.9|瑞安·雷诺兹:0.9|外星也难民:0.9|洛基:0.9|休·杰克曼:0.9|基努·里维斯:0.9|死侍:0.9|旺达幻视:0.9|超凡蜘蛛侠2:0.9
2024-12-09 18:43:50.216 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|德维恩-韦德:0.9|布洛克·莱斯纳:0.9|沙奎尔-奥尼尔:0.9|NBA 2K20:0.9|林书豪:0.9|超级龙珠英雄:0.9|詹姆斯-哈登:0.9|塞斯·罗林斯:0.9|NBA2KOL2:0.9|行尸走肉:0.9|凯里-欧文:0.9|七龙珠:0.9|火影忍者疾风传:0.9|约翰·塞纳:0.9|凯文-杜兰特:0.9|金州勇士队:0.9|皇室战争:0.9|姚明:0.9|德怀特-霍华德:0.9|行尸走肉:生存者:0.9|布鲁克林篮网队:0.9|多多自走棋:0.9|NBA季后赛:0.9|萨米辛:0.9|拉塞尔-威斯布鲁克:0.9|保罗-海曼:0.9|扬尼斯-阿德托昆博:0.9|天秀杯:0.9|H1Z1:0.9|迈阿密热火队:0.9|罗门伦斯:0.9|街头篮球:0.9|fly100%:0.9|放置奇兵:0.9|巴比-莱斯利:0.9|魔兽争霸3:0.9|WWE:0.9|斯蒂芬-库里:0.9|龙珠超:0.9|自走棋:0.9|安东尼-戴维斯:0.9|AJ·斯泰尔斯:0.9|希莫斯:0.9|跑跑卡丁车:0.9|马丁·盖瑞斯:0.9|科迪-罗兹:0.9|超龙珠英雄:0.9|迈克尔·乔丹:0.9|莫斯科震中杯:0.9
2024-12-09 18:43:50.216 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|井上雄彦:1.0|The First Slam Dunk:1.0|樱木花道:1.0|风间俊介:1.0|西川贵教:1.0|坂本昌行:1.0|冈田准一:1.0|长野博:1.0|流川枫:1.0|星野源:1.0|森田刚:1.0|金田一:1.0|非自然死亡:1.0|村上信五:1.0|SPYAIR:1.0|三井寿:1.0|九龙城寨:1.0|横山裕:1.0|丸山隆平:1.0|金刚狼:1.0|死侍:1.0|渡边圭祐:1.0|深津一成:1.0|坂本真绫:1.0|Kura:1.0|桐山涟:1.0|宫城良田:1.0|ARASHI:1.0|吉田拓郎:1.0|仙道彰:1.0|白滨亚岚:1.0|安田章大:1.0|GACKT:1.0|井口理:1.0|大仓忠义:1.0|堺雅人:1.0|新井和辉:1.0|及川光博:1.0|泽北荣治:1.0|增田贵久:1.0|木村达成:1.0|机动搜查队404:1.0|Official髭男dism:1.0|Hey Say JUMP:1.0|yasu:1.0|登坂广臣:1.0|濑户利树:1.0|King Gnu:1.0|関ジャニ∞:1.0
2024-12-09 18:43:50.229 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|医美面膜:1.0|粉底霜:1.0|保湿面膜:1.0|水光肌护理:1.0|精华水:1.0|红血丝:1.0|清洁面膜:1.0|粉底膏:1.0|混合皮:1.0|护理液:1.0|睫毛打底:1.0|悦诗风吟水乳:1.0|小棕瓶:1.0|染发剂:1.0|韩熙贞:1.0|美宝莲:1.0|眼线液:1.0|化妆棉:1.0|眉刷:1.0|肌底液:1.0|魅丝蔻:1.0|悦诗风吟:1.0|遮瑕膏:1.0|艾杜纱:1.0|colorkey小黑镜唇釉:1.0|面膜纸:1.0|混油:1.0|美即:1.0|诗佩妮Spenny:1.0|悠莱:1.0|卸妆水:1.0|眼唇卸妆液:1.0|卸妆乳:1.0|镜面唇釉:1.0|苏菲娜:1.0|菲鹿儿focallure:1.0|兰芝:1.0|洁面皂:1.0|科颜氏金盏花爽肤水:1.0|黛珂:1.0|拉杜丽:1.0|潘达Panda.W:1.0|雅诗兰黛肌透修护眼部精华霜:1.0|卸妆巾:1.0|美容液:1.0|稚优泉CHIOTURE:1.0|化妆镜:1.0|隔离霜:1.0|防晒喷雾:1.0
2024-12-09 18:43:50.242 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|蒋欣:1.0|还珠格格:1.0|知否知否应是绿肥红瘦:1.0|三十而已:0.9|情深深雨濛濛:0.9|步步惊心:0.9|如懿传:0.9|霍建华:0.9|欢乐颂:0.9|陈建斌:0.9|周迅:0.9|爸爸去哪儿:0.9|恶作剧之吻:0.9|美人心计:0.9|金粉世家:0.9|我的前半生:0.9|蜗居:0.9|上错花轿嫁对郎:0.9|蔡少芬:0.9|何书桓:0.9|回家的诱惑:0.9|新白娘子传奇:0.9|裙下臣:0.9|还珠格格第三部:0.9|刘荷娜:0.8|蓝盈莹:0.8|晴儿:0.8|放羊的星星:0.8|新还珠格格:0.8|梅婷:0.8|斓曦:0.8|小燕子:0.8|三生三世十里桃花:0.8|顺产:0.8|袁湘琴:0.8|剖腹产:0.8|孙莉:0.8|冯绍峰:0.8|林心如:0.8|杜江:0.8|黄圣依:0.8|清平乐:0.8|张檬:0.8|奚梦瑶:0.8|吴倩:0.8|请回答1988:0.8|赵雅芝:0.8|幸福三重奏:0.8|霍尊:0.8
2024-12-09 18:43:50.252 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|杜江:1.0|孙莉:1.0|蔡少芬:1.0|应采儿:1.0|霍思燕:1.0|窦骁:1.0|钟丽缇:1.0|袁咏仪:1.0|刘恺威:1.0|吴尊:1.0|贾静雯:1.0|幸福三重奏:1.0|金莎:1.0|麦迪娜:1.0|袁弘:0.9|霍建华:0.9|刘芸:0.9|陈岚(向太):0.9|李承铉:0.9|张歆艺:0.9|陈小春:0.9|陆毅:0.9|爸爸去哪儿:0.9|姜潮:0.9|王子文:0.9|朱丹:0.9|林心如:0.9|安以轩:0.9|邓莎:0.9|鲍蕾:0.9|张嘉倪:0.9|张檬:0.9|田亮:0.9|罗晋:0.9|甜馨:0.9|颖儿:0.9|赵又廷:0.9|王丽坤:0.9|林依晨:0.9|妻子的浪漫旅行:0.9|张智霖:0.9|再见爱人:0.9|蓝盈莹:0.9|何超莲:0.9|刘涛:0.9|伊能静:0.9|钟欣潼:0.9|林志颖:0.9|王岳伦:0.9
2024-12-09 18:43:50.270 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|巨人:1.0|荒木飞吕彦:1.0|JOJO的奇妙冒险:石之海:1.0|心理测量者:1.0|利威尔:1.0|朽木白哉:1.0|山田尚子:1.0|朽木露琪亚:1.0|鲁邦三世:1.0|石川界人:1.0|伊东歌词太郎:1.0|岸本齐史:1.0|乱马1/2 两个小茜:1.0|樱井孝宏:1.0|葛力姆乔:1.0|黄金神威:1.0|全职猎人:1.0|呪术廻戦:1.0|富坚义博:1.0|阿散井恋次:1.0|电锯人2:1.0|amazarashi:1.0|增田俊树:1.0|小野贤章:1.0|绿川光:1.0|圣少女:1.0|花江夏树:1.0|约定的梦幻岛:1.0|猎人:1.0|艾伦:1.0|神谷浩史:1.0|异兽魔都:1.0|冰海战记:1.0|浪客剑心:1.0|月刊少女野崎君:1.0|斉藤壮馬:1.0|小野大辅:1.0|火野映司:1.0|安娜苏:1.0|榎木淳弥:1.0|jojo的奇妙冒险 黄金之风:1.0|春野樱:1.0|网代慎平:1.0|梶裕贵:1.0|极乐迪斯科:1.0|井上织姬:1.0|古谷彻:1.0|平家物语:1.0|福山润:1.0
2024-12-09 18:43:50.280 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|向佐:1.0|汪小菲:1.0|郭碧婷:0.9|小s:0.9|大S:0.9|郭晶晶:0.9|高圆圆:0.9|张柏芝:0.9|孙俪:0.9|倪妮:0.9|汪峰:0.9|伊能静:0.9|周冬雨:0.9|具俊晔:0.9|张馨予:0.9|佟丽娅:0.9|章泽天:0.9|李湘:0.9|张兰:0.9|陈妍希:0.9|朱珠:0.9|林志玲:0.9|范冰冰:0.9|明星穿搭:0.9|姚晨:0.9|钟楚曦:0.9|陈乔恩:0.9|刘涛:0.9|秦岚:0.9|何猷君:0.9|昆凌:0.9|黄磊:0.9|宋佳:0.9|谢霆锋:0.9|唐嫣:0.9|江疏影:0.9|苗苗:0.9|马思纯:0.9|张雨绮:0.9|何超莲:0.8|景甜:0.8|马伊琍:0.8|陈晓:0.8|张天爱:0.8|王思聪:0.8|陈岚(向太):0.8|玫瑰的故事:0.8|金晨:0.8|王诗龄:0.8
2024-12-09 18:43:50.288 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|网易游戏:1.0|元气骑士:1.0|节奏大师:1.0|饥荒联机版:0.9|侠客行:0.9|人类一败涂地:0.9|胡闹厨房2:0.9|徐清林:0.9|分手厨房:0.9|忍者必须死3:0.9|克制:0.9|求生之路2:0.9|胡闹厨房:0.9|技巧:0.9|糖豆人:终极淘汰赛:0.9|饥荒:0.9|龙族幻想:0.9|正义:0.9|天谕:0.9|泰拉瑞亚:0.9|薇古丝:0.9|司马懿:0.9|猫和老鼠:0.9|守望先锋:0.9|哈利波特:魔法觉醒:0.9|麻将:0.9|火影忍者手游:0.9|网易:0.9|星游记:0.9|无悔华夏:0.9|加点:0.9|双人成行:0.9|一念逍遥:0.9|嗨氏:0.9|打法:0.9|华夏手游:0.9|动物派对:0.9|Apex英雄:0.9|创造与魔法:0.9|剑与远征:0.9|apex:0.9|剑网3:指尖江湖:0.9|鬼灭之刃:0.9|妄想山海:0.9|天涯明月刀手游:0.9|火影:0.9|莫伊拉:0.9|揍击派对:0.9
2024-12-09 18:43:50.297 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|理想mpv:1.0|理想L9:1.0|zeekr 001:1.0|仰望:1.0|aito:1.0|蔚来汽车:1.0|吉利汽车:1.0|问界M7:1.0|腾势:1.0|领克:1.0|仰望u8:1.0|智己汽车:1.0|折叠屏:1.0|小鹏汽车:1.0|何小鹏:1.0|零跑汽车:1.0|威马汽车:1.0|余承东:1.0|自行车:1.0|车主:1.0|李斌:0.9|问界m5:0.9|坦克:0.9|哪吒汽车:0.9|折叠手机:0.9|鸿蒙智行:0.9|鸿蒙:0.9|王自如:0.9|cybertruck:0.9|理想l7:0.9|大众:0.9|seres赛力斯:0.9|自动驾驶:0.9|zeekr 009:0.9|小鹏p7:0.9|周鸿祎:0.9|高合汽车:0.9|威马ex5:0.9|理想l6:0.9|三星:0.9|比亚迪汉:0.9|小米集团:0.9|新车:0.9|充电桩:0.9|智己:0.9|轮胎:0.9|林斌:0.9|零跑t03:0.9
{'regParam': 0.01, 'rank': 10, 'implicitPrefs': True, 'alpha': 50.0, 'transform': 'none'}
2024-12-09 16:36:33.883 | INFO | __main__::250 - 数据集的schema:
2024-12-09 16:38:43.507 | INFO | __main__:split_dataset:75 - 数据中总标签数:52822
2024-12-09 16:42:07.531 | INFO | __main__::280 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 10, 'coldStartStrategy': 'drop', 'implicitPrefs': True, 'alpha': 50.0, 'numUserBlocks': 60, 'numItemBlocks': 60}
2024-12-09 16:42:07.555 | INFO | __main__::292 - 使用转换:none -> Column<'weight'>
2024-12-09 17:18:57.137 | INFO | __main__::303 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/train.d_10.imp_True.reg_0.01.a_50.0.it_10.tf_none.sub_0%1%2%3%4%5%6%7%8%9
2024-12-09 17:24:14.123 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.22312387364066555
2024-12-09 17:24:23.273 | INFO | __main__:evaluate:93 - AUC = 0.8586227389962996
2024-12-09 17:24:25.561 | INFO | __main__::340 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241015/pt=long_obj_all/report.json
2024-12-09 17:24:25.562 | INFO | __main__::350 - 准备物品特征...
2024-12-09 17:24:29.086 | INFO | __main__:normalize_features:116 - Feature matrix shape: (52822, 10)
2024-12-09 17:24:29.353 | INFO | __main__::356 - 计算相似物品...
2024-12-09 17:24:45.416 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|段祺瑞:1.0|成吉思汗:1.0|阎锡山:1.0|蒋经国:1.0|周恩来:1.0|冯玉祥:1.0|朱元璋:1.0|杨虎城:1.0|李宗仁:1.0|洪秀全:1.0|汪精卫:1.0|元朝:1.0|八国联军:1.0|戴笠:1.0|明朝:1.0|林彪:1.0|黄埔军校:1.0|崇祯:1.0|北洋水师:1.0|抗日:1.0|李自成:1.0|彭德怀:1.0|白崇禧:1.0|第二次世界大战:1.0|何应钦:1.0|十大元帅:1.0|西安事变:1.0|原子弹:1.0|希特勒:1.0|袁世凯:1.0|二战时期:1.0|唐朝:1.0|努尔哈赤:1.0|汉朝:1.0|隋朝:1.0|马步芳:1.0|杨秀清:1.0|启功:1.0|朱德:1.0|二战:1.0|重庆谈判:1.0|胡锦涛:1.0|罗荣桓:1.0|吴三桂:1.0|孙中山:1.0|朝鲜战争:1.0|老视频:1.0|北宋:1.0|秦始皇:1.0
2024-12-09 17:24:45.422 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|知识点:1.0|刷题:1.0|考点:1.0|机构:1.0|选择题:1.0|学习计划:1.0|备考:1.0|考前焦虑:1.0|答题思路:1.0|判断题:1.0|逢考必过:1.0|押题:1.0|复习计划:1.0|真题:1.0|民刑:1.0|公司法:1.0|模拟题:1.0|考前冲刺:1.0|每日一题:1.0|商法:1.0|高频考点:1.0|鄢梦萱:1.0|李晗:1.0|白斌:1.0|考试时间:1.0|考试大纲:1.0|图形推理:1.0|行政管理:1.0|戴鹏:1.0|商经:1.0|英语阅读:1.0|国际法:1.0|民诉法:1.0|担保物权:1.0|合伙企业法:1.0|柏浪涛:1.0|民诉:1.0|宪法学:1.0|三国法:1.0|依宪治国:1.0|理论法:1.0|国际税收:1.0|行政诉讼法:1.0|张宇琛:1.0|抢劫罪:1.0|杜洪波:1.0|李梦圆:1.0|法学:1.0|李劲松:1.0
2024-12-09 17:24:45.426 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|库迪咖啡:1.0|德克士:1.0|薇诺娜精华液:1.0|肥牛卷:1.0|和府捞面:1.0|徕芬:1.0|六桂福:1.0|豆豆鞋:1.0|虾仁水饺:1.0|MOKINGRAN(梦金园):0.9|净水器:0.9|洞洞鞋:0.9|虾片:0.9|茶百道:0.9|雀巢咖啡:0.9|丝绒拿铁:0.9|紫燕百味鸡:0.9|茉莉茶:0.9|茉莉绿茶:0.9|塔斯汀:0.9|华莱士:0.9|三得利:0.9|杯子:0.9|urban revivo(UR):0.9|元气森林乳茶:0.9|美团:0.9|卫龙魔芋爽:0.9|妇女节:0.9|奈雪的茶:0.9|a.o.史密斯:0.9|app:0.9|巴黎贝甜:0.9|零食很忙:0.9|天猫小黑盒:0.9|椰子粉:0.9|双汇:0.9|金大福:0.9|小度:0.9|飞利浦:0.9|香菜:0.9|柠檬水:0.9|帆布包:0.9|大宝:0.9|智能床:0.9|运动手环:0.9|石头科技:0.9|88VIP:0.9|YSL416:0.9|奶啤:0.9
2024-12-09 17:24:45.426 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:stock_LKNCY -> 瑞幸咖啡:1.0|卡地亚猎豹手表:1.0|出圈:1.0|影院:0.9|清朗:0.9|镜头:0.9|营销号:0.9|艺人:0.9|脂溢性脱发:0.9|水星记:0.9|媒体:0.9|明星神评论:0.9|舒肤佳沐浴露:0.9|生日会:0.9|旅游局:0.9|黄梅戏:0.9|舒肤佳:0.9|阿玛尼黑钥匙明星修护眼霜:0.9|张力:0.9|流量:0.9|人身攻击:0.9|雄激素脱发:0.9|追星:0.9|永不失联的爱:0.9|长安三万里:0.9|端午节:0.9|寸头:0.9|心动(歌曲):0.9|康师傅:0.9|网信办:0.9|黄浩特:0.9|刘胤君:0.9|金秋:0.9|工作室:0.9|板栗鸡翅:0.9|陈山:0.9|日常(音乐):0.9|大湾区晚会:0.9|捐赠:0.9|陈国良:0.9|川剧:0.9|楚一:0.9|游山恋:0.9|初恋:0.9|莫文蔚:0.9|跨年:0.9|酸酸甜甜就是我:0.9|神奇:0.9|捐款:0.9|东阿阿胶:0.9
2024-12-09 17:24:45.431 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|斯巴达勇士赛:1.0|平板卧推:1.0|运动生活:1.0|精神氮泵:1.0|力量举:1.0|引体向上:1.0|哑铃卧推:1.0|陈康:0.9|轮滑:0.9|肱二头肌:0.9|工业建筑:0.9|氮泵:0.9|杠铃:0.9|冲浪:0.9|四季酒店:0.9|阿诺德·施瓦辛格:0.9|中国健美协会:0.9|街头摄影:0.9|理光GR3:0.9|双杠臂屈伸:0.9|佳明:0.9|胶片相机:0.9|焦安静:0.9|鹿晨辉:0.9|厦门马拉松:0.9|健身打卡:0.9|蜜桃臀:0.9|张沛勉:0.9|泳衣:0.9|理光 GR:0.9|手表:0.9|上海马拉松:0.9|大迫杰:0.9|骑行活动:0.9|棒铃:0.9|间歇跑:0.9|俯身划船:0.9|哈雷:0.9|北京马拉松:0.9|川崎:0.9|肱三头肌:0.9|埃鲁德·基普乔格:0.9|重庆国际马拉松:0.9|推举:0.9|毕慧:0.9|徕卡M:0.9|胶片摄影:0.9|李美珍:0.9|实用工业设计:0.9
2024-12-09 17:24:45.431 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|冰壶:1.0|李永波:1.0|德雷塞尔:1.0|刘少昂:1.0|冰球:1.0|陈虹伊:1.0|司雅杰:1.0|刘少林:1.0|傅海峰:1.0|鲍春来:1.0|孙龙:1.0|马克-霍顿:1.0|齐广璞:1.0|跳马:1.0|自由体操:1.0|高低杠:1.0|沈锡希:1.0|何诗蓓:1.0|陈雨菲:1.0|超级杯:1.0|冰雪项目:1.0|宁忠岩:1.0|雅典奥运会:1.0|王仪涵:1.0|朱祎玎:1.0|巴塞罗那奥运会:1.0|平衡木:1.0|冰壶世锦赛:1.0|范可新:1.0|金建熙:1.0|悉尼奥运会:1.0|李冰洁:1.0|李文龙:1.0|中国短道速滑队:1.0|张珈宁:1.0|张楚桐:1.0|舒尔廷:1.0|速度滑冰:1.0|亚冬会:1.0|崔敏静:1.0|徐爱丽:1.0|张添翼:1.0|李坤:1.0|钟宇晨:1.0|王晔:1.0|臧一泽:1.0|杨浚瑄:1.0|石宇奇:1.0|徐一拉:1.0
2024-12-09 17:24:45.435 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|李昌镐:1.0|上野爱咲美:1.0|姜东润:1.0|连笑:1.0|藤泽里菜:1.0|申旻埈:1.0|崔精:1.0|井山裕太:1.0|许家元:1.0|芝野虎丸:1.0|李维清:1.0|朴廷桓:1.0|芈昱廷:1.0|范廷钰:1.0|金恩持:1.0|赵晨宇:1.0|周泓余:1.0|春兰杯:1.0|许嘉阳:1.0|檀啸:1.0|於之莹:1.0|屠晓宇:1.0|陈耀烨:1.0|廖元赫:1.0|聂卫平:1.0|王星昊:1.0|谢尔豪:1.0|吴侑珍:1.0|杨鼎新:1.0|许皓鋐:1.0|金明训:1.0|李钦诚:1.0|党毅飞:1.0|辜梓豪:1.0|柁嘉熹:1.0|三星杯:1.0|彭立尧:1.0|叶长欣:1.0|范胤:1.0|马晓春:1.0|元晟溱:1.0|常昊:1.0|丁浩:1.0|古力:1.0|刘昌赫:1.0|陈梓健:1.0|陆敏全:1.0|陈正勋:1.0|李轩豪:1.0
2024-12-09 17:24:45.438 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|纳达尔:1.0|德尔波特罗:1.0|史蒂夫-诺瓦克:1.0|亚历山大-兹维列夫:1.0|瓦林卡:1.0|卡斯珀-鲁德:1.0|马德里大师赛:1.0|ATP:1.0|加斯奎特:1.0|罗兰加洛斯:1.0|阿尔卡拉兹:1.0|阿加西:1.0|安迪穆雷:1.0|上海大师赛:1.0|丹尼尔·梅德韦杰夫:1.0|尼克克耶高斯:1.0|多米尼克蒂姆:1.0|张德培:1.0|费德勒:1.0|巴黎大师赛:1.0|麦肯罗:1.0|迈阿密大师赛:1.0|拉沃尔杯:1.0|卡洛斯·阿尔卡拉斯:1.0|埃德伯格:1.0|罗德·拉沃尔:1.0|辛辛那提大师赛:1.0|比约·博格:1.0|伊万尼塞维奇:1.0|蒙特卡洛大师赛:1.0|阿利亚西姆:1.0|西西帕斯:1.0|沃达斯科:1.0|萨芬:1.0|塞伦多罗:1.0|波普林:1.0|扬尼克-辛纳:1.0|费雷尔:1.0|特松加:1.0|伯蒂奇:1.0|胡贝特·胡尔卡奇:1.0|泰勒·弗里茨:1.0|米洛斯拉奥尼奇:1.0|霍尔格·鲁内:1.0|弗索维奇:1.0|戴维斯杯:1.0|范德尚舒普:1.0|鲁苏沃里:1.0|贝雷蒂尼:1.0
2024-12-09 17:24:45.441 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|赵今麦:1.0|迪丽热巴:0.9|虞书欣:0.9|刘亦菲:0.9|Angelababy:0.9|刘浩存:0.9|杨幂:0.9|鞠婧祎:0.9|白鹿:0.9|黄晓明:0.9|王鹤棣:0.9|田曦薇:0.9|古力娜扎:0.9|周也:0.9|Lisa:0.9|金晨:0.9|情感语录:0.9|宋轶:0.9|明星盘点:0.9|张婧仪:0.9|吴磊:0.9|章若楠:0.9|赵丽颖:0.9|吴谨言:0.9|张雨绮:0.9|陈都灵:0.9|关晓彤:0.9|周雨彤:0.8|于正:0.8|贾玲:0.8|可爱萌娃:0.8|秦岚:0.8|王楚然:0.8|杨超越:0.8|张若昀:0.8|王诗龄:0.8|张凌赫:0.8|宋祖儿:0.8|林更新:0.8|谷爱凌:0.8|黄子韬:0.8|萌娃日常:0.8|日常记录:0.8|周冬雨:0.8|黄景瑜:0.8|鹿晗:0.8|沈月:0.8|生活感悟:0.8|减肥:0.8
2024-12-09 17:24:45.445 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|山治:1.0|The First Slam Dunk:1.0|大蛇丸:1.0|自来也:1.0|井上雄彦:1.0|终末的女武神:1.0|波特卡斯·D·艾斯:1.0|岛崎遥香:1.0|马尔科:1.0|北条司:1.0|哈迪斯:1.0|田中真弓:1.0|沙·克洛克达尔:1.0|乌索普:1.0|动漫推荐:1.0|车田正美:1.0|萨博:1.0|佩罗娜:1.0|日漫推荐:1.0|火影忍者:1.0|宇智波鼬:1.0|乌塔:1.0|猫眼三姐妹:1.0|月光骑士:1.0|金政基:1.0|侦探漫画:0.9|波雅·汉库克:0.9|超人:0.9|滨边美波:0.9|蝙蝠侠:0.9|渡边美穗:0.9|白石麻衣:0.9|美国队长2:0.9|哥谭:0.9|卡卡西:0.9|松井玲奈:0.9|尾田荣一郎:0.9|指原莉乃:0.9|哈莉·奎茵:0.9|七大罪:0.9|灌篮高手:0.9|曼达洛人:0.9|生田绘梨花:0.9|奈良鹿丸:0.9|新垣结衣:0.9|青之芦苇:0.9|特拉法尔加·罗:0.9|西野七濑:0.9|罗布·路奇:0.9
2024-12-09 17:24:45.445 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|火影忍者疾风传:1.0|布洛克·莱斯纳:1.0|NBA 2K20:0.9|H1Z1:0.9|行尸走肉:0.9|七龙珠:0.9|塞斯·罗林斯:0.9|林书豪:0.9|莫斯科震中杯:0.9|沙奎尔-奥尼尔:0.9|超级龙珠英雄:0.9|龙珠英雄:0.9|德维恩-韦德:0.9|德怀特-霍华德:0.9|NBA2KOL2:0.9|超龙珠英雄:0.9|龙珠超:0.9|NBA吐槽大会:0.9|多多自走棋:0.9|起小点:0.9|大话西游2:0.9|詹姆斯-约翰逊:0.9|卢本伟:0.9|郭凌川:0.9|综合球类:0.9|詹姆斯-哈登:0.9|逗鱼时刻:0.9|姚明:0.9|绝地求生:0.9|王增杰:0.9|巴比-莱斯利:0.9|速度与激情9:0.9|德马库斯-考辛斯:0.9|武磊:0.9|扬尼斯-阿德托昆博:0.9|PDD:0.9|火影忍者之疾风传:0.9|孟亚东:0.9|凯文-杜兰特:0.9|美式橄榄球:0.9|乔丹-汉密尔顿:0.9|科乐美:0.9|NBA季后赛:0.9|山阴路的夏天:0.9|凯里-欧文:0.9|易建联:0.9|伦纳德:0.9|金州勇士队:0.9|奥沙利文:0.9
2024-12-09 17:24:45.445 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|长野博:1.0|风间俊介:1.0|早安少女组:1.0|VIVANT:1.0|大卫·田纳特:1.0|樱木花道:1.0|The First Slam Dunk:1.0|井上雄彦:1.0|丹尼尔·雷德克里夫:1.0|渡边圭祐:1.0|社交网络:1.0|邪恶力量:1.0|霍比特人:1.0|野木亚纪子:1.0|堺雅人:1.0|麦克·辛:1.0|侦探漫画:1.0|麦斯·米科尔森:1.0|三井寿:1.0|少年泰坦:1.0|绫野刚:1.0|哈利·波特与火焰杯:1.0|流川枫:1.0|冈田准一:1.0|指原莉乃:1.0|神探夏洛克:1.0|龙与地下城:1.0|吉卜力:1.0|坂本真绫:1.0|裘德·洛:1.0|好兆头第二季:1.0|詹森·阿克斯:1.0|洼田正孝:1.0|迪西:1.0|宫城良田:1.0|超人:1.0|阿部宽:1.0|武田航平:1.0|森田刚:1.0|夜翼:1.0|濑户利树:1.0|泽北荣治:1.0|吉沢亮:1.0|星野源:1.0|坂本昌行:1.0|无耻之徒:1.0|深津一成:1.0|好兆头:1.0|尼尔·盖曼:1.0
2024-12-09 17:24:45.448 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|艾杜纱:1.0|混油:1.0|眉刷:1.0|诗佩妮Spenny:1.0|清洁面膜:1.0|肌底液:1.0|小棕瓶:1.0|遮瑕笔:1.0|卸妆乳:1.0|祛痘膏:1.0|菲鹿儿focallure:1.0|黛珂:1.0|THREE:1.0|眼影刷:1.0|粉霜:1.0|遮瑕膏:1.0|魅丝蔻:1.0|蜜粉:1.0|眼线液笔:1.0|睫毛打底:1.0|干皮亲妈:1.0|红血丝:1.0|NYX:1.0|铁皮:1.0|科颜氏金盏花爽肤水:1.0|化妆棉:1.0|颈霜:1.0|兰蔻大眼精华眼部精华肌底液:1.0|Club出浴素颜蜜粉饼:1.0|混合皮:1.0|高光刷:1.0|粉底刷:1.0|蜜粉饼:1.0|悠莱:1.0|保湿面膜:1.0|兰蔻精华肌底液:1.0|定妆喷雾:1.0|镜面唇釉:1.0|安瓶:1.0|收缩毛孔:1.0|六胜肽:1.0|bb霜:1.0|医美面膜:1.0|眼线胶笔:1.0|奥比虹爽肤精萃液:1.0|眉粉:1.0|单色眼影:1.0|兰蔻清滢柔肤水:1.0|洁面粉:1.0
2024-12-09 17:24:45.452 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|还珠格格:1.0|知否知否应是绿肥红瘦:1.0|三十而已:1.0|欢乐颂:0.9|蒋欣:0.9|步步惊心:0.9|美人心计:0.9|情深深雨濛濛:0.9|如懿传:0.9|我的前半生:0.9|回家的诱惑:0.9|千山暮雪:0.9|父母爱情:0.9|金粉世家:0.9|婆婆来了:0.9|何以笙箫默:0.9|刁蛮公主:0.9|清平乐:0.9|宫锁珠帘:0.9|三生三世十里桃花:0.9|倾世皇妃:0.9|芈月传:0.9|又见一帘幽梦:0.9|上错花轿嫁对郎:0.9|恶作剧之吻:0.9|放羊的星星:0.9|蜗居:0.9|金婚:0.9|新白娘子传奇:0.9|金枝欲孽:0.9|门第:0.9|梅子黄时雨:0.9|陈建斌:0.9|王莎莎:0.9|至尊红颜:0.9|匆匆那年:0.9|大宋宫词:0.9|武媚娘传奇:0.9|锦心似玉:0.9|孝庄秘史:0.9|罗晋:0.9|奋斗:0.9|戚迹:0.9|第一炉香:0.9|司藤:0.9|宫锁沉香:0.9|那年花开月正圆:0.9|她们的名字:0.9|阳光之下:0.9
2024-12-09 17:24:45.455 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|杜江:1.0|孙莉:1.0|霍思燕:1.0|蔡少芬:1.0|应采儿:1.0|窦骁:1.0|贾静雯:1.0|陈岚(向太):1.0|吴尊:1.0|林志颖:1.0|钟丽缇:1.0|袁咏仪:1.0|袁弘:0.9|林心如:0.9|幸福三重奏:0.9|麦迪娜:0.9|张歆艺:0.9|王岳伦:0.9|陈小春:0.9|甜馨:0.9|安以轩:0.9|曹颖:0.9|伊能静:0.9|李湘:0.9|刘芸:0.9|王子文:0.9|邓莎:0.9|李承铉:0.9|爸爸去哪儿:0.9|张嘉倪:0.9|郭晓东:0.9|郭碧婷:0.9|孙骁骁:0.9|刘恺威:0.9|章贺:0.9|胡可:0.9|姚晨:0.9|金莎:0.9|春日迟迟再出发:0.9|姜潮:0.9|洪欣:0.9|包文婧:0.9|颖儿:0.9|阿拉蕾雅涵:0.9|秦子越:0.9|朱丹:0.9|鲍蕾:0.9|吴永恩:0.9|刘涛:0.9
2024-12-09 17:24:45.461 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|葛力姆乔:1.0|朽木白哉:1.0|阿散井恋次:1.0|巨人:1.0|朽木露琪亚:1.0|银魂:1.0|全职猎人:1.0|克洛:1.0|JOJO的奇妙冒险:石之海:1.0|飞段:1.0|冰海战记:1.0|鲁邦三世:1.0|柯拉松:1.0|夜樱家的大作战:1.0|浪客剑心:1.0|井上织姬:1.0|荒木飞吕彦:1.0|宇智波斑:1.0|不死不幸:1.0|钢之炼金术师:1.0|宇智波带土:1.0|小畑健:1.0|两面宿傩:1.0|噬谎者:1.0|猎人:1.0|废渊战鬼:1.0|关于我转生变成史莱姆这档事:1.0|岸本齐史:1.0|福星小子:1.0|富坚义博:1.0|Keroro军曹:1.0|迈尔斯·莫拉莱斯:1.0|迪达拉:1.0|蓝箱:1.0|波奇塔:1.0|少年JUMP:1.0|乱马1/2:1.0|灶门炭治郎:1.0|虚构推理:1.0|MAPPA:1.0|妮可·罗宾:1.0|岸边露伴:1.0|堀越耕平:1.0|绯村剑心:1.0|冰菓:1.0|千手扉间:1.0|假面骑士OOO:1.0|晓组织:1.0|胀相:1.0
2024-12-09 17:24:45.465 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|大S:1.0|高圆圆:0.9|张柏芝:0.9|郭晶晶:0.9|章泽天:0.9|汪小菲:0.9|孙俪:0.9|马伊琍:0.9|周冬雨:0.9|汪峰:0.9|小s:0.9|伊能静:0.9|佟丽娅:0.9|向佐:0.9|何超莲:0.9|郭碧婷:0.9|窦骁:0.9|具俊晔:0.9|李湘:0.9|郭富城:0.9|林志玲:0.9|陈妍希:0.9|刘涛:0.9|林心如:0.9|霍建华:0.9|张钧甯:0.9|谢霆锋:0.9|刘恺威:0.9|常思思:0.9|林志颖:0.9|陈乔恩:0.9|冯绍峰:0.9|纳瓦·君拉纳拉:0.9|张兰:0.9|刘媛媛:0.9|佟大为:0.9|唐嫣:0.9|倪妮:0.9|贾静雯:0.9|李亚鹏:0.9|刘嘉玲:0.9|姚晨:0.9|王雷:0.9|王诗龄:0.9|陈岚(向太):0.9|九夜茴:0.8|李桢航:0.8|陈铭章:0.8|陈晓:0.8
2024-12-09 17:24:45.469 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|阴阳师:1.0|神都夜行录:1.0|坎特伯雷公主与骑士唤醒冠军之剑的奇幻冒险:1.0|环行旅舍:1.0|非人学园:1.0|魔镜物语:1.0|赛尔号:1.0|猫之城:1.0|跃迁旅人:1.0|空之要塞启航:1.0|三国志幻想大陆:1.0|克制:1.0|零:1.0|OPL常规赛:1.0|幻书启世录:1.0|三无MarBlue:1.0|幻想大陆:1.0|元气骑士:1.0|技巧:1.0|影之诗:1.0|LF:1.0|沙石镇时光:1.0|泰拉瑞亚:1.0|血族:1.0|牧羊人之心:1.0|坎公骑冠剑:1.0|一念逍遥:1.0|ODG:1.0|糖豆人:终极淘汰赛:1.0|解神者:1.0|ESG:1.0|中国绊爱:1.0|ZGDX:1.0|饥荒:1.0|悠久之树:1.0|基元:1.0|TK:1.0|LNGM:0.9|灵魂潮汐:0.9|幻塔:0.9|网易游戏:0.9|零号任务:0.9|角色PV:0.9|网易:0.9|山海镜花:0.9|龙族帝国:0.9|三伏:0.9|星之卡比:探索发现:0.9|决战:0.9
2024-12-09 17:24:45.472 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|理想mpv:1.0|model 3:1.0|李斌:1.0|蔚来汽车:1.0|何小鹏:1.0|理想L9:1.0|高合hiphi x:1.0|仰望:1.0|吉利汽车:1.0|aito:1.0|威马汽车:1.0|model 2:1.0|zeekr 001:1.0|天津车展:1.0|威马ex5:1.0|零跑汽车:1.0|仰望u8:1.0|李想:1.0|零跑t03:1.0|问界M7:1.0|飞凡r7:1.0|哪吒汽车:1.0|高合hiphi z:1.0|比亚迪秦:1.0|哪吒U:1.0|roadster:1.0|腾势:1.0|智己汽车:1.0|秦plus dm-i:1.0|问界m5:1.0|高合汽车:1.0|智己:1.0|cybertruck:1.0|赛力斯sf5:1.0|小鹏汽车:1.0|哪吒S:1.0|充电桩:1.0|零跑c11:1.0|车主:1.0|王自如:1.0|海鸥:1.0|小鹏p7:1.0|长城:1.0|海豹:1.0|ff 91:1.0|理想l6:1.0|问界新M7:1.0|小鹏g9:1.0|理想l7:1.0
2.3.3 长/短期兴趣¶
之前的实验结果都是拿用户长期兴趣分解的,切换成短期兴趣试一下,结果差距巨大
-
短期兴趣中标签个数是10w,是长期的两倍,长尾标签更多
-
确实能出现一些短期的组合,比如“黄圣依,再见爱人”这个
- 有些词在短期中不常见,比如“李鸿章”,效果不如长期
短期兴趣{'maxIter': 10, 'regParam': 0.01, 'rank': 24, 'implicitPrefs': True, 'alpha': 500.0, 'tranform': 'power4'}
2024-12-11 23:43:17.982 | INFO | __main__::251 - 数据集的schema:
2024-12-11 23:44:23.222 | INFO | __main__:split_dataset:75 - 数据中总标签数:102424
2024-12-11 23:46:11.843 | INFO | __main__::281 - 模型参数:{'maxIter': 10, 'regParam': 0.01, 'userCol': 'user_code', 'itemCol': 'tag_code', 'ratingCol': 'weight', 'rank': 24, 'coldStartStrategy': 'drop', 'implicitPrefs': True, 'alpha': 500.0, 'numUserBlocks': 160, 'numItemBlocks': 160}
2024-12-11 23:46:11.905 | INFO | __main__::294 - 使用转换:power4 -> Column<'pow(weight, 4)'>
2024-12-12 00:25:18.919 | INFO | __main__::305 - Model saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241115/pt=short_obj_all/train.d_24.imp_True.reg_0.01.a_500.0.it_10.tf_power4.sub_0%1%2%3%4%5%6%7%8%9
2024-12-12 00:28:53.490 | INFO | __main__:evaluate:89 - Root-mean-square error = 0.22927292971624202
2024-12-12 00:29:08.407 | INFO | __main__:evaluate:93 - AUC = 0.8419157768095354
2024-12-12 00:29:17.317 | INFO | __main__::342 - Report saved to viewfs:///user_ext/weibo_bigdata_vf/yandi/als/checkpoints/dt=20241115/pt=short_obj_all/report.json
2024-12-12 00:29:17.317 | INFO | __main__::352 - 准备物品特征...
2024-12-12 00:29:23.139 | INFO | __main__:normalize_features:116 - Feature matrix shape: (102424, 24)
2024-12-12 00:29:24.595 | INFO | __main__::358 - 计算相似物品...
2024-12-12 00:30:42.930 | INFO | __main__:log_matches:158 - 李鸿章 -> 1042015:historyConcept_8994373d3a93c2fe6ebb625a71c7d195 -> 李鸿章:1.0|邓海山:0.9|水浒传:0.9|玄奘:0.9|八股文:0.9|孙洁:0.9|秦始皇兵马俑博物馆:0.9|燕京大学:0.9|个人化服务:0.9|冯巩:0.9|老年生活:0.9|外国人:0.9|医院生活:0.9|军事题材:0.9|孙中山:0.9|张学良:0.9|野生娃娃鱼:0.9|石刻:0.9|盾构机:0.9|历史重现:0.9|夜袭:0.9|杨宇霆:0.9|蒙古族:0.9|马步芳:0.9|徐世昌:0.9|老艺术家:0.9|医生姓名:0.9|袁世凯:0.9|雕像:0.9|和珅:0.9|毛新宇:0.9|二级运动员:0.9|毕彦君:0.9|娃娃鱼:0.9|迎客松:0.9|胡志明:0.9|就医经历:0.9|英迪拉·甘地:0.9|朴载相:0.9|冯国璋:0.8|猛犸象:0.8|光绪:0.8|蒋介石:0.8|王奎荣:0.8|张作霖:0.8|刘滨:0.8|马一龙:0.8|自由女神:0.8|秦始皇:0.8|莫罕达斯·卡拉姆昌德·甘地:0.8
2024-12-12 00:30:42.940 | INFO | __main__:log_matches:158 - 复习 -> 1042015:extendtag_143d13cd3598ca3ef00513a952d62628 -> 复习:1.0|法硕调剂:0.9|五院四系:0.9|考试大纲:0.9|中等教育:0.9|国家线:0.9|考研上岸:0.9|考研预报名:0.9|统考:0.9|新闻传播学:0.9|考研名师:0.9|海文考研:0.9|会计专硕:0.9|马原:0.9|医学检验技术:0.9|考研大纲:0.9|政治学:0.9|考研成绩:0.9|上岸:0.9|管理类联考:0.9|中国研究生招生信息网:0.9|招生人数:0.9|经济类联考:0.9|史纲:0.9|孙江媛:0.9|四六级英语:0.9|考试注意事项:0.9|上海对外经贸大学:0.9|徐涛强:0.9|陈剑:0.9|考虫:0.9|田静:0.9|英语语言文学:0.9|思修:0.9|成绩查询:0.9|卫生资格考试:0.9|准考证号:0.9|注意事项:0.9|唐迟:0.9|考研调剂:0.9|考前准备:0.9|唐静:0.9|医学影像技术:0.9|成绩报告单:0.9|汉硕:0.9|考研英语:0.9|考研复试:0.9|法学专业:0.9|计算机等级证书:0.9|马克思主义理论:0.9
2024-12-12 00:30:42.949 | INFO | __main__:log_matches:158 - 瑞幸咖啡 -> 1042015:foodMenu_5fc6544e33238feaed99287363e1a82a -> 瑞幸咖啡:1.0|小鹿茶:0.9|luckin coffee:0.9|拿铁:0.9|丝绒拿铁:0.9|汇源果汁:0.9|乳茶:0.9|生椰:0.8|音箱:0.8|倍轻松:0.8|糖烤栗子:0.8|阿玛尼红管405:0.8|音响:0.8|Kaws:0.8|工作日:0.8|水之蔻身体乳:0.8|按摩器:0.8|轻轻茉莉:0.8|西伯利亚:0.8|报喜鸟:0.8|骆驼户外:0.8|北极狐:0.8|鞋花:0.8|水之蔻沐浴露:0.8|H&M:0.8|南瓜布丁:0.8|Marshall:0.8|椰丝绒拿铁:0.8|慕思:0.8|水之蔻护手霜:0.8|骆驼冲锋衣:0.8|三只松鼠:0.8|帆布袋:0.8|太二酸菜鱼:0.8|糖烤板栗:0.8|饺子包:0.8|开放式耳机:0.8|星巴克太妃榛果拿铁:0.8|溪木源:0.8|洛斐:0.8|青梅绿茶:0.8|荻花:0.8|星巴克咖啡:0.8|Lofree:0.8|乌苏啤酒:0.8|匡威:0.8|气温骤降:0.8|植物医师:0.8|遇见小面:0.8|法式风情:0.8
2024-12-12 00:30:42.958 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:sportIceConcept_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|高山滑雪:1.0|苏翊鸣:1.0|张雨婷:0.9|柳鑫宇:0.9|国际雪联:0.9|体操世界杯:0.9|安贤洙:0.9|武大靖:0.9|朱易:0.9|钢架雪车:0.9|马术三项赛:0.9|吕小军:0.9|隋文静:0.9|许静韬:0.9|黄大宪:0.9|王诗玥:0.9|徐莉佳:0.9|华天:0.9|自由式滑雪大跳台:0.9|齐广璞:0.9|北京冬奥会:0.9|韩聪:0.9|阿合娜尔:0.9|韩天宇:0.9|杨倩:0.9|谌利军:0.9|陈巍:0.9|谢尔巴科娃:0.9|巴塞罗那奥运会:0.9|黄雪辰:0.9|高亭宇:0.9|国际雪联单板及自由式滑雪大跳台世界杯:0.9|韩馨蕴:0.9|金建熙:0.9|金妍儿:0.9|平昌冬奥会:0.9|速度滑冰:0.9|冰雪项目:0.9|王宇:0.9|接力:0.9|韩雨:0.9|自由式滑雪:0.9|巩立姣:0.9|宁忠岩:0.9|赵蕊蕊:0.9|张晓雅:0.9|越野滑雪:0.9|冰壶世锦赛:0.9|冰壶:0.9
2024-12-12 00:30:42.958 | INFO | __main__:log_matches:158 - 单板滑雪 -> 1042015:outdoorType_68e4a62e9330d02b632adb1dc3c477c1 -> 单板滑雪:1.0|环湖骑行:0.9|滑雪:0.9|保龄球:0.9|烧鹅濑:0.8|轮滑:0.8|大梅沙海滨公园:0.8|啤酒:0.8|陕西菜:0.8|桔钓沙:0.8|神州半岛:0.8|惠州双月湾:0.8|排骨饭:0.8|鸡尾酒:0.8|湖里:0.8|清源山:0.8|烧鹅饭:0.8|牛腩面:0.8|天津之眼:0.8|健身走:0.8|葡萄园:0.8|踏步机:0.8|赤坎古镇:0.8|意大利菜:0.8|奇达村:0.8|玉皇顶:0.8|襄阳古城:0.8|抄手:0.8|红豆冰:0.8|护膝:0.8|黄姚古镇:0.8|增肌餐:0.8|健身励志语录:0.8|东钱湖小普陀:0.8|桑拿鸡:0.8|欢乐谷:0.8|龙舌兰:0.8|大肠面:0.8|冰煮羊:0.8|滑板车:0.8|冲浪板:0.8|啤酒:0.8|红酒:0.8|蚝仔烙:0.8|精酿啤酒:0.8|烧肥肠:0.8|头倒立:0.8|青岩古镇:0.8|顺峰山公园:0.8|健身包:0.8
2024-12-12 00:30:42.967 | INFO | __main__:log_matches:158 - 李世石 -> 1042015:sportweiqiPlayer_e0463285bdcdc52656e0d4a1f278eeef -> 李世石:1.0|芈昱廷:1.0|李昌镐:1.0|金明训:1.0|中国围棋甲级联赛:1.0|赵晨宇:1.0|中国围棋联赛:1.0|陈梓健:1.0|范廷钰:1.0|柁嘉熹:1.0|申旻埈:1.0|丁浩:1.0|屠晓宇:1.0|春兰杯:1.0|陈贤:1.0|姜东润:1.0|李维清:1.0|陈耀烨:1.0|檀啸:1.0|元晟溱:1.0|杨鼎新:1.0|廖元赫:1.0|谢尔豪:1.0|中国围棋协会:1.0|许嘉阳:1.0|范胤:1.0|刘昌赫:1.0|卞相壹:1.0|周泓余:1.0|古力:1.0|金禹丞:1.0|江维杰:1.0|连笑:1.0|朴廷桓:1.0|上野爱咲美:1.0|李钦诚:1.0|王星昊:1.0|陈正勋:1.0|井山裕太:1.0|三星杯:1.0|於之莹:1.0|崔精:1.0|一力辽:1.0|李轩豪:1.0|许皓鋐:1.0|辜梓豪:1.0|党毅飞:1.0|李小溪:1.0|谢科:1.0|王世一:1.0
2024-12-12 00:30:42.976 | INFO | __main__:log_matches:158 - 德约科维奇 -> 1042015:sportTennisPlayer_103999953 -> 德约科维奇:1.0|罗兰加洛斯:1.0|德尔波特罗:1.0|阿尔卡拉兹:1.0|阿加西:1.0|史蒂夫-诺瓦克:1.0|上海大师赛:1.0|戴维斯杯:1.0|丹尼尔·梅德韦杰夫:1.0|多米尼克蒂姆:1.0|凯茨曼诺维奇:1.0|瓦伊达:1.0|卡洛斯·阿尔卡拉斯:1.0|拉沃尔杯:1.0|尼克克耶高斯:1.0|迪米:1.0|泰勒·弗里茨:1.0|中岛布兰登:1.0|张之臻:1.0|辛辛那提大师赛:1.0|莫尔泰尼:1.0|上海劳力士大师赛:1.0|谢尔顿:1.0|穆塞蒂:1.0|费德勒:1.0|艾丽森-里斯克:1.0|西西帕斯:1.0|波普林:1.0|贝雷蒂尼:1.0|霍尔格·鲁内:1.0|扬尼克-辛纳:1.0|瓦瓦索里:1.0|范德尚舒普:1.0|莱赫卡:1.0|卡恰诺夫:1.0|布云朝克特:1.0|李喆:1.0|ATP500:1.0|梅克蒂奇:1.0|ATP:1.0|纳达尔:1.0|迪米特洛夫:1.0|塞伦多罗:1.0|卢布列夫:1.0|丹尼斯·沙波瓦洛夫:1.0|恩贝尔:1.0|瓦塞林:1.0|达维多维奇:1.0|ATP年终总决赛:1.0|塔比洛:1.0
2024-12-12 00:30:42.985 | INFO | __main__:log_matches:158 - 赵露思 -> 1042015:moviePerson_c2459842283015b387530776c04c3985 -> 赵露思:1.0|黄晓明:0.9|杨幂:0.9|纯欲美女:0.9|Angelababy:0.9|刘亦菲:0.9|性感美女:0.9|虞书欣:0.9|迪丽热巴:0.8|清新美女:0.8|关晓彤:0.7|杨紫:0.7|女生穿搭:0.7|赵丽颖:0.7|日常记录:0.7|明星盘点:0.7|永夜星河:0.7|叶珂:0.7|珠帘玉幕:0.7|古力娜扎:0.7|勇气与决心:0.6|移动手机设备:0.6|潜水体验:0.6|情侣关系:0.6|萌娃日常:0.6|白鹿:0.6|迷惑行为:0.6|化妆:0.6|美女自拍:0.6|可爱小猫:0.6|网友神评论:0.6|微博视界大会:0.6|八卦杂谈:0.6|丁禹兮:0.6|刘宇宁:0.6|妆容:0.6|眼镜男:0.5|张云龙:0.5|餐厅用餐:0.5|明星路透:0.5|亲情:0.5|朋友交流:0.5|周雨彤:0.5|社会百态:0.5|木南:0.5|唐纳德•特朗普:0.5|花儿与少年:0.5|二次元插画:0.5|演技讨论:0.5|rosy:0.5
2024-12-12 00:30:42.995 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:cartoonItem_2644 -> 灌篮高手:1.0|三井寿:1.0|井上雄彦:1.0|宫城良田:1.0|水户洋平:1.0|泽北荣治:1.0|深津一成:0.9|仙流:0.9|仙道彰:0.9|流川枫:0.9|樱木花道:0.9|招财猫:0.9|流花:0.9|莫奈:0.9|PASH!:0.9|声优:0.9|丸美蝴蝶眼膜:0.9|漫画家:0.9|猎人:0.9|矢代:0.9|神谷浩史:0.9|香索:0.9|相泽消太:0.9|汉尼拔:0.9|罗柯:0.9|吉卜力:0.9|金妮:0.9|艾斯:0.8|放学后少年花子君:0.8|宅男腐女恋爱真难:0.8|神谷浩史:0.8|山寺宏一:0.8|白泉:0.8|艾萨:0.8|白龙:0.8|堀越耕平:0.8|飙速宅男:0.8|我独自升级:0.8|金田一少年事件簿:0.8|斑:0.8|德哈:0.8|重生大小姐正在攻略龙帝殿下:0.8|欧尔麦特:0.8|古谷彻:0.8|新网球王子 U-17 世界杯:0.8|山口胜平:0.8|索路:0.8|德哈:0.8|零能百分百:0.8|死柄木弔:0.8
2024-12-12 00:30:42.995 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:gameName_10200387 -> 灌篮高手:1.0|真三国:0.9|大海:0.8|玛莎拉蒂总裁:0.8|憨豆先生:0.8|我是成龙:0.8|密室逃脱:0.8|创意绘画:0.8|花泽香菜:0.8|熊猫:0.8|张国伟:0.8|滑板运动:0.8|东北虎:0.8|近景魔术:0.8|间谍过家家 代号:白:0.8|冰墩墩:0.8|习俗:0.8|VR:0.8|临时演员:0.8|来自汪星的你:0.8|圣斗士星矢:正义传说:0.8|古韵新声:0.8|吴宇森:0.8|房车:0.8|铃芽之旅:0.8|薇娅viya:0.8|雄狮少年:0.8|蟹肉煲:0.8|七夕节:0.8|神奇动物3:邓布利多之谜:0.8|黑衣人3:0.8|毛俊杰:0.8|新海诚:0.8|华谊兄弟传媒集团:0.8|坎特伯雷公主与骑士唤醒冠军之剑的奇幻冒险:0.8|训练服:0.8|嫉妒的化身:0.7|动物管理局:0.7|珠海大剧院:0.7|鸭蛋:0.7|林江国:0.7|爱你一生:0.7|生化危机2:0.7|柠季:0.7|国际博览中心:0.7|沈凌:0.7|梅艳芳:0.7|灌篮高手:0.7|郭冬临:0.7|勇往直前:0.7
2024-12-12 00:30:42.995 | INFO | __main__:log_matches:158 - 灌篮高手 -> 1042015:movie_37910 -> 灌篮高手:1.0|心想事成:1.0|春日暖阳:0.9|云上的小店:0.9|君子盟:0.9|铃芽之旅:0.9|埃兹拉·米勒:0.9|青梅酸酸你微甜:0.9|龙与地下城:0.9|恩爱两不疑:0.9|暴风:0.9|保你平安:0.9|欢乐颂第三季:0.9|王大陆:0.9|陈若轩:0.9|龙马精神:0.9|北影节:0.9|忠犬八公:0.9|灿烂的转身:0.9|薄冰:0.9|龙城:0.9|惊天救援:0.9|回响:0.9|许你万家灯火:0.9|尘封十三载:0.9|费可:0.9|官宣:0.9|阿凡达2:水之道:0.9|隐形战队:0.9|闪电侠:0.9|搜狐时尚盛典:0.9|合伙吧少年:0.9|中国婚礼——我的女儿出嫁了:0.9|走红毯:0.9|嗑cp:0.9|人生·路遥:0.9|何珊:0.9|误杀2:0.9|欢乐颂3:0.9|三大队:0.9|择君记:0.9|飞狐外传:0.9|平凡英雄:0.9|欢乐颂4:0.9|山河之影:0.9|杨新鸣:0.9|杰森·莫玛:0.9|侏罗纪世界3:0.9|平凡之路:0.9|追星星的人:0.9
2024-12-12 00:30:43.004 | INFO | __main__:log_matches:158 - 定妆粉 -> 1042015:beautyProductForm_dd6b307cd28c33c688f820ec7bd9be1c -> 定妆粉:1.0|欧拉裴:1.0|修红:1.0|定妆:1.0|膨胀色:1.0|Farmacy卸妆膏:1.0|植村秀小方瓶粉底液:1.0|冰川水:1.0|小方瓶:1.0|白膜:1.0|植村秀Shu Uemura 羽纱持妆粉底液:1.0|MUF无痕粉饼:1.0|EVE:1.0|Nars超方瓶粉底液:1.0|敷尔佳白膜:1.0|珂润(Curel):1.0|清洁面膜:1.0|闷痘:1.0|干敏肌:1.0|兰蔻菁纯粉底:1.0|蜂蜜面膜:1.0|蜜粉:1.0|蘭:1.0|娜丽丝:1.0|AB.LAB:1.0|紫胖子:1.0|珂润面霜:1.0|蜜粉饼:1.0|薇诺娜防晒:1.0|保湿化妆水:1.0|长效持妆:1.0|nars遮瑕膏:1.0|amiro:1.0|乳敷:1.0|康如:1.0|乳霜:1.0|伊丽莎白雅顿金致胶囊精华液:1.0|薇迪薇奇:1.0|百植萃:1.0|优色林:1.0|伊丽莎白雅顿Elizabeth Arden 白茶香水:1.0|蓝风铃:1.0|YSL恒久粉底液:1.0|美宝莲:1.0|丹桂:1.0|ysl皮气垫:1.0|罗拉玛希:1.0|粉霜:1.0|春雨:1.0|城墙皮:1.0
2024-12-12 00:30:43.014 | INFO | __main__:log_matches:158 - 延禧攻略 -> 1042015:tv_90e66f0b5cecf54ca12c131b679fb92d -> 延禧攻略:1.0|魏璎珞:0.9|紫河车:0.9|甄嬛:0.9|温实初:0.9|后宫:0.9|武媚娘传奇:0.9|曹琴默:0.9|高晞月:0.9|新还珠格格:0.9|浣碧:0.9|苏培盛:0.9|盛纮:0.9|叶澜依:0.9|聂慎儿:0.9|李天柱:0.9|欢天喜地七仙女:0.9|卫嬿婉:0.9|如懿:0.9|至尊红颜:0.9|窦漪房:0.9|敬妃:0.9|仙剑奇侠传3:0.9|小燕子:0.9|凌云彻:0.9|封神英雄榜:0.9|玉娆:0.9|玉檀:0.9|甄嬛传:0.9|上错花轿嫁对郎:0.9|美人心计:0.9|萧剑:0.9|端妃:0.9|沈眉庄:0.9|古战场传奇第五季:0.8|允礼:0.8|后宫·甄嬛传:0.8|蒙丹:0.8|李玉湖:0.8|孟静娴:0.8|晴儿:0.8|新红楼梦:0.8|还珠格格:0.8|王扶林:0.8|华妃:0.8|白浅:0.8|杜冰雁:0.8|容嬷嬷:0.8|夏友善:0.8|小秦氏:0.8
2024-12-12 00:30:43.023 | INFO | __main__:log_matches:158 - 黄圣依 -> 1042015:moviePerson_5107 -> 黄圣依:1.0|杨子:1.0|再见爱人:1.0|麦琳:0.9|李行亮:0.9|正经的老邪:0.8|董永:0.8|花儿与少年:0.8|张云龙:0.8|李隽子:0.8|姜逸磊:0.8|周雨彤:0.8|刘晓庆:0.8|小巷人家:0.8|古力娜扎:0.7|米恩:0.7|安迪:0.7|杨建忠:0.7|完美伴侣:0.7|非暴力沟通:0.7|物以类聚:0.7|再见爱人:0.7|麦琪:0.7|煤气灯效应:0.7|我要上春晚:0.7|你好妈妈第一季:0.7|离婚冷静期:0.7|网红争议:0.7|心动的信号:0.7|叶珂:0.7|K!ND Magazine:0.7|愿得一人心:0.7|李子柒:0.7|花儿与少年·好友记:0.7|纪焕博:0.7|杨安迪:0.7|刘乐:0.7|吸血鬼日记:0.7|莞莞类卿:0.7|刘心:0.7|向佐:0.7|杨安麟:0.7|风吹小白菜:0.7|老邪说电影:0.7|高占喜:0.7|再见爱人 4:0.7|烤奶豆腐:0.7|艾威:0.7|王诗晴:0.7|朱雅琼:0.7
2024-12-12 00:30:43.040 | INFO | __main__:log_matches:158 - 谏山创 -> 1042015:cartoonPeople_488 -> 谏山创:1.0|阿尔敏:1.0|尤弥尔:1.0|莱纳:1.0|进击的巨人:1.0|雷枪:1.0|帕岛:1.0|李伟:1.0|阿明·阿诺德:1.0|吉克耶格尔:1.0|艾伦:1.0|三笠:1.0|巨人:1.0|艾伦耶格尔:1.0|团兵:1.0|利威尔·阿克曼:1.0|利威尔:1.0|兵长:1.0|进击的巨人:1.0|让-基尔希斯坦:1.0|韩吉·佐耶:1.0|莱纳·布朗:1.0|韩吉:1.0|埃尔文:1.0|进击的巨人完结篇:1.0|利韩:1.0|MAPPA:1.0|冈本信彦:1.0|阿尔:1.0|利艾:1.0|月公:1.0|坂本日常:1.0|失忆投捕:1.0|山本武:1.0|忘却battery:1.0|成宫鸣:1.0|诚如神之所说:1.0|Death Note:1.0|要圭:1.0|酷拉皮卡:1.0|朝仓信:1.0|艾笠:1.0|基拉:1.0|鲁西鲁:1.0|失忆投捕:1.0|凯特:1.0|钻石的功罪:1.0|御幸一也:1.0|天野明:1.0|藤卷忠俊:1.0
2024-12-12 00:30:43.050 | INFO | __main__:log_matches:158 - 章子怡 -> 1042015:moviePerson_40998 -> 章子怡:1.0|保罗·沃克:0.9|2046:0.9|陈红:0.9|巩俐:0.9|李亚鹏:0.9|王菲:0.9|周莹:0.9|第十九届中国电影华表奖:0.9|徐静蕾:0.9|梁洛施:0.9|郭晶晶:0.9|此时此刻:0.9|郑志雯:0.8|海哈金喜:0.8|何超琼:0.8|金粉世家:0.8|田朴珺:0.8|林青霞:0.8|贺涵:0.8|丰腴:0.8|何锶珩:0.8|无尽:0.8|黄立行:0.8|陈冲:0.8|梁朝伟:0.8|蜗居:0.8|傅艺伟:0.8|章泽天:0.8|李嫣:0.8|靳羽西:0.8|倪景阳:0.8|玉观音:0.8|梁安琪:0.8|张曼玉:0.8|宋思明:0.8|武则天:0.8|袁泉:0.8|熙娣想聊:0.8|朱珠:0.8|情深深雨濛濛:0.8|刘嘉玲:0.8|茉莉花开:0.8|具俊晔:0.8|秦汉:0.8|庾澄庆:0.8|黄春梅:0.8|无极:0.8|周韵:0.8|罗子君:0.8
2024-12-12 00:30:43.058 | INFO | __main__:log_matches:158 - 阴阳师手游 -> 1042015:gameName_9f43a6f58e2801c14726c9cc51cabd22 -> 阴阳师手游:1.0|式神:1.0|斗技:1.0|源赖光:1.0|晴明:1.0|祸津神:1.0|御魂:1.0|平安京:1.0|百绘罗衣:1.0|花合战:1.0|天照:1.0|大触觉醒:1.0|白藏主:1.0|不见岳:1.0|鬼切:1.0|八岐大蛇:1.0|犬神:1.0|心友犬神:1.0|樱饼:1.0|烟烟罗:1.0|清姬:1.0|山童:1.0|阴阳师:超鬼王:1.0|轻衫染:1.0|源博雅:1.0|辉夜姬:1.0|蚌精:1.0|小鹿男:1.0|麓铭大岳丸:1.0|一目连:1.0|八百比丘尼:1.0|大江山:1.0|鬼童丸:1.0|缚骨清姬:1.0|薙魂:1.0|勾玉:1.0|千姬:1.0|鬼王酒吞童子:1.0|阎魔:1.0|妖琴师:1.0|代号:云:1.0|地藏像:1.0|狂骨:1.0|因幡辉夜姬:1.0|千泷:1.0|鲤鱼精:1.0|寻香行:1.0|神乐:1.0|御行达摩:1.0|伤魂鸟:1.0
2024-12-12 00:30:43.067 | INFO | __main__:log_matches:158 - model y -> 1042015:carSubBrand_21897151790127c8475f046482069cf5 -> model y:1.0|model 3:1.0|隔热膜:1.0|蔚来汽车:1.0|lucid:1.0|蔚来et7:1.0|理想mpv:1.0|FSD:1.0|蔚来:1.0|Mobileye:1.0|model x:1.0|sandero:1.0|蔚来es7:1.0|萤火虫:1.0|理想L9:1.0|宝马3系纯电:1.0|蔚来es8:1.0|ELETRE:1.0|zeekr 001:1.0|蔚来et5:1.0|蔚来ec6:1.0|panda ev:1.0|蔚来et5t:1.0|蔚来es6:1.0|腾势:1.0|雷诺clio:1.0|理想汽车:1.0|理想one:1.0|远航:1.0|rivian:1.0|zeekr x:1.0|仰望:1.0|汽场:1.0|理想l7:1.0|悬架:1.0|乐道l60:1.0|远航h9:1.0|理想M8:1.0|理想l6:1.0|hilux:1.0|锐马克:1.0|乐道:1.0|路特斯:1.0|吉利汽车:1.0|zeekr 7x:1.0|小鹏g6:1.0|小鹏p7:1.0|蔚来et9:1.0|id.4:1.0|zeekr 007:1.0
2024-12-12 00:30:51.037 | INFO | __main__:save_to_database:169 - 向量化标签特征: bigdata_vf_als_tag_encoding partition(dt=20241115, pt=short_obj_all)
3、配置¶
这节记录下基础spark配置,任务资源设置等问题。
3.1、环境配置¶
Jupyter启动单机模式的spark,方便开发
export PYENV_ROOT="$HOME/.pyenv"
[[ -d $PYENV_ROOT/bin ]] && export PATH="$PYENV_ROOT/bin:$PATH"
eval "$(pyenv init -)"
# User specific aliases and functions
export SPARK_HOME=/data0/spark/spark-3.2.0-bin
export HADOOP_CONF_DIR=/usr/local/hadoop-2.7.3/etc/hadoop
export PYSPARK_DRIVER_PYTHON=jupyter
export PYSPARK_DRIVER_PYTHON_OPTS='notebook --ip=0.0.0.0 --port=9567'
PATH=/usr/local/bin:$SPARK_HOME/bin:$PATH
venv虚拟环境配置
pyspark==3.2.0
jupyter
numpy
pandas
urllib3==1.26.6
Jupyter设置忽略Spark的Debug日志,建立如下文件~/.ipython/profile_default/ipython_kernel_config.py
,
c.IPKernelApp.capture_fd_output = False
启动单机spark
export SPARK_LOCAL_DIRS=/data0/weibo_bigdata_vf/tmp
pyspark --driver-memory 60g
实测16C,128G单机可以运行10%的数据量,内存消耗50G左右,迭代ALS过程中硬盘也会消耗40G。
3.2、任务提交¶
写好单机脚本后,可以调大数据量,提交到集群上运行。
- 将Python和虚拟环境一起打包成zip,以
--archives
方式传入并解压缩,打包方法可以在之前博客中找到 --conf spark.executor.memoryOverhead=4g
,可以解决Lost executor
错误,参考- 设置使用40台机器,每台机器4个核(也就是每台同时4个task能力),每台机器24G内存,集群模式下driver内存几乎用不到
- 内存一方面要调大解决
Java Heap Space Error
,同时也避免过小导致大量写入硬盘,出现No space left on device
,打满硬盘 - 资源消耗上,体感随着数据增加,总内存是O(1)或者O(logN)的,调大向量维度dim会需要O(dim)左右的总内存
function submit() {
echo "-------------------------------"
echo "${FUNCNAME[0]}: 提交任务 @$(date)"
echo "-------------------------------"
export SPARK_HOME=/data0/spark/spark-3.2.0-bin
export PYSPARK_PYTHON=Python/bin/python
export PYSPARK_DRIVER_PYTHON="Python/bin/python"
local dt=${1:-20241015}
local pt=${2:-long_obj}
local md5; md5=$(date +%s%N|md5sum|awk '{print $1}')
$SPARK_HOME/bin/spark-submit \
--master yarn \
--deploy-mode cluster \
--num-executors 40 \
--driver-memory 3g \
--executor-memory 24g \
--executor-cores 4 \
--conf "spark.app.name=bigdata_vf_als_user_tag_${md5}" \
--conf spark.executor.memoryOverhead=4g \
--archives viewfs://c9/user_ext/weibo_bigdata_text/yandi/udf/Python-3.9.16-spark.zip#Python \
train.py \
--dataset bigdata_vf_als_user_tag_tuple \
--dataset_dt "${dt}" \
--dataset_pt "${pt}" \
--dataset_substr "" \
--maxIter 10 \
--regParam 0.01 \
--rank 24 \
--implicitPrefs \
--alpha 500 \
--als_blocks 160 \
--train_test_split 0.9 \
--split_by_user \
--add_negative_samples \
--neg_sample_ratio 1.0 \
--transform power4 \
--topk_items 50 \
--faiss_index_type IP
# 打印训练日志
local app_id;
app_id=$(yarn application -list -appTypes SPARK -appName bigdata_vf_als_user_tag_${md5} -appStates ALL|awk '{print $1}'|tail -n 1)
yarn logs -applicationId $app_id|grep "__main__"
echo "-------------------------------"
echo "${FUNCNAME[0]}: DONE @$(date)"
echo "-------------------------------"
}
更多调参问题,可以看AWS Open Data Analytics Best Practices(亚马逊的Spark调参经验)根据WebUI去看怎么设置内存之类,很全面了。
3.3、运行截图¶
隐式模式¶
按照给定的als_blocks数划分任务数为,默认是10,集群运行时可以调大此数。
交替更新userFactors
和itemFactors
,后缀为迭代次数
用户向量大概10G,物品向量占用10M左右
显式模式¶
步骤略有区别,且不额外产生userFactors
和itemFactors
4、总结¶
近年来,随着深度学习兴起,越来越多的推荐系统开始使用神经协同过滤等技术,这种方法提供更强的预测能力和更丰富的用户和物品特征表达。
即便如此,ALS由于其实现简单、易于理解和良好的性能,特别是在分布式系统(如Apache Spark的MLlib中的实现)中的表现,使得它在工业界的一些场景中仍然保持着应用。从这次实践来看,ALS在推荐系统中的使用并没有被完全放弃,而是根据具体的需求和资源情况,与其他方法一同被采用。
最后,ALS在推荐场景下应用,要点总结如下,
- 最佳效果:显式,直接拟合分数,但需要增加随机负采样 => 切记
- 性价比最高:隐式反馈,通过样本权重的方式处理NULL样本的两面性,性价比最高
- 有规模化效应:spark消耗资源随数据量线性增长,性能良好,但仍然需要CPU/内存的配置经验
参考链接¶
- Spark ALS官方文档
- AWS Open Data Analytics Best Practices,亚马逊的Spark调参经验,根据WebUI去看怎么设置内存之类
- Recommender System using ALS in Pyspark,比较细致讲解实现
- pySpark常用函数,可以当成spark的tutorial
- ALS和SVD
- 使用Spark ALS模型 + Faiss向量检索实现用户扩量实例
版权声明¶
以上文章为本人@迪吉老农原创,文责自负。文中如有引用他人内容的部分(包括文字或图片),均已明文指出,或做出明确的引用标记。如需转载,请联系作者,并取得作者的明示同意。感谢。