信息检索与统计学习 推荐系统入门 任务、特征与方法概述 (Recommender System) 徐悦牲Yueshen Xu) ysxu@xidian.edu.cn/xuyueshen@163.com 计算机科学与技术学院 智能软件与系统新技术研究所 历安毛子代拔大学 XIDIAN UNIVERSITY
推荐系统入门 任务、特征与方法概述 (Recommender System) 徐悦甡(Yueshen Xu) ysxu@xidian.edu.cn / xuyueshen@163.com 计算机科学与技术学院 智能软件与系统新技术研究所 信息检索与统计学习
提纲 历些莞子种枝大” XIDIAN UNIVERSITY ▣推荐系统(Recommender System) ■背景、示例与应用 ■推荐系统要素 ■常用推荐方法 >基于协同过滤的推荐方法 >基于内容的推荐方法 >基于标签的推荐方法 >基于网络的推荐方法 >基于上下文的推荐方法 ■推荐方法测试 2020/3/6 计算机科学与技术学院
2020/3/6 计算机科学与技术学院 提纲 推荐系统(Recommender System) ◼ 背景、示例与应用 ◼ 推荐系统要素 ◼ 常用推荐方法 ➢ 基于协同过滤的推荐方法 ➢ 基于内容的推荐方法 ➢ 基于标签的推荐方法 ➢ 基于网络的推荐方法 ➢ 基于上下文的推荐方法 ◼ 推荐方法测试
背景、示例与应用 历些毛子种枝大等 XIDIAN UNIVERSITY →背景 ▣信息检索引擎的发展 ■信息检索引擎!=搜索引擎 门户网站 有合并的趋势: 垂直搜索引擎 搜 狐 搜索引擎 Ba芯新面 S.HU.com 網易NETEASE Google Bal芯音乐 www.163·com 淘宝网 6的 bing Taobao.com Sn日新浪 应 ⑤搜狗搜索 yoUku 腾网 Ba欲百度 2020/3/6 计算机科学与技术学院
2020/3/6 计算机科学与技术学院 背景、示例与应用 ➔ 背景 信息检索引擎的发展 ◼ 信息检索引擎 != 搜索引擎 有合并的趋势: 门户网站 垂直搜索引擎 搜索引擎
背景、示例与应用 历些毛子科枚大多 XIDIAN UNIVERSITY )背景 口这些都不够 ■信息过载:信息爆炸 >待搜索信息本身快速增长,寻找目标信息越发困难 ■搜索展现力不够强 >受页面与排版的限制 学院
2020/3/6 计算机科学与技术学院 这些都不够 ◼ 信息过载;信息爆炸 ➢ 待搜索信息本身快速增长, 寻找目标信息越发困难 背景、示例与应用 ➔ 背景 ◼ 搜索展现力不够强 ➢ 受页面与排版的限制
背景、示例与应用 历些毛子代枝大等 XIDIAN UNIVERSITY →背景 淘宝网 一笔记本电 在巢中格时萄人垂除的 价从西到压 ¥748.00¥16444子 122 150 情:511 更前:4 热销 热销 游戏轻通商务本 有限的展示位 有限的页面 有限的条目 示, ¥4557 2435人4 为¥3003 2035人4 ¥3519 2263人4 为¥5799 030人共 四N机小a过A6四传2G结兰3南 百 ¥2599.00990.00 其有56有室在 共有1场n家在西 其有86合室在因 共有50的室在 新品上市 1 50 5.下一页>共100页,到第2页确定 →你会点几次”下一页”? 2020/3/6 6 计算机科学与技术学院
2020/3/6 计算机科学与技术学院 背景、示例与应用 ➔ 背景 6 → 你会点几次“下一页”? 有限的展示位 有限的页面 有限的条目
背景、示例与应用 历些毛子科枚大》 XIDIAN UNIVERSITY →背景 >搜索展示能力的限制易导致马太效应 强者越强,弱者越弱 ·内容方(卖方)会通过其它途径弥补 新小网站→SEO(搜索引擎优化),提高排名 盈利性网站(民营医院)广告,竞价排名 新小卖家→广告,刷单 >但仍以展示“主流”结果为主,缺乏个性化 ■用户自身个性化增强 >世界越发多元化,改革开放四十年,经济发展,个性释放 >普通人有了追求自我的机会与条件 2020/3/6 计算机科学与技术学院
2020/3/6 计算机科学与技术学院 背景、示例与应用 ➔ 背景 ➢ 搜索展示能力的限制易导致马太效应 - 强者越强,弱者越弱 - 内容方(卖方)会通过其它途径弥补 新/小网站 ➔ SEO (搜索引擎优化),提高排名 盈利性网站(民营医院) ➔ 广告,竞价排名 新/小卖家 ➔ 广告,刷单 ➢ 但仍以展示“主流”结果为主,缺乏个性化 ◼ 用户自身个性化增强 ➢ 世界越发多元化,改革开放四十年,经济发展,个性释放 ➢ 普通人有了追求自我的机会与条件 7
背景、示例与应用 历些毛子种枝大” XIDIAN UNIVERSITY →背景 >个性化的时代 文青,文艺范,小清新,欧美风,中国风,治愈系. 追星,追剧,追品牌. 极简主义,素食主义,自然主义,生活主义.。 总之,人们不想完全从众 豆瓣小组 我的小组精选文化行调 小清新 加入小组 套文艺范er 创建于2006-12-15组长:Hexy 入小姐 永远活在春天和鹰天里的音乐 创于2012.07-09组长:Siience 在这里,你可以辰示自己的长处 marshmallow 你可以留下只言片语。 Mondialito 你可以来欣赏这里的美好: keren ann 可以找到想要的东西 The Marshmallow Kisses 2020/3/6 计算机科学与技术学院
2020/3/6 计算机科学与技术学院 背景、示例与应用 ➔ 背景 ➢ 个性化的时代 - 文青,文艺范,小清新,欧美风,中国风,治愈系… - 追星,追剧,追品牌… - 极简主义,素食主义,自然主义,生活主义… - 总之,人们不想完全从众 8
背景、示例与应用 历些毛子代枚大》 XIDIAN UNIVERSITY )背景 ■用户需求不能完全由关键词表达 >用户也不完全清楚自己要搜索的内容 >用户清楚,但使用关键字不当 >待搜索内容不易使用关键词表达清楚 太长,太具体,太多条件 >搜索引擎的补救措施 Ba芯百度润 百度一下 南宝网天 海宝 害宝网 Google xian jiaoteng university 泻宝众等 淘百度百科 全部地留片桥间视频更多 海,0,本作演,形油,从水烟a0声,本义:用水冲流,去除 质。 过的通洋细森义常用词组方言生江废空进 找的614,000条结果(用时0,55秒) 淘 应看全2个含义22 haeh的idm。-例 显示的是以下查询字词的结果:对'an jiaotong university 仍然搜索:xian jiaoteng university 海宝网。淘我应欢富网
2020/3/6 计算机科学与技术学院 背景、示例与应用 ➔ 背景 ◼ 用户需求不能完全由关键词表达 ➢ 用户也不完全清楚自己要搜索的内容 ➢ 用户清楚,但使用关键字不当 ➢ 待搜索内容不易使用关键词表达清楚 - 太长,太具体,太多条件 ➢ 搜索引擎的补救措施
背景、示例与应用 历些毛子代枝大等 XIDIAN UNIVERSITY →背景 口推荐系统 ■别名:Query-free Information Retrieval ■V.s.搜索引擎 >搜索引擎:用户明晰自己想要什么,且知道如何表达需求 >推荐系统:用户大概知道想要什么,但难以确切表达需求 ■示例:搜索一本书《Java编程思想(第4版)》 使用门户网站(当当/新华书店):教材→大学教材→计算机类→ 编程类→Java→找 使用搜索引擎(Google/Bing/百度):Java编程思想第4版 >使用推荐系统:Java教材,Java思想,Java程度设计,Java第X版 2020/3/6 10 计算机科学与技术学院
2020/3/6 计算机科学与技术学院 背景、示例与应用 ➔ 背景 推荐系统 ◼ 别名:Query-free Information Retrieval ◼ v.s. 搜索引擎 ➢ 搜索引擎:用户明晰自己想要什么,且知道如何表达需求 ➢ 推荐系统:用户大概知道想要什么,但难以确切表达需求 10 ◼ 示例:搜索一本书《Java编程思想(第4版)》 ➢ 使用门户网站(当当/新华书店):教材 → 大学教材 → 计算机类 → 编程类 → Java → 找 ➢ 使用搜索引擎(Google/Bing/百度):Java编程思想 第4版 ➢ 使用推荐系统:Java教材,Java思想,Java程度设计,Java 第X版
背景、示例与应用 历些毛子种枚大》 XIDIAN UNIVERSITY 示例与应用 ▣对推荐系统依赖性较强的场景 电子商务网站 在线社交网络 在线内容站点 亚马逊 amazon.cn ⊙)新浪微博 YoUKU 淘宝网 facebook 知乎 Taobao.com 6 家JD新 Linked in 网易云音乐 今日头条 在线社区网络 在线综合类网络 豆瓣douban 大众点评 dianping.com yelp Ba芯贴里 汽车之家 计算机科学与技术学院 autohome.com.cn
2020/3/6 计算机科学与技术学院 背景、示例与应用 ➔ 示例与应用 对推荐系统依赖性较强的场景 电子商务网站 在线社交网络 在线内容站点 在线社区网络 在线综合类网络