资深架构师首次公开揭秘,今日头条用了哪五种推荐算法?

2018 年 1 月 13 日 36氪 高小倩

点击上方“36氪”,选择“置顶公众号”

专业的行业新闻及深度报道,不容错过

━━━━━


今日头条旗下几款产品都在沿用同一套大的算法推荐系统,但根据业务不同,每套系统的架构会有所调整。




文 | 高小倩

1月11日,今日头条在总部举办了一场推荐算法交流会,因为报名人数远远超过了预期,交流会还临时换了场地。

据介绍,阿里、腾讯、百度、美团、新浪、网易等科技公司的算法工程师和产品经理都去了。看来大家对今日头条到底用了什么推荐算法,那是相当的好奇。

在当天的交流会上,今日头条资深算法架构师、中国科学技术大学计算机博士曹欢欢带来了题为《让算法公开透明》的分享,首次面向行业公开算法原理。

今日头条资深算法架构师曹欢欢讲解今日头条算法原理

他表示:“算法分发并非是把所有决策都交给机器,我们会不断纠偏,设计、监督并管理算法模型。希望这次分享能让更多的人理解算法,并共同参与到算法模型的制定中来,以改善算法,更好的为用户服务,让算法为社会创造更大的价值。”

据曹欢欢介绍,今日头条旗下几款产品都在沿用同一套大的算法推荐系统,但根据业务不同,每套系统的架构会有所调整。

曹欢欢在现场的PPT里公布了头条使用的五种推荐算法,包括传统的协同过滤模型,监督学习算法Logistic Regression模型,基于深度学习的Factorization Machine,以及DNN和GBDT。

曹欢欢介绍说,现在很难有一套通用的架构模型适用于所有的推荐场景,所以很多公司会做多个算法的组合,比如现在很流行将LR和DNN结合,甚至前几年Facebook也是将LR和GBDT算法做结合。今日头条也基本是一套大算法,根据业务不同再具体调整结构。

在解释了算法之后,曹欢欢进一步解密了头条的推荐如何工作。曹欢欢表示,主要有四类最重要的用户特征,将会输入给算法,影响到推荐算法的工作。

第一类是相关性特征

就是评估内容的属性和维度与用户是否匹配。显性的匹配包括关键词匹配、分类匹配、来源匹配、主题匹配等。像FM模型中也有一些隐性匹配,从用户向量与内容向量的核心距离可以得出。

第二类是环境特征

包括地理位置、时间。这些既是bias(基础)特征,也能以此构建一些匹配特征。

第三类是热度特征

包括全局热度、分类热度,主题热度,以及关键词热度等。热度信息在大的推荐系统特别在冷启动的时候非常有效。

第四类是协同特征

它可以在部分程度上帮助解决所谓算法越推越窄的问题。协同特征并非考虑用户已有历史。而是通过用户行为分析不同用户间相似性,比如点击相似、兴趣分类相似、主题相似、兴趣词相似,甚至向量相似,从而扩展模型的探索能力。

分享过后,曹欢欢在还解答了各位对算法的疑问,包括今日头条如何实现冷启动,广告和内容该怎样平衡,怎样准确地拓展用户兴趣图谱等切实的工程性问题。同时,也听取了大家对今日头条算法的意见和建议。

更多内容36氪还会陆续放送……



推荐阅读

点击图片即可阅读



今日头条流量变现的野心:收购支付牌照,金融版图已清晰

登录查看更多
0
10

相关内容

今日头条
今日头条
关注 17
你关心的,才是头条!《今日头条》会聪明地分析您的兴趣爱好,理解您的阅读行为,自动为您推荐喜欢的内容,并且越用越懂你!
【硬核书】理解机器学习:从理论到算法,449页pdf深度理解机器学习
专知会员服务
301+阅读 · 2020年5月28日
斯坦福2020硬课《分布式算法与优化》
专知会员服务
117+阅读 · 2020年5月6日
【序列推荐系统:挑战、进展和展望】Sequential Recommender Systems
专知会员服务
80+阅读 · 2020年4月25日
对话推荐系统综述论文,35页pdf,A Survey on Conversational Recommender Systems
专知会员服务
113+阅读 · 2020年4月3日
Andriy又一力作新书「机器学习工程」,177页pdf带你实战机器学习工程项目
专知会员服务
123+阅读 · 2020年1月15日
【NeurIPS2019报告推荐】公平与表示学习—UIUC Sanmi Koyejo教授
专知会员服务
43+阅读 · 2019年12月24日
【会议推荐】CV101大会:AI+ 大数据时代的特征比对,张广立,英特尔物联网事业部中国区软件优化开发经理。(附PPT)
专知会员服务
10+阅读 · 2019年11月19日
【CCF优秀博士学位论文奖-2019】表示学习的高效算法,清华大学陈健飞
专知会员服务
45+阅读 · 2019年11月8日
WSDM 2019教程—李航、何向南等,深度学习匹配在搜索和推荐中的应用
专知会员服务
74+阅读 · 2019年10月19日
今日头条技术架构分析
互联网架构师
11+阅读 · 2019年8月19日
【实战分享】电影推荐系统项目实战应用
七月在线实验室
33+阅读 · 2019年3月7日
抖音和头条背后,字节跳动的AI实力有多强?
AI前线
6+阅读 · 2018年11月16日
从场景到调参,爱奇艺的推荐算法演化之路
聊聊架构
9+阅读 · 2018年3月23日
今日头条推荐算法详解(PDF下载)
机器学习算法与Python学习
17+阅读 · 2018年2月27日
今日头条算法原理全曝光!(算法架构师详细解读,建议仔细看!)
数据挖掘入门与实战
4+阅读 · 2018年2月9日
快手类推荐系统实践
深度学习与NLP
25+阅读 · 2018年2月8日
今日头条推荐算法原理全文详解
架构文摘
7+阅读 · 2018年1月30日
推荐|今日头条公布其算法原理(全)
全球人工智能
7+阅读 · 2018年1月16日
今日头条推荐系统架构演进之路
QCon
32+阅读 · 2017年6月21日
Arxiv
40+阅读 · 2019年5月20日
Arxiv
5+阅读 · 2019年5月13日
Simplifying Graph Convolutional Networks
Arxiv
12+阅读 · 2019年2月19日
Arxiv
11+阅读 · 2018年11月12日
RippleNet: Propagating User Preferences on the Knowledge Graph for Recommender Systems
Arxiv
7+阅读 · 2018年8月7日
Arxiv
3+阅读 · 2018年3月29日
Arxiv
5+阅读 · 2018年2月28日
Arxiv
6+阅读 · 2018年2月7日
Arxiv
3+阅读 · 2018年1月25日
Arxiv
3+阅读 · 2017年8月2日
VIP会员
相关主题
今日头条
算法
架构师
推荐系统
计算机博士
梯度提升决策树
相关VIP内容
【硬核书】理解机器学习:从理论到算法,449页pdf深度理解机器学习
专知会员服务
301+阅读 · 2020年5月28日
斯坦福2020硬课《分布式算法与优化》
专知会员服务
117+阅读 · 2020年5月6日
【序列推荐系统:挑战、进展和展望】Sequential Recommender Systems
专知会员服务
80+阅读 · 2020年4月25日
对话推荐系统综述论文,35页pdf,A Survey on Conversational Recommender Systems
专知会员服务
113+阅读 · 2020年4月3日
Andriy又一力作新书「机器学习工程」,177页pdf带你实战机器学习工程项目
专知会员服务
123+阅读 · 2020年1月15日
【NeurIPS2019报告推荐】公平与表示学习—UIUC Sanmi Koyejo教授
专知会员服务
43+阅读 · 2019年12月24日
【会议推荐】CV101大会:AI+ 大数据时代的特征比对,张广立,英特尔物联网事业部中国区软件优化开发经理。(附PPT)
专知会员服务
10+阅读 · 2019年11月19日
【CCF优秀博士学位论文奖-2019】表示学习的高效算法,清华大学陈健飞
专知会员服务
45+阅读 · 2019年11月8日
WSDM 2019教程—李航、何向南等,深度学习匹配在搜索和推荐中的应用
专知会员服务
74+阅读 · 2019年10月19日
热门VIP内容
相关资讯
今日头条技术架构分析
互联网架构师
11+阅读 · 2019年8月19日
【实战分享】电影推荐系统项目实战应用
七月在线实验室
33+阅读 · 2019年3月7日
抖音和头条背后,字节跳动的AI实力有多强?
AI前线
6+阅读 · 2018年11月16日
从场景到调参,爱奇艺的推荐算法演化之路
聊聊架构
9+阅读 · 2018年3月23日
今日头条推荐算法详解(PDF下载)
机器学习算法与Python学习
17+阅读 · 2018年2月27日
今日头条算法原理全曝光!(算法架构师详细解读,建议仔细看!)
数据挖掘入门与实战
4+阅读 · 2018年2月9日
快手类推荐系统实践
深度学习与NLP
25+阅读 · 2018年2月8日
今日头条推荐算法原理全文详解
架构文摘
7+阅读 · 2018年1月30日
推荐|今日头条公布其算法原理(全)
全球人工智能
7+阅读 · 2018年1月16日
今日头条推荐系统架构演进之路
QCon
32+阅读 · 2017年6月21日
相关论文
Arxiv
40+阅读 · 2019年5月20日
Arxiv
5+阅读 · 2019年5月13日
Simplifying Graph Convolutional Networks
Arxiv
12+阅读 · 2019年2月19日
Arxiv
11+阅读 · 2018年11月12日
RippleNet: Propagating User Preferences on the Knowledge Graph for Recommender Systems
Arxiv
7+阅读 · 2018年8月7日
Arxiv
3+阅读 · 2018年3月29日
Arxiv
5+阅读 · 2018年2月28日
Arxiv
6+阅读 · 2018年2月7日
Arxiv
3+阅读 · 2018年1月25日
Arxiv
3+阅读 · 2017年8月2日
大家都在搜
  1. 智能仓储
  2. 卡尔曼
  3. 基于大型语言模型
  4. 无人地面车辆
  5. 生成式人工智能
  6. 无人艇
  7. MoE
  8. 李清照词作
  9. 精益管理体系
  10. 《Transformers 机器学习:深度探究》,284页pdf
Top
微信扫码咨询专知VIP会员
Top

天下网标王永州网站优化按天计费报价石家庄关键词按天计费多少钱开封SEO按效果付费公司固原网站制作报价十堰网站推广系统哪家好横岗百度标王哪家好随州网站优化软件公司平湖如何制作网站多少钱临沂网站改版价格盘锦百度竞价包年推广多少钱怒江网站搭建忻州企业网站设计哪家好廊坊百姓网标王呼和浩特网站设计模板报价石家庄百度竞价包年推广诸城seo网站推广哪家好大理网页制作报价同乐百度网站优化排名价格台州关键词按天收费公司临沂企业网站改版多少钱枣庄关键词按天收费公司丽江网站优化软件报价西安网站搜索优化哪家好桂林建网站公司亳州网站推广工具报价黔东南推广网站公司宝鸡seo网站优化哪家好柳州网站搜索优化荷坳模板制作多少钱防城港推广网站多少钱香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声卫健委通报少年有偿捐血浆16次猝死汪小菲曝离婚始末何赛飞追着代拍打雅江山火三名扑火人员牺牲系谣言男子被猫抓伤后确诊“猫抓病”周杰伦一审败诉网易中国拥有亿元资产的家庭达13.3万户315晚会后胖东来又人满为患了高校汽车撞人致3死16伤 司机系学生张家界的山上“长”满了韩国人?张立群任西安交通大学校长手机成瘾是影响睡眠质量重要因素网友洛杉矶偶遇贾玲“重生之我在北大当嫡校长”单亲妈妈陷入热恋 14岁儿子报警倪萍分享减重40斤方法杨倩无缘巴黎奥运考生莫言也上北大硕士复试名单了许家印被限制高消费奥巴马现身唐宁街 黑色着装引猜测专访95后高颜值猪保姆男孩8年未见母亲被告知被遗忘七年后宇文玥被薅头发捞上岸郑州一火锅店爆改成麻辣烫店西双版纳热带植物园回应蜉蝣大爆发沉迷短剧的人就像掉进了杀猪盘当地回应沈阳致3死车祸车主疑毒驾开除党籍5年后 原水城县长再被查凯特王妃现身!外出购物视频曝光初中生遭15人围殴自卫刺伤3人判无罪事业单位女子向同事水杯投不明物质男子被流浪猫绊倒 投喂者赔24万外国人感慨凌晨的中国很安全路边卖淀粉肠阿姨主动出示声明书胖东来员工每周单休无小长假王树国卸任西安交大校长 师生送别小米汽车超级工厂正式揭幕黑马情侣提车了妈妈回应孩子在校撞护栏坠楼校方回应护栏损坏小学生课间坠楼房客欠租失踪 房东直发愁专家建议不必谈骨泥色变老人退休金被冒领16年 金额超20万西藏招商引资投资者子女可当地高考特朗普无法缴纳4.54亿美元罚金浙江一高校内汽车冲撞行人 多人受伤

天下网标王 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化