【笔记】一天造出10亿个淘宝首页,阿里工程师如何实现?
2018-03-04 21:32
736 查看
案例来源:微信公众号@阿里技术案例地址:https://baijiahao.baidu.com/s?id=1587264510118377957&wfr=spider&for=pc(以下为案例的简要概述,便 于之后能快速检索到相关内容。部分文字与图片可能直接来自原文,如有侵权请告知,谢谢)
1. 目标:在CTR有保证的情况下,提高淘宝首页推荐的多样性和新颖性。如以前用户点击了“茶杯”,那么推荐的可能是其它茶杯,而现在淘宝会在一定概率上对用户推荐“茶具”、“茶叶”等
2. 实现方法:1)使用Graph Embedding做深度召回框架2)使用XTensorFlow做深度排序框架
3. 使用Graph Embedding做深度召回框架:Graph Embedding是一种将复杂网络投影到低维空间的机器学习算法,典型的做法是将网络中的节点做向量化表达,使节点间的向量相似度接近原始节点间在网络结构、近邻关系、meta信息等多维度上的相似性(类似于word2vec)
4. 使用XtensorFlow做深度排序框架:1)当宝贝数目及参数膨胀到一定规模,加深网络容易引起梯度消失。因此引入深度残差网络技术,训练更深的网络2)通过将稀疏特征embedding,配合多层全连接Relu层,DNN能够自动进行特征交叉,学习到高阶非线性特征,但是这种交叉是隐性的,交叉阶数无法显示控制,而且容易"over-generalization"。为了弥补这一点,WDL模型引入了wide侧,显示记忆一些可解释的特征交叉信息以保证模型的精准性。但是wide侧的引入带来了大量的特征工程的工作,同时也只能学习2阶(cross-product)浅层的交叉。DCN(Deep & Cross Network)引入了cross network,通过网络层数控制特征交叉的阶数,并且它实现高阶特征交叉需要的参数量远远小于DNN。【这段没看懂,还未学习到DCN】
1. 目标:在CTR有保证的情况下,提高淘宝首页推荐的多样性和新颖性。如以前用户点击了“茶杯”,那么推荐的可能是其它茶杯,而现在淘宝会在一定概率上对用户推荐“茶具”、“茶叶”等
2. 实现方法:1)使用Graph Embedding做深度召回框架2)使用XTensorFlow做深度排序框架
3. 使用Graph Embedding做深度召回框架:Graph Embedding是一种将复杂网络投影到低维空间的机器学习算法,典型的做法是将网络中的节点做向量化表达,使节点间的向量相似度接近原始节点间在网络结构、近邻关系、meta信息等多维度上的相似性(类似于word2vec)
4. 使用XtensorFlow做深度排序框架:1)当宝贝数目及参数膨胀到一定规模,加深网络容易引起梯度消失。因此引入深度残差网络技术,训练更深的网络2)通过将稀疏特征embedding,配合多层全连接Relu层,DNN能够自动进行特征交叉,学习到高阶非线性特征,但是这种交叉是隐性的,交叉阶数无法显示控制,而且容易"over-generalization"。为了弥补这一点,WDL模型引入了wide侧,显示记忆一些可解释的特征交叉信息以保证模型的精准性。但是wide侧的引入带来了大量的特征工程的工作,同时也只能学习2阶(cross-product)浅层的交叉。DCN(Deep & Cross Network)引入了cross network,通过网络层数控制特征交叉的阶数,并且它实现高阶特征交叉需要的参数量远远小于DNN。【这段没看懂,还未学习到DCN】
相关文章推荐
- 一天造出10亿个淘宝首页,阿里工程师如何实现?
- 一天造出10亿个淘宝首页,阿里算法工程师如何实现?
- 一天造出10亿个淘宝首页,阿里工程师如何实现?
- 一天造出10亿个淘宝首页,阿里工程师如何实现?
- 一天造出10亿个淘宝首页,阿里工程师如何实现?
- 如何,实现像3yee.com那样的二级域名的博客系统啊, 现在基本上的博客都支持二级域名?请大家帮忙解决一下,暂放首页一天,谢谢!
- EF学习笔记28:如何实现自己的预先加载(Eager Loading)策略
- 网络工程师如何才能实现职位晋升
- 如何实现首页3栏而内页2栏
- RGB转换实现代码,淘宝前端开发工程师笔试题
- js实现淘宝首页图片轮播效果(修正图片滚动顺序的问题)
- Effective C# 学习笔记(三十五) 了解PLINQ如何实现并行算法
- 黑马程序员之ORACLE数据库学习笔记:如何实现连接池及连接池的优缺点
- DEDECMS模板如何调用arclist标签实现首页分页
- 如何用编程方式实现创建一个页面并替换掉站点首页
- 如何成为最好的工程师---吴军讲座学习笔记
- 淘宝php高级工程师,内部笔记
- 仿淘宝首页分类列表效果实现代码
- 如何实现进入首页自动加载action提取数据
- CSS学习笔记-附加篇( CSS仿淘宝首页导航条按钮布局效果)