您的位置:首页 > 编程语言 > Java开发

Bigpipe学习笔记和java版实现

2014-09-09 23:04 274 查看

写在开头

--这篇bigpipe的笔记早在一年前就想写了,但是一直被耽搁了。终于今天再翻看旧ppt时才想起要补上这篇博客。

本文中关于bigpipe的介绍是根据网络上的资料整理出来的(图片均来源于网络),而实现部分是本人的亲身实践。

1.什么是bigpipe

搞互联网的同学也许都知道一个数字——4秒,有研究表明,如果一个网站没有在4秒之内加载完成,用户就会感到焦躁不愉快,并离开这个网站(数据来自性能测试网站http://gtmetrix.com/)。

2010 年初的时候,Facebook 的前端性能研究小组开始了他们的优化项目,经过了六个月的努力,成功的将个人空间主页面加载耗时由原来的5 秒减少为现在的2.5 秒。这是一个非常了不起的成就,也给用户来带来了很好的体验。在优化项目中,工程师提出了一种新的页面加载技术,称之为Bigpipe。

举个例子介绍bigpipe(借张图来解释):

在饭馆点菜吃的时候,如果点了四个菜,传统的网页加载模式是把所有菜都炒好了再上桌。当用户吃上菜的时候,已经是第5s了。而运用bigpipe输出页面,是炒一个就上一个菜,用户可以先吃着,厨师再炒第二个菜。甚至可以几个菜并发同时炒。所以用户吃上第一口菜的时间可以是第1s,比传统的提前了很多。



2.Bigpipe思想与原理

BigPipe提出分块的概念,即根据页面内容位置的不同,将整个页面分成不同的块儿– 称为pagelet。该技术的设计者Changhao Jiang 是研究电子电路的博士,可能从微机上得到了启发,将众多pagelet加载的不同阶段像流水线一样在浏览器和服务器上执行,这样就做到了浏览器和服务器的并行化,从而达到重叠服务器端运行时间和浏览器端运行时间的目的。使用BigPipe 不仅可以节省时间,使加载的时间缩短,而且可以同过pagelet的分步输出,使一部分的页面内容更快的输出,从而获得更好的用户体验。

FaceBook的页面被分成了很多不同的pagelets,如图:



页面加载时间消耗图:





bigpipe流水线式加载页面图:



3.Bigpipe与传统页面渲染、ajax区别

3.1 传统页面处理过程



3.2 Ajax模块化处理过程



3.3 Bigpipe处理过程



3.4 页面加载时间对比

传统模式(BP关闭):



流水线模式(BP开启):



页面等待服务器输出的时间从248ms 降到了 70 ms,也就是说最快70ms后就可以显示部分页面效果了。

4.Bigpipe优点和适用场景

Bigpipe好处

使页面分段输出,加快了页面显示,改善用户体验
使页面模块化,更加便于维护
每个pagelet使相互独立的,单个pagelet加载失败不会影响整个页面的显示
Pagelet的输出顺序可以开发人员自由控制,可以尽早的输出用户关心的模块

Bigpipe适用场景

第一个请求时间较长,后端程序需要多次查询数据
页面上的动态内容可以划分在多个区块内显示

5.Bigpipe实现

(1)输出示例

传统模式:

<html>
<div id="pl_main">主要内容</div>
</html>


Bigpipe模式:

<html>
<script scr="bigpipe.js"/>
<div id="bigpipe_15" pageletName="pl_main">待替换内容</div>
</html>

<script>bigpipe.onPageletArrive({
"dependScripts":[],
"dependStyles":[],
"pageletId":"15",
"pageletName":"pl_main",
"htmlContent":"主要内容"
});
</script>

(2)Bigpipe实现--前端任务

JS/CSS拆分
JS/CSS加载卸载

(3)Bigpipe实现--后端任务

3.1 管理和组织Pagelets--

利用配置表/数据库管理树状结构的Pagelet(一个页面可以由1个或多个pagelet树组合而成)
eg :新浪微博pagelets结构



3.2 管理Pagelet资源依赖
利用配置表/数据库管理依赖的js和css

3.3 设计一个action/controller/servlet,将url返回的html包装成脚本格式

eg:
原动态请求url: http://test.xxx.com/test/222.html 包装后的请求url: http://test.xxx.com/bigpipe/${pageletName}.pagelet , 新页面的返回如下:

<script>${param.bigpipeCallback}({
"dependScripts":[],
"dependStyles":[],
"pageletId":"15",
"pageletName":"pl_main",
"htmlContent":"${/test/222.html返回的html内容,注意需要对单/双引号做转义!}"
});
</script>


3.4 分段输出Pagelet
利用HTTP1.1特性,实现分段输出: Transger-Encoding:chunked

输出模式:

Traditional模式(传统模式,不分段,一次性输出整个页面)
Streamline模式(分段输出,先输出页面框架和pagelet占位div,然后根据树状结构,逐个输出脚本格式的pagelet)
SmartStreamline模式(优化过的Streamline模式,不同点是先输出页面框架和第一个pagelet)
AutoAgent模式(根据UserAgent的内容自动选择输出模式,可用来针对spider/robot选择传统模式输出)

3.5 自定义bigpipe标签

下面是一个使用自定义标签,将2个pagelet组织成一个jsp页面的例子:

<html>
<script type="text/javascript" scr="bigpipe.js"/>
<body>
<bigpipe:page pageName="xxxx" renderMode="autoStreamline">
<bigpipe:pagelet pageletName="pagelet1">
<bigpipe:param name="userId">123</bigpipe:param>
</bigpipe:pagelet>

<bigpipe:pagelet pageletName="pagelet2">
<bigpipe:param name="type">111</bigpipe:param>
</bigpipe:pagelet>
</bigpipe:page>
</body>
</html>


6.引用与参考资料

1).新浪微博的BigPipe后端实现技术分享

2).使用BigPipe提升浏览速度—— 流水线技术在新浪微博的实践

3).从新浪微博改版谈网页重构——bigpipe中的页面构建优化

4).Facebook创新之BigPipe:优化页面加载时间

5).淘宝 BigPipe学习研究

6).bigpipe的java实现
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息