什么样的网站设计有利于搜索引擎抓取页面
2008-07-08 14:20
295 查看
搜索引擎蜘蛛能不能找到你的网页?
要让搜索引擎找到你的主页你就必须要有外部链接,在找到你的主页之后,还必须能找到你的更深的内容页,也就要求你要有良好的网站结构,符合逻辑,可能是一个扁平的,可能是一个树状的。
而且这些网页之间要有良好的链接结构,这些链接以文字链接最好,图像链接也可以,但是JavaScript链接,下拉菜单链接,flash链接等就会有问题。
一般推荐网站需要有一个网站地图,把所有重要的部分和网页都列进去。如果网站比较大,网站地图还可以分成几个。
网站的所有页面都要能从主页开始,顺着链接找到,最好在3,4次点击之内。
搜索引擎蜘蛛找到网页后能不能抓取网页?
网页的URL必须是可以被抓取的,如果网页是由数据库动态生成的,那么URL一般要经过改写成静态的,也就是去掉那些URL中问号参数之类的东西,也要去掉Session ID。技术上倒不是搜索引擎不能读取这种URL,但是为了避免陷入无限循环,搜索引擎蜘蛛通常要远离这类URL。
还有如果你的网站是一个整个的flash,那也没办法读取。虽然搜索引擎在努力想读取flash信息,但目前为止收效甚微。
还有框架结构(frame),在网站刚出现的时候,框架结构风行一时,现在还有不少网站在用,这是搜索引擎蜘蛛的大敌。
还有尽量去除不必要的搜索引擎不能读的东西,像音频文件,图片,弹出窗口等。
搜索引擎蜘蛛抓取网页之后,怎样提炼有用信息?
网页的HTML码必须很优化,也就是格式标签占的越少越好,真正内容占的越多越好,整个文件越小越好。把CSS,JavaScript等放在外部文件。
把关键词放在应该出现的地方。
检查网页对不同操作系统,不同browser的兼容性。检查是否符合W3C标准。
只有搜索引擎能顺利找到你的所有网页,抓取这些网页并取出其中真正的有相关性的内容,这个网站才可以被视为是搜索引擎友好的。
要让搜索引擎找到你的主页你就必须要有外部链接,在找到你的主页之后,还必须能找到你的更深的内容页,也就要求你要有良好的网站结构,符合逻辑,可能是一个扁平的,可能是一个树状的。
而且这些网页之间要有良好的链接结构,这些链接以文字链接最好,图像链接也可以,但是JavaScript链接,下拉菜单链接,flash链接等就会有问题。
一般推荐网站需要有一个网站地图,把所有重要的部分和网页都列进去。如果网站比较大,网站地图还可以分成几个。
网站的所有页面都要能从主页开始,顺着链接找到,最好在3,4次点击之内。
搜索引擎蜘蛛找到网页后能不能抓取网页?
网页的URL必须是可以被抓取的,如果网页是由数据库动态生成的,那么URL一般要经过改写成静态的,也就是去掉那些URL中问号参数之类的东西,也要去掉Session ID。技术上倒不是搜索引擎不能读取这种URL,但是为了避免陷入无限循环,搜索引擎蜘蛛通常要远离这类URL。
还有如果你的网站是一个整个的flash,那也没办法读取。虽然搜索引擎在努力想读取flash信息,但目前为止收效甚微。
还有框架结构(frame),在网站刚出现的时候,框架结构风行一时,现在还有不少网站在用,这是搜索引擎蜘蛛的大敌。
还有尽量去除不必要的搜索引擎不能读的东西,像音频文件,图片,弹出窗口等。
搜索引擎蜘蛛抓取网页之后,怎样提炼有用信息?
网页的HTML码必须很优化,也就是格式标签占的越少越好,真正内容占的越多越好,整个文件越小越好。把CSS,JavaScript等放在外部文件。
把关键词放在应该出现的地方。
检查网页对不同操作系统,不同browser的兼容性。检查是否符合W3C标准。
只有搜索引擎能顺利找到你的所有网页,抓取这些网页并取出其中真正的有相关性的内容,这个网站才可以被视为是搜索引擎友好的。
相关文章推荐
- 如何禁止搜索引擎爬虫(Spider)抓取网站页面
- 浅谈web网站登录页面设计
- 网站页面的抓取
- zt:提高网站在Google中的排名,——面向搜索引擎的网站设计
- 使用java的html解析器jsoup和jQuery实现一个自动重复抓取任意网站页面指定元素的web应用
- 社交型网站首页面设计分析
- JavaScript网站设计实践(四)编写about.html页面,利用JavaScript和DOM,选择性的显示和隐藏DIV元素
- 如何从用户体验的角度去做一个网站的页面设计
- 有效引导搜索引擎 抓取优化网站内部链接
- 分享21个超棒的单页面网站设计
- 如何设计网站的登录注册页面
- <div+css页面布局课堂笔记>11---页面布局网站首页设计实例__终极版(仿csdn首页)
- 有利于网站排名的25条网站设计建议
- 利用NodeJS和PhantomJS抓取网站页面信息以及网站截图
- 网站后台禁止搜索引擎抓取
- 使用java的html解析器jsoup和jQuery实现一个自动重复抓取任意网站页面指定元素的web应用
- 网站页面设计基本尺寸
- [HTML] 如何使用robots.txt防止搜索引擎抓取页面
- 百度:什么样的网站更有抓取和收录价值
- 网站每天被抓取新页面的经验心得ccxtqj