通过html标签限制搜索引擎
2012-02-01 01:47
288 查看
======================================================
注:本文源代码点此下载
======================================================
网页未制作完成,或涉及隐私不能公布,限制搜索引擎收录
第一种情况:限制网页快照
限制所有的搜索引擎建立网页快照:
限制百度的搜索引擎建立网页快照:
第二种情况 :禁止搜索引擎抓取本页面,禁止搜索引擎引用页面
在这里,meta name="robots"是泛指所有的搜索引擎的,在这里我们也可以特指某个搜索引擎,例如meta name="googlebot"、meta name="baiduspide"、meta name="www.nfrencai.com"等。
content部分有四个命令:index、noindex、follow、nofollow,命令间以英文的“,”分隔。
index命令:告诉搜索引擎抓取这个页面
follow命令:告诉搜索引擎可以从这个页面上找到链接,然后继续访问抓取下去。
noindex命令:告诉搜索引擎不允许抓取这个页面
nofollow命令:告诉搜索引擎不允许从此页找到链接、拒绝其继续访问。
根据以上的命令,我们就有了一下的四种组合
:可以抓取本页,而且可以顺着本页继续索引别的链接
:不许抓取本页,但是可以顺着本页抓取索引别的链接
:可以抓取本页,但是不许顺着本页抓取索引别的链接
:不许抓取本页,也不许顺着本页抓取索引别的链接。
通过robots.txt
所谓的robots.txt文件,是每一个搜索引擎到你的网站之后要寻找和访问的第一个文件,robots.txt是你对搜索引擎制定的一个如何索引你的网站的规则。通过这个文件,搜索引擎就可以知道在你的网站中,哪些文件是可以被索引的,哪些文件是被拒绝索引的。
======================================================
在最后,我邀请大家参加新浪APP,就是新浪免费送大家的一个空间,支持PHP+MySql,免费二级域名,免费域名绑定
这个是我邀请的地址,您通过这个链接注册即为我的好友,并获赠云豆500个,价值5元哦!短网址是http://t.cn/SXOiLh我创建的小站每天访客已经达到2000+了,每天挂广告赚50+元哦,呵呵,饭钱不愁了,\(^o^)/
注:本文源代码点此下载
======================================================
网页未制作完成,或涉及隐私不能公布,限制搜索引擎收录
第一种情况:限制网页快照
限制所有的搜索引擎建立网页快照:
限制百度的搜索引擎建立网页快照:
第二种情况 :禁止搜索引擎抓取本页面,禁止搜索引擎引用页面
在这里,meta name="robots"是泛指所有的搜索引擎的,在这里我们也可以特指某个搜索引擎,例如meta name="googlebot"、meta name="baiduspide"、meta name="www.nfrencai.com"等。
content部分有四个命令:index、noindex、follow、nofollow,命令间以英文的“,”分隔。
index命令:告诉搜索引擎抓取这个页面
follow命令:告诉搜索引擎可以从这个页面上找到链接,然后继续访问抓取下去。
noindex命令:告诉搜索引擎不允许抓取这个页面
nofollow命令:告诉搜索引擎不允许从此页找到链接、拒绝其继续访问。
根据以上的命令,我们就有了一下的四种组合
:可以抓取本页,而且可以顺着本页继续索引别的链接
:不许抓取本页,但是可以顺着本页抓取索引别的链接
:可以抓取本页,但是不许顺着本页抓取索引别的链接
:不许抓取本页,也不许顺着本页抓取索引别的链接。
通过robots.txt
所谓的robots.txt文件,是每一个搜索引擎到你的网站之后要寻找和访问的第一个文件,robots.txt是你对搜索引擎制定的一个如何索引你的网站的规则。通过这个文件,搜索引擎就可以知道在你的网站中,哪些文件是可以被索引的,哪些文件是被拒绝索引的。
======================================================
在最后,我邀请大家参加新浪APP,就是新浪免费送大家的一个空间,支持PHP+MySql,免费二级域名,免费域名绑定
这个是我邀请的地址,您通过这个链接注册即为我的好友,并获赠云豆500个,价值5元哦!短网址是http://t.cn/SXOiLh我创建的小站每天访客已经达到2000+了,每天挂广告赚50+元哦,呵呵,饭钱不愁了,\(^o^)/
相关文章推荐
- 通过html标签限制搜索引擎
- 利用html标签限制搜索引擎对网站的抓取收录
- 自定义html标签属性,并通过JQuery获取
- HTML标签中通过字符串插入HTML-- insertAdjacentHTML方法示例
- Bootstrap 通过一些简单的 HTML 标签和扩展的类即可创建出不同样式的表单。
- 通过JavaScript操作HTML中select标签
- HTML 通过ID、class、tagName(标签名字)获取 DOM
- 限制HTML标签中的输入长度
- spring mvc数据绑定时通过去除html标签防止js注入
- ASP.NET通过HTML的上传文件标签来上传文件
- 通过正则过滤html标签
- Qt QWebKit模块似的Qt Widget能通过Html的object标签嵌入到web页面中
- js通过读取外部的txt文件,给html的标签赋值
- 通过url向页面传送html或JavaScript标签
- 通过js去掉所有的html标签,得到HTML标签中的所有内容 【2018-1-30】
- 通过js获取td标签的text、html、innerhtml三者的区别
- js 通过html()及text()方法获取并设置p标签的显示值
- 关于HTML中input标签的一些常用输入限制
- 简单的js限制html中input标签输入空格
- 为什么给html标签定义了id,就可以在js中(浏览器环境)直接通过id引用这个dom元素?