nginx下禁止访问robots.txt的设置方法
2016-09-28 16:27
253 查看
关于robots.txt文件:搜索引擎通过一种程序robot(又称spider),自动访问互联网上的网页并获取网页信
息。您可以在您的网站中创建一个纯文本文件robots.txt,在这个文件中声明该网站中不想被robot
访问的部分,这样,该网站的部分或全部内容就可以不被搜索引擎收录了,或者指定搜索引擎只收录指定的内容。
访问,可以得知我们网站中存在/admin和/bbs,其中/admin是关于后台管理的目录,把这个路径轻易的暴漏显然是不太安全的,下面我们可以通过禁止访问.txt类型的文件来,增加网站的安全性
修改nginx.conf文件,vim /usr/local/nginx/conf/nginx.conf
息。您可以在您的网站中创建一个纯文本文件robots.txt,在这个文件中声明该网站中不想被robot
访问的部分,这样,该网站的部分或全部内容就可以不被搜索引擎收录了,或者指定搜索引擎只收录指定的内容。
访问,可以得知我们网站中存在/admin和/bbs,其中/admin是关于后台管理的目录,把这个路径轻易的暴漏显然是不太安全的,下面我们可以通过禁止访问.txt类型的文件来,增加网站的安全性
修改nginx.conf文件,vim /usr/local/nginx/conf/nginx.conf
location ~* \.(txt|doc)$ { root /usr/local/nginx/html; deny all; }指定403.html文件的配置信息
location ~* \.(txt|doc)$ { root /usr/local/nginx/html; deny all; }重新加载配置文件
/usr/local/nginx/sbin/nginx -s reload再次访问,发现提示无法访问该文件了。
相关文章推荐
- nginx下禁止访问robots.txt的设置方法
- Nginx 禁止访问某个目录或文件的设置方法
- Nginx服务器中设置禁止访问文件或目录的方法
- Nginx禁止访问robots.txt防泄漏web目录
- [nginx]Nginx禁止访问robots.txt防泄漏web目录
- nginx禁止某个IP访问站点的设置方法
- 设置nginx禁止通过IP访问服务器的方法
- Nginx 禁止访问某个目录或文件的设置方法
- Nginx服务器中设置禁止访问文件或目录的方法
- nginx禁止某个IP或者IP段访问站点的设置方法
- nginx禁止访问robots.txt防泄漏web目录
- nginx禁止某个IP访问站点的设置方法
- 设置nginx禁止通过IP访问服务器的方法
- nginx 禁止某个IP访问立网站的设置方法
- Nginx服务器中设置禁止访问文件或目录的方法
- nginx禁止某个IP访问站点的设置方法
- nginx&apache中禁止指定文件或目录访问的方法
- nginx 设置网站目录访问验证方法
- Apache中设置可以访问根目录,禁止访问子目录的方法