SEO
风萧萧兮易水寒!
生活无奈啊
展开
-
centOS6.5安装LNMP
超详细的centOS6.5安装LNMP,新手必备,简单容易上手。。 需要文件下载:http://download.csdn.net/detail/qq_24038207/9756924原创 2017-02-17 16:06:50 · 247 阅读 · 0 评论 -
robots.txt的语法和写法详解
robots.txt是一个纯文本文件,是搜索引擎蜘蛛爬行网站的时候要访问的第一个文件,当蜘蛛访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,如果存在,搜索机器人就会按照该文件中的内容来确定访问的范围,相当于网站与搜索引蜘蛛遵循协议,如果该文件不存在,所有的搜索蜘蛛将能够访问网站上所有没有被屏蔽的网页,作为站长,我们就可以通过robots.txt文件屏蔽掉错误的页面和一些不想转载 2017-02-15 16:45:09 · 3048 阅读 · 0 评论