开启互联网+  从来往开始

海量模板建站&高端定制建站

词推宝--全新SEO优化推广,搜索引擎首页排名

小程序&智能名片

工作时间:

周一至周五9:00—18:00

联系电话:

0531-68961100

什么是robots协议?

robots协议:robots.txt是搜索引擎访问一个网站时要访问的第一个文件,用以来确定哪些是被允许抓取的哪些是被禁止抓取的。robots.txt必须放在网站根目录下,且文件名要小写。详细的robots.txt写法可参考http://www.robotstxt.org。 百度严格按照robots协议执行,另外,同样支持网页内容中添加的名为robots的meta标签,index、follow、nofollow等指令。