开启互联网 + 从来往开始

海量模板建站&高端定制建站

百度快照  推广指定关键词  按天收费  无点击费

小程序&微信公众号

工作时间:

周一至周五9:00—18:00

联系电话:

0531-68961100

什么是robots协议?

robots协议:robots.txt是搜索引擎访问一个网站时要访问的第一个文件,用以来确定哪些是被允许抓取的哪些是被禁止抓取的。robots.txt必须放在网站根目录下,且文件名要小写。详细的robots.txt写法可参考http://www.robotstxt.org。 百度严格按照robots协议执行,另外,同样支持网页内容中添加的名为robots的meta标签,index、follow、nofollow等指令。