rebots,一般都用在告诉搜索引擎那个地址不收录，网站地图，出来的是全站的一个导航，搜索引擎可以从这里抓取到网站内容，建议你把这个地址在网站底部加个网站地图超链接，而rebots里可以用百度站长rebots工具生成一个。
