汇报修改robots.txt收录报告

前几天做了一个一次 robots是否可以对网站收录有帮助的实验，经过了这几天的观察，网站是每天都被搜索引擎更新。 前几天一直没有收录，后来我改了一下，添加了Allow语法，但是我做实验的页面始终没有被收录，所以在robots填入网址是不能被收录的。大家还是按照robots.txt的标准写法，填写相应的内容。

robots.txt是非常有用的一个文件，即使你的网站所有的页面都希望被收录，没有禁止收录的，但还是要在网站的根目录下面添加robots.txt的文本，即使是空的也是有好处的。