最近一个客户网站出现了很奇怪的现象 网站之前还是可以收录的 但是突然之前网站停止收录了 。最后查看到的问题是： 提示 robots.txt 有问题 。robots.txt的文件对于网站的优化和收录还是很有好处的 1.、屏蔽网站内的死链接。 2、屏蔽谷歌收取重复的页面 [...]