百度与Google 提示 robots.txt 语法错误解决方法

我检查数遍，没出现什么 User-agent 前面有问号，第2行 Disallow: 路径也是以/开始的啊，最后有人提醒了，是不是上传的 robots.txt 文件编码不是ANSI 编码，我查看了下文件编码还真是 UTF-8，百度和Google 对 robots.txt 都不支持 UTF-8 编码所以才会提示 robots.txt 语法错误。

解决办法只要用记事本重新保存 robots.txt 格式为 ANSI 编码上传就OK了。