在google搜索自己网站,提示robots.txt限制谷歌抓取,在文件管理里面没有找到robots.txt,请问这个文件在哪里?
@persever2009 你应该在 Dashboard 中启用了 禁用爬虫 的选项。 也可以直接自己创建一个 robots.txt 放在根目录下面。 :)
好的,确实是在Dashboard中启用了禁用爬虫选项,多谢。
原始邮件
**发件人:** pi@bitcron.com<pi+2647be155a0b08c5e15eb8c463cb506b9b51780f@bitcron.com>
**收件人:** persever2009<persever2009@126.com>
**发送时间:** 2018年3月25日(周日) 09:25
**主题:** New Comment
New Comment New Comment
Hey,
**Hepo** Said on [网站收录情况,robots.txt文件在哪改](https://pi.bitcron.com/post/wen-da/2018-03/2018-03-25-08-43-16)
[>visit and reply comment](https://pi.bitcron.com/post/wen-da/2018-03/2018-03-25-08-43-16)
- - - - - - - - - - -
simple is everything, we try our best to make the Tech meet the needs of our lives.
@persever2009 你应该在 Dashboard 中启用了 禁用爬虫 的选项。 也可以直接自己创建一个 robots.txt 放在根目录下面。 :)
好的,确实是在Dashboard中启用了禁用爬虫选项,多谢。
原始邮件
**发件人:** pi@bitcron.com<pi+2647be155a0b08c5e15eb8c463cb506b9b51780f@bitcron.com>
**收件人:** persever2009<persever2009@126.com>
**发送时间:** 2018年3月25日(周日) 09:25
**主题:** New Comment
New Comment New Comment
Hey,
**Hepo** Said on [网站收录情况,robots.txt文件在哪改](https://pi.bitcron.com/post/wen-da/2018-03/2018-03-25-08-43-16)
@persever2009 你应该在 Dashboard 中启用了 禁用爬虫 的选项。 也可以直接自己创建一个 robots.txt 放在根目录下面。 :)
[>visit and reply comment](https://pi.bitcron.com/post/wen-da/2018-03/2018-03-25-08-43-16)
- - - - - - - - - - -
simple is everything, we try our best to make the Tech meet the needs of our lives.