搜索引擎抓取网页很多都依赖站点地图,以前在farbox可以网页中直接打开访问的。现在维护在网站根目录中,没法直接打开xml文件或者其他Html文件
@Kaiming. Wan,
https://kaimingwan.com/sitemap 这里是因为 /sitemap*** 这个路由被占用了。 换个名字比如 sitemap22.xml
这个 URL 无法被抓取吗? 没有什么具体的提示吗?
@Hepo 我的情况是这样的,根目录放进了sitemap.xml,访问https://www.theletters.cn/sitemap.xml,返回提示“Page Not Found.
this url is not allowed for outside”;访问https://www.theletters.cn/sitemap,返回“Page Not Found.
> custom this page by '/template/404.html”,好像每次搜索引擎抓取这个文件都是失败的
@mkyos 因为你的网站开启了防盗链的功能。
已经处理了,对 sitemap.xml 做了例外对应。
@Hepo 感谢!!
@Kaiming. Wan,
https://kaimingwan.com/sitemap 这里是因为 /sitemap*** 这个路由被占用了。 换个名字比如 sitemap22.xml
这个 URL 无法被抓取吗? 没有什么具体的提示吗?
@Hepo 我的情况是这样的,根目录放进了sitemap.xml,访问https://www.theletters.cn/sitemap.xml,返回提示“Page Not Found.
this url is not allowed for outside”;访问https://www.theletters.cn/sitemap,返回“Page Not Found.
> custom this page by '/template/404.html”,好像每次搜索引擎抓取这个文件都是失败的
@mkyos 因为你的网站开启了防盗链的功能。
已经处理了,对 sitemap.xml 做了例外对应。
@Hepo 感谢!!