问题描述
我有一个非常复杂的站点地图设置,用于包含数万个链接的站点。因此,它被分成多个 xml 文件,但是我的雇主还要求在索引下组织站点地图,以便它们反映站点的交互流程。例如,我的网站将有一个页面网址,如:
其中 page1 有数千个子页面。所以我所做的是我专门为 page1 下的链接创建了一个名为 page1-index.xml 的索引,并且需要在 https://www.example.com/page1/page1-index.xml 下访问。由于有数以千计的链接,它们也被分为多个类别,每个类别都是在 page1-index.xml 中链接的自己的站点地图。
所以我得到的是 https://www.example.com/page1/page1-index.xml 处的索引,以及在该 xml 中链接为 https://www.example.com/page1/page1-category-n-sitemap.xml 的数百个站点地图。
所有站点地图文件都位于 public 文件夹中的子文件夹中,其中有一棵树反映了站点地图,因此 page1-index.xml 位于 public/sitemaps/page1/page1-index.xml 中,以便我的应用程序中的单个路由.tsx 可以覆盖所有站点地图。我主要困惑的地方是我应该如何在路由器中返回这些 xml。我有成千上万的站点地图,因此将每个站点地图单独提交给搜索引擎对我来说是不切实际的。如果我提交索引,那么爬虫需要能够访问各个站点地图,这就是我不确定如何设置它的地方。当爬虫从索引访问链接时,我应该如何设置一个或多个路由来返回xml文件?
解决方法
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)