我想在 robots.txt 文件上为一组特定的 URL 应用禁止指令

问题描述

我正在浏览一个客户的网站,其中有一个我从未遇到过的非常特殊的案例。

该站点没有类别页面,而是在所有 URL 中添加了一个名称。

例如,假设这个词是“目的地”,因此,该网站没有将“目的地”作为类别页面,而是在 URL 中嵌入了 50 多个帖子。

像这样...

https://myclientssite.com/destinations-spain
https://myclientssite.com/destinations-france
https://myclientssite.com/destinations-portugal
https://myclientssite.com/destinations-italy

此外,即使在国家/地区之后,它还有其他奇怪的代码供我的客户在内部使用。

所以,我想知道如何对包含“/destinations-”的 URL 应用 DISALLOW 指令

应该是这样...

禁止:/destinations-*

想法?

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)