我想在 robots.txt 文件上为一组特定的 URL 应用禁止指令

问题描述

我正在浏览一个客户的网站,其中有一个我从未遇到过的非常特殊的案例。

站点没有类别页面,而是在所有 URL 中添加一个名称

例如,假设这个词是“目的地”,因此,该网站没有将“目的地”作为类别页面,而是在 URL 中嵌入了 50 多个帖子。

像这样...

https://myclientssite.com/destinations-spain
https://myclientssite.com/destinations-france
https://myclientssite.com/destinations-portugal
https://myclientssite.com/destinations-italy

此外,即使在国家/地区之后,它还有其他奇怪的代码供我的客户在内部使用。

所以,我想知道如何对包含“/destinations-”的 URL 应用 disALLOW 指令

应该是这样...

禁止:/destinations-*

想法?

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)

相关问答

Selenium Web驱动程序和Java。元素在(x,y)点处不可单击。其...
Python-如何使用点“。” 访问字典成员?
Java 字符串是不可变的。到底是什么意思?
Java中的“ final”关键字如何工作?(我仍然可以修改对象。...
“loop:”在Java代码中。这是什么,为什么要编译?
java.lang.ClassNotFoundException:sun.jdbc.odbc.JdbcOdbc...