使用IIS为不同的子域指定robots.txt
||
我在www.example.com上有一个站点,在beta.example.com和Preview.example.com上也有两个登台平台,我需要一种方法来为每个使用IIS或类似工具的robots.txt设置不同的方法
原因是我要禁止除www域之外的所有蜘蛛,因为它们正在复制重复的内容
有人知道这是否可能吗?
没有找到相关结果
已邀请:
1 个回复
才脊烽馈低