账号通
    

账号  

密码  

1998

查看

1

回复
主题:[ICMS]不想让搜索引擎搜到类似v-1074-549780.aspx页面 [收藏主题]  
healthoo 当前离线

164

主题

2

广播

0

粉丝
添加关注
级别:一年级

用户积分:147 分
登录次数:111 次
注册时间:2014/8/21
最后登录:2019/1/23
healthoo 发表于:2019/1/23 11:21:58   | 只看该作者 查看该作者主题 楼主 
科汛在线考试系统(NET)
网站是生成静态页面的,但最近在各大搜索引擎上看到不仅抓取了生成了静态页面,还抓取了类似v-1074-549780.aspx页面,这种页面是后台添加信息预览的格式,怎么避免被搜索引擎抓到?
 
  支持(0) | 反对(0) 回到顶部顶端 回到底部底部
keyi 当前离线

3123

主题

8

广播

18

粉丝
添加关注
级别:大二

用户积分:11924 分
登录次数:2527 次
注册时间:2008/12/24
最后登录:2023/12/14
keyi 发表于:2019/2/19 22:21:12   | 只看该作者 查看该作者主题 沙发 
在网站根目录下,放一个robotx.txt 文件

看:https://baike.baidu.com/item/robots协议/2483797?fr=aladdin&fromid=9518761&fromtitle=robots.txt

 
  支持(0) | 反对(0) 回到顶部顶端 回到底部底部
<上一主题 | 下一主题 >
Powered By KesionCMS Version X1
厦门科汛软件有限公司 © 2006-2016 页面执行0.35938秒 powered by KesionCMS 9.0