该问题已被锁定!
2
关注
3376
浏览

AWS哪些目录是可以禁止搜索引擎爬行的?

AI智能回复搜索中,请稍后...

为什么被折叠? 0 个回复被折叠
zhengqiang 超级管理员 用户来自于: 广东省深圳市
2012-10-12 12:55
只要服务器把列目录的功能关闭,不能爬行的都不会被爬。

关于作者

问题动态

发布时间
2012-10-12 12:08
更新时间
2012-10-12 12:55
关注人数
2 人关注

相关问题

anwsion是否可以限制注册用户名只能是汉字
wecenter可以被拿来做校园运营吗
发现anwsion可以编辑别人的问题?
可不可以换编辑器呢?
可以一次批量邀请可能帮助的人吗
aws采用nginx服务器之后速度提升N倍
程序不错啊,是公司化运作吗?我想使用,可以赞助吗 呵呵
手机版导航可以移动到底部并且固定吗
PW转AWS后,附件与头像如何转换?
运营工具可以有

推荐内容

搜索引擎收录时的时间是错的,网站哪里出了问题?
请教用七牛后robots.txt的设置方法
终于明白百度为啥不收录了,看看这怎么办?
怎么增加搜索框中 搜索文章标题呢? 文章搜索不到
搜索问题怎么优化?官方的不能用,求方案
如何看待周鸿祎对360搜索的定位?
从dz转过来后,怎样应对搜索引擎?以前的收录怎么办?
anwsion搜索是怎样的原理?
Wecenter的robots这样写 是否更好一些?
facebook推搜索引擎会有机会么?