该问题已被锁定!
2
关注
2957
浏览

AWS哪些目录是可以禁止搜索引擎爬行的?

AI智能回复搜索中,请稍后...

为什么被折叠? 0 个回复被折叠
zhengqiang 超级管理员 用户来自于: 广东省深圳市
2012-10-12 12:55
只要服务器把列目录的功能关闭,不能爬行的都不会被爬。

关于作者

问题动态

发布时间
2012-10-12 12:08
更新时间
2012-10-12 12:55
关注人数
2 人关注

相关问题

期待官方在下个版本更新可以增加手机注册功能
您可以使用 Cmd Markdown
onclick="AWS.ajax_post($('#answer_form'), AWS.ajax_processer, 'reply');"这个是提交到哪儿
热门话题数量可以修改,但是热门用户数量还是5个
呀,1.1 4可以下了,赶紧动手!
强烈建议anwsion集成又拍云或者阿里oss,插件也可以
活动模块已通过测试,商业模块有需要的朋友可以联系我
wecenter安装在子目录,登录后台地址不对
程序发布情况是否可以借鉴thinksns呢?
后台可以修改 用户名 是否可行

推荐内容

请教用七牛后robots.txt的设置方法
wecenter的robots规则
搜索引擎收录时的时间是错的,网站哪里出了问题?
怎么增加搜索框中 搜索文章标题呢? 文章搜索不到
anwsion搜索是怎样的原理?
搜索问题怎么优化?官方的不能用,求方案
Google Webmaster 总是提示我Robots.txt无法访问,大家遇到吗?
从百度搜索不能直接链接到相关页面吗?
为了避免重复收录写的robots.txt 大家看下我这规则对不对
终于明白百度为啥不收录了,看看这怎么办?