AWS哪些目录是可以禁止搜索引擎爬行的？ - WeCenter 社交化知识问答社区程序

该问题已被锁定！

2: 关注

3578: 浏览

AWS哪些目录是可以禁止搜索引擎爬行的？

想写个robots.txt文件，不知道AWS哪些目录是可以禁止搜索引擎爬行的？

好问题 0 评论收藏举报

AI智能回复搜索中，请稍后...

1 回答

zhengqiang 超级管理员用户来自于: 广东省深圳市
2012-10-12 12:55

只要服务器把列目录的功能关闭，不能爬行的都不会被爬。

赞同 0 2评论

关于作者

: yangunbo 初级会员
这家伙很懒，还没有设置简介

136: 回答

0: 文章

61: 问题

问题动态

发布时间: 2012-10-12 12:08

更新时间: 2012-10-12 12:55

关注人数: 2 人关注

相关问题

可不可以一键封禁呢？: 2800 浏览 3 关注 1 回答 0 评论

有没好的运营成功网站欣赏呢，br>4的1-2年网站就可以啦: 2997 浏览 2 关注 1 回答 1 评论

微信对接站点是否可以参考微社区。: 3458 浏览 3 关注 2 回答 0 评论

有哪些用户微信公众平台绑定无响应？可以提供一下对应的系统环境情况么？: 3051 浏览 3 关注 2 回答 0 评论

头像是否可以增加使用Gravatar呢: 3579 浏览 2 关注 1 回答 0 评论

好像不可以返回: 2557 浏览 2 关注 1 回答 0 评论

是否可以增加注册字段？: 1935 浏览 2 关注 0 回答 0 评论

上传附件的时候经常提示错误，必须再来一次才可以，请官方注意下: 2599 浏览 3 关注 2 回答 0 评论

新程序不能支持二级目录跳转: 3934 浏览 4 关注 1 回答 0 评论

什么时候可以支持IE6: 1937 浏览 3 关注 1 回答 0 评论

推荐内容

问从dz转过来后，怎样应对搜索引擎？以前的收录怎么办？: 3793 浏览 2 关注 3 回答 2 评论

问怎么增加搜索框中搜索文章标题呢？文章搜索不到: 2655 浏览 2 关注 0 回答 0 评论

问请教用七牛后robots.txt的设置方法: 5155 浏览 4 关注 2 回答 0 评论

问搜索引擎收录时的时间是错的，网站哪里出了问题？: 3466 浏览 2 关注 1 回答 0 评论

问如何看待周鸿祎对360搜索的定位？: 4036 浏览 3 关注 2 回答 0 评论

问从百度搜索不能直接链接到相关页面吗？: 3681 浏览 3 关注 1 回答 0 评论

问 anwsion搜索是怎样的原理？: 3437 浏览 2 关注 1 回答 0 评论

问 Google Webmaster 总是提示我Robots.txt无法访问，大家遇到吗？: 4340 浏览 5 关注 3 回答 0 评论

问为了避免重复收录写的robots.txt 大家看下我这规则对不对: 2438 浏览 1 关注 0 回答 1 评论

问我中招了，用模拟搜索引擎捉取网站，捉取一次就变一次。。。【已解决】: 3999 浏览 5 关注 3 回答 0 评论

All Rights Reserved Powered BY WeCenter V4.1.0 © 2026 皖公网安备 34019202000400号