AWS哪些目录是可以禁止搜索引擎爬行的？ - WeCenter 社交化知识问答社区程序

该问题已被锁定！

2: 关注

3244: 浏览

AWS哪些目录是可以禁止搜索引擎爬行的？

想写个robots.txt文件，不知道AWS哪些目录是可以禁止搜索引擎爬行的？

好问题 0 评论收藏举报

AI智能回复搜索中，请稍后...

1 回答

暂无回答

关于作者

: yangunbo 初级会员
这家伙很懒，还没有设置简介

136: 回答

0: 文章

61: 问题

问题动态

发布时间: 2012-10-12 12:08

更新时间: 2012-10-12 12:55

关注人数: 2 人关注

相关问题

同一个网站可以同时绑定两个微信公众账号吗？: 15947 浏览 2 关注 1 回答 0 评论

首页打开就是404 要加上/?/ 才可以访问: 2771 浏览 1 关注 1 回答 0 评论

测试回复中是否可以发图: 1894 浏览 1 关注 0 回答 0 评论

这个程序是否可以当作论坛使用: 2706 浏览 4 关注 4 回答 0 评论

官方二次開發是不是怎麼改也可以?: 2362 浏览 2 关注 1 回答 0 评论

建议修改游客首页为登陆页同时还可以让搜索引擎进行搜索: 2520 浏览 1 关注 0 回答 0 评论

是否可以升级一版，解决logo的修改问题。谢谢。: 2991 浏览 4 关注 2 回答 0 评论

wecenter是否可以部署在vps上以及需要的配置: 3245 浏览 4 关注 2 回答 0 评论

敏感词测试（可以说是bug）: 2115 浏览 1 关注 0 回答 0 评论

可否设置游客第一个页面为登录页面，但是可以选择参观。: 2307 浏览 4 关注 2 回答 0 评论

推荐内容

问 wecenter的robots规则: 1919 浏览 1 关注 0 回答 0 评论

问搜索引擎收录时的时间是错的，网站哪里出了问题？: 3114 浏览 2 关注 1 回答 0 评论

问从百度搜索不能直接链接到相关页面吗？: 3354 浏览 3 关注 1 回答 0 评论

问终于明白百度为啥不收录了，看看这怎么办？: 4422 浏览 7 关注 4 回答 0 评论

问搜索问题怎么优化?官方的不能用,求方案: 3149 浏览 2 关注 1 回答 0 评论

问 Google Webmaster 总是提示我Robots.txt无法访问，大家遇到吗？: 3943 浏览 5 关注 3 回答 0 评论

问怎么用robots屏蔽分类列表和推荐、热门、待回复: 2590 浏览 1 关注 0 回答 0 评论

问我中招了，用模拟搜索引擎捉取网站，捉取一次就变一次。。。【已解决】: 3574 浏览 5 关注 3 回答 0 评论

问从dz转过来后，怎样应对搜索引擎？以前的收录怎么办？: 3359 浏览 2 关注 3 回答 2 评论

问请问在robots.txt文件中，一般是放行那几个目录？: 2389 浏览 2 关注 1 回答 0 评论

All Rights Reserved Powered BY WeCenter V4.1.0 © 2025 皖公网安备 34019202000400号