robots.txt对搜索引擎收录， post属于多个Categories

hardrock

1,边学边做建站，拖的时间长，网站好多部分还没完工，如果这时被搜索引擎抓取，那肯定不好，
robots.txt设置代码禁止搜索引擎收录，待完工后再允许抓取。
$ i, Q% `" z" e, ~1 l! Z5 a我担心因为之前的禁止收录，会被搜索引擎认为不友好，完工后再允许抓取，搜索引擎却不收录了，怎么办？
3 s% R" s' a% ]0 o% P2 `ps, 有人说可以在本地PHP搭建好网站，再上传网站文件到主机空间。这样本地测试ok，可能到主机空间又会出错的。
9 C- \: H8 F4 {: Q4 Y0 x( Z. y, @
2, 一个介绍产品post, post既属于 Categories1  又属于Categories2  ，
' n# |9 Z$ U* v; d( E$ [  ~9 l' U9 `会不会造成搜索引擎重复收录，这样是不是对seo不好？
: }/ n# ?/ l5 D是不是让一个产品属于一个Categories这样好，属于多个Categories就不好？
7 q- V1 v% @1 B( e3 t# u% W+ z% {3 }如果两个Categories之间是父子层级关系，这样对seo有无影响？

8 P: L2 ^& n8 F: X



9 [4 K* O* P# H, N) z$ ]
" ^- j- B0 T: v- A0 a8 D6 IWordPress官方robots.txt书写规则  http://www.guance.com/387.html
' j  {# _# q" U$ A( {9 m' z

# p& F( b* w% J3 m0 [  h& r9 u+ j7 p

hardrock

1，会不会变成这样，
0 G3 o+ n- A2 y- S4 `8 L之前的禁止收录，会被搜索引擎认为不友好，完工后再允许抓取，搜索引擎却不收录了

微笑君

1、robots.txt 先是禁止抓取，后来又允许的话，Google 没有影响，baidu 的影响则很大。我有一个博客，之前修改了 rebots 阻止搜索引擎抓取所有页面，后来取消了禁止。结果是 Google 正常收录了我的网站，Baidu 是停止收录一个月左右以后又开始收录，但是只有两个页面。说明：和楼主一样是新站。
8 E2 K& P. w& y2 N& E2、从 url 上来看，两个类属于从属关系的话，没有影响。但是如果两篇文章的 URL 一样的话，是有影响的。

7 J. J) q3 c: g6 ^一些愚见，如果说错的话，欢迎大家指正。

hardrock

微笑君 发表于 2013-12-29 02:00
2 r( I* _* ]# {3 n1 I1、robots.txt 先是禁止抓取，后来又允许的话，Google 没有影响，baidu 的影响则很大。我有一个博客，之前 ...

2, 例如，只有一产品post, 这产品即属于分类1也属于分类2， 两分类属平等关系，对seo有影响吗？

微笑君

hardrock 发表于 2013-12-29 18:53
8 z, j2 P* k, n6 g/ S' ?6 l( l2, 例如，只有一产品post, 这产品即属于分类1也属于分类2， 两分类属平等关系，对seo有影响吗？ ...

如果一篇文章对应一个URL的话，没影响。
6 j  k" ~2 O% N( o+ K
) E6 d7 |6 ]( E2 ^( j4 O例如：这个帖子的地址为: http://www.example.com/category1/category2/an-article.html 则无影响，如果是
5 F7 N. g8 n8 m5 R0 Lhttp://www.example.com/category1/an-article.html和http://www.example.com/category2/an-article.html 的话，则有 影响。

hardrock

微笑君 发表于 2013-12-30 14:10
如果一篇文章对应一个URL的话，没影响。
: P+ r- _2 |& V% ~) T4 V* f
例如：这个帖子的地址为: http://www.example.com/category1/ca ...

是第二种情况。
. z1 A) a, r# \: u* [* z: U4 c举例吧，手表吧，我按功能和品牌分两类，这种手表介绍post只有一个URL，都属于这两类中，怎样有利于seo?
6 Q+ n: y3 w7 W/ S! F用yoast wordpress seo插件把地址中category去掉，这样会不会利于seo?