robots.txt对搜索引擎收录， post属于多个Categories

hardrock

3 s; G) _( p" r
9 v: j: e1 N5 T1,边学边做建站，拖的时间长，网站好多部分还没完工，如果这时被搜索引擎抓取，那肯定不好，
robots.txt设置代码禁止搜索引擎收录，待完工后再允许抓取。
我担心因为之前的禁止收录，会被搜索引擎认为不友好，完工后再允许抓取，搜索引擎却不收录了，怎么办？
ps, 有人说可以在本地PHP搭建好网站，再上传网站文件到主机空间。这样本地测试ok，可能到主机空间又会出错的。
; E1 T# j/ J- y6 D3 R: s* Q  ?
# ]1 r- j, M6 ?$ G# G. c2, 一个介绍产品post, post既属于 Categories1  又属于Categories2  ，
9 H2 w: w4 N/ j& |8 k5 a( G会不会造成搜索引擎重复收录，这样是不是对seo不好？
是不是让一个产品属于一个Categories这样好，属于多个Categories就不好？
3 P% H. l% X% K4 o- v如果两个Categories之间是父子层级关系，这样对seo有无影响？
' P( y  L+ B3 r- H6 J

  T: A& d) ?# w7 b

* d! j% a- G4 S6 _; z8 n0 Y

WordPress官方robots.txt书写规则  http://www.guance.com/387.html
# e$ X4 c4 c' r5 ~8 t
' ~8 W' u: e" `! a+ v
! _6 l/ }  x; \5 Z

hardrock

1，会不会变成这样，
之前的禁止收录，会被搜索引擎认为不友好，完工后再允许抓取，搜索引擎却不收录了

微笑君

1、robots.txt 先是禁止抓取，后来又允许的话，Google 没有影响，baidu 的影响则很大。我有一个博客，之前修改了 rebots 阻止搜索引擎抓取所有页面，后来取消了禁止。结果是 Google 正常收录了我的网站，Baidu 是停止收录一个月左右以后又开始收录，但是只有两个页面。说明：和楼主一样是新站。
. Y" l- D2 P( o- K* F/ @- ?4 @2、从 url 上来看，两个类属于从属关系的话，没有影响。但是如果两篇文章的 URL 一样的话，是有影响的。
9 `9 |+ w/ o" V2 `$ o
) c  J* l6 D9 P2 M0 t一些愚见，如果说错的话，欢迎大家指正。

hardrock

微笑君 发表于 2013-12-29 02:00
6 ~5 Y" ]  _- s2 w- H% p7 \1、robots.txt 先是禁止抓取，后来又允许的话，Google 没有影响，baidu 的影响则很大。我有一个博客，之前 ...

2, 例如，只有一产品post, 这产品即属于分类1也属于分类2， 两分类属平等关系，对seo有影响吗？

微笑君

hardrock 发表于 2013-12-29 18:53
2, 例如，只有一产品post, 这产品即属于分类1也属于分类2， 两分类属平等关系，对seo有影响吗？ ...

" p/ u. ]. W6 r7 y. K如果一篇文章对应一个URL的话，没影响。
. `( _' P) F( N9 l& J
例如：这个帖子的地址为: http://www.example.com/category1/category2/an-article.html 则无影响，如果是
http://www.example.com/category1/an-article.html和http://www.example.com/category2/an-article.html 的话，则有 影响。

hardrock

+ l* Y3 `( D& d- ~

微笑君 发表于 2013-12-30 14:10
如果一篇文章对应一个URL的话，没影响。
! @1 L$ q. h* z( O( L# @$ ~  i0 i
例如：这个帖子的地址为: http://www.example.com/category1/ca ...

: b" W9 T* e6 E, j' ~是第二种情况。
举例吧，手表吧，我按功能和品牌分两类，这种手表介绍post只有一个URL，都属于这两类中，怎样有利于seo?
6 g# {" i' b7 f; E9 O$ U用yoast wordpress seo插件把地址中category去掉，这样会不会利于seo?
8 x4 C; z: F2 @! o% L* Z/ S  s