|
|
我有三个站点在同一个服务器上,有两个ip,其中一个站点加了SSL证书,也就是https6 w9 D1 I; F- R" C1 f) H% g4 K, \# r
2 b- k+ d1 f. p* v! @$ A+ g+ T
人工访问的时候,一切都是正常的。2 G" ^1 N5 g1 j- O9 S+ V2 N
, K l0 l3 G, z
在google和bing的搜索结果中,其他两个没有加ssl证书的网站搜索结果里面,很多加了ssl的内容,但是域名还是他们自己的。
7 @$ r" a4 x' `. K' e0 ~% d8 `3 K) [, ]5 e# ]9 g9 Y2 A
比如站点A是加了SSL的,B,C没有加。在site:B.com和site:C.com的结果中,很多内容是来自A的,但是域名是B和C自己的,而且前面加了https! G" ~2 n( w+ a) d$ ?
$ T. M* C; c0 \3 ~, z! t' M
这个问题困扰我很久了,一切不知道怎么解决。问了digicert,他们否认是证书引起的。
3 m0 d" m J( b
! \3 r6 C1 Y3 y( b一直没搞懂,为什么爬虫在爬B和C时,要去抓取A的内容。
1 S1 M9 U( E/ k" M$ j/ Q
2 s1 a* Y: y" u9 B; G大神给的建议吧,多谢) w* B: L% p1 T9 n1 w2 |, ^! U. V1 F
0 L# s5 a. s1 a; V8 g1 [: d* Z+ ~6 I+ ~
|
|