|
|
我有三个站点在同一个服务器上，有两个ip，其中一个站点加了SSL证书，也就是https" g: H: K& e& r" o1 y' [
8 b/ n S- _( ^& O, z, J- z6 i人工访问的时候，一切都是正常的。
4 D$ W+ |# X: h# z' o* e7 A1 L Q7 G: w: f; l3 N$ S
在google和bing的搜索结果中，其他两个没有加ssl证书的网站搜索结果里面，很多加了ssl的内容，但是域名还是他们自己的。0 \$ @6 x: }1 }! D- Y
) o4 Q0 B: z4 e. X$ q
比如站点A是加了SSL的，B，C没有加。在site:B.com和site:C.com的结果中，很多内容是来自A的，但是域名是B和C自己的，而且前面加了https
: x6 v8 w# v1 _! ^6 t
! V" z% Z( V5 [5 A# G @这个问题困扰我很久了，一切不知道怎么解决。问了digicert，他们否认是证书引起的。% z" n# F9 m/ p) u v, K+ o
2 ?* R# S: b7 a, f) a# j一直没搞懂，为什么爬虫在爬B和C时，要去抓取A的内容。
* f5 I' A: q c# D8 a* p
+ H4 a y7 ~5 c, \$ D; \大神给的建议吧，多谢% W' w) e8 {7 Z" | k+ l
5 Z" Q" _7 z3 j1 E9 T! V
: j1 J( {3 w2 a" a7 Y6 A* m, n2 b
|
|
发表于 2019-4-2 11:08:33
发表于 2019-4-8 13:20:58
发表于 2019-4-11 16:08:16
