|
|
我有三个站点在同一个服务器上，有两个ip，其中一个站点加了SSL证书，也就是https4 @& U F! ?3 s8 X6 k, I
6 O6 k4 ?! y' K! ]# I V, l3 _
人工访问的时候，一切都是正常的。, H4 S) N: D* }+ v
% J5 z' n4 b, V3 s$ R4 ^, O
在google和bing的搜索结果中，其他两个没有加ssl证书的网站搜索结果里面，很多加了ssl的内容，但是域名还是他们自己的。
7 Q# ~* a$ ^& y0 D3 i( @9 u8 S+ q' g+ A& V0 G4 M
比如站点A是加了SSL的，B，C没有加。在site:B.com和site:C.com的结果中，很多内容是来自A的，但是域名是B和C自己的，而且前面加了https
6 M7 J$ X3 Y6 a. @' [6 q9 d6 ]' W+ b6 u4 `5 M1 H+ w9 c
这个问题困扰我很久了，一切不知道怎么解决。问了digicert，他们否认是证书引起的。* t7 u7 ]0 ~3 r
$ a: J) [+ C% }8 m* l一直没搞懂，为什么爬虫在爬B和C时，要去抓取A的内容。
! K7 N* Z% [- I' F/ y3 i K$ {; Z9 }1 ~7 p; _& T% \) K
大神给的建议吧，多谢 A: B% S9 S0 \
5 g; ?/ s3 f9 _% d& k& m# z0 n( v1 M8 u6 {7 M+ V
|
|
发表于 2019-4-2 11:08:33
发表于 2019-4-8 13:20:58
发表于 2019-4-11 16:08:16
