|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 ! t h6 r9 R- }9 p" p, `
8 l7 B6 Y& W3 ?, f; ~( T1 ]0 M 我的一个网站,从3月21号开始,大量的网页的索引被移除。我一开始还以为是谷歌算法的影响,一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响,也不可能一下子来源谷歌的完全被拔毛,又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。, H. w0 W1 J/ f1 w* k
, w8 R4 Y' N- P" C- B) B V
" F6 ~6 S0 ?+ ]
) |9 V A- Y h& F
) C) O" R$ Y! h 今天有空瞄了一眼网站工具,发现这索引不对啊,已经开始掉了一半了。然后我仔细一查,基本上所有的文章的索引都被移除了。& z* I. v3 D" f. J# p6 B* `
0 L8 D: I: z7 o' r% G. F
) z0 V; t' u( y# O# h5 U: L( e然后看看哪些被移除的,发现网页可以正常访问,但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候,会提示Page fetch错误:Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了,怎么现在出现这个问题?
* Y- n: t' ]6 r- O- f& u% a5 o
" x5 t3 D$ x1 P1 O7 Z7 Q
3 W4 q' I7 F3 X& x我把所有的插件都禁止后,发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢?robots.txt是这样的现在。: t- _% D7 x: a' E2 M+ M. l) i
- User-agent: *
2 D: H& b n8 Z" l+ y - Disallow: /wp-admin/
. g; M4 n( v) L& j+ w- r3 Q5 K& H - Allow: /wp-admin/admin-ajax.php
! f3 K4 f$ u* o6 ^' t4 t - ; D( q4 _0 T4 y, ?
- Sitemap: https://xxxxx.com/wp-sitemap.xml
复制代码 然后他们改了之后,我发现用了谷歌的url测试工具还是抓取不到,太坑了。$ q& M* i4 E/ R+ e$ @& L. ~ E6 J0 A+ o) {
( m2 I2 n8 b# g5 A4 ?
我发现论坛这2天已经有几个人碰到被黑的情况,大家有空多检查下。我这个网站这次也是被黑的话,已经第二次了。。。" ~# q( _. K2 z" ?5 n) Y! ^5 N
$ p `& H2 L) ?已找到原因,CDN引起的,但是具体问题还在排查。。。
4 }5 K" B) H6 [ _% G
6 v& {% `1 i8 s, m! j* W! k" Q7 ]7 B |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|