|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 6 c: l0 C& R3 [2 \
. E( R2 J: S3 X) @+ G. J 我的一个网站，从3月21号开始，大量的网页的索引被移除。我一开始还以为是谷歌算法的影响，一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响，也不可能一下子来源谷歌的完全被拔毛，又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。7 w/ ^" L* c- D# X: L, a
9 K( n( H& r) N% b( Z! m9 s
$ e( n( c3 G/ j1 ^( n! l! X4 V
# Z; X" V1 n& P. f& k6 N0 _) E" K. R- `3 W+ s% l
今天有空瞄了一眼网站工具，发现这索引不对啊，已经开始掉了一半了。然后我仔细一查，基本上所有的文章的索引都被移除了。
) _& l% ?/ B7 ^3 N5 }" I
; B$ p( W$ ?* w H4 N* P$ [ q% B/ P( h! p! @' P4 {5 H/ V
然后看看哪些被移除的，发现网页可以正常访问，但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候，会提示Page fetch错误：Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了，怎么现在出现这个问题？
4 r# k/ U- P; ^
9 V# q5 t' j, ?$ z4 @0 w; J0 z0 Z. _0 b5 r1 t& _* P
我把所有的插件都禁止后，发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢？robots.txt是这样的现在。
. i4 w; q* ]; E( v5 [- User-agent: *" u! o% `3 Z( K% f, B
- Disallow: /wp-admin/! b u1 {/ W2 b- R
- Allow: /wp-admin/admin-ajax.php
$ } h1 M+ M A r% R( ?
$ ], I: C9 E: |; m0 k1 Y- Sitemap: https://xxxxx.com/wp-sitemap.xml
4 G4 G9 f' F6 r3 d! v
8 ~. d; v: o1 [/ q* W' Y我发现论坛这2天已经有几个人碰到被黑的情况，大家有空多检查下。我这个网站这次也是被黑的话，已经第二次了。。。5 R, Y$ U8 [+ T- R. I1 L
# j, H4 Q* |5 P- K( Z" n* W
已找到原因，CDN引起的，但是具体问题还在排查。。。: k6 w/ w2 w1 p1 n( c
( y3 J' X0 W$ t
|
本帖子中包含更多资源
您需要 登录 才可以下载或查看，没有账号？立即注册
x
|
发表于 2022-4-13 22:05:35
发表于 2022-4-13 22:14:38
楼主
发表于 2022-4-14 02:40:17
发表于 2022-4-14 08:00:29
