|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 3 k, y7 T# `7 W: j! D
. w' F- S5 X6 p4 I L 我的一个网站,从3月21号开始,大量的网页的索引被移除。我一开始还以为是谷歌算法的影响,一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响,也不可能一下子来源谷歌的完全被拔毛,又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。
& k3 A) e! T7 _: X' x/ v: U; |" M0 D- W9 d! q V% h$ \$ B
. r: |& J0 `5 S5 _& A( z5 g
9 N) H0 r/ f7 D% A$ S8 W
5 j5 e3 b- _$ j 今天有空瞄了一眼网站工具,发现这索引不对啊,已经开始掉了一半了。然后我仔细一查,基本上所有的文章的索引都被移除了。9 J: _: r9 s0 j, l2 @
7 \5 x! }8 B- \* F, c8 q+ K n" @5 v( s5 |$ \" y
然后看看哪些被移除的,发现网页可以正常访问,但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候,会提示Page fetch错误:Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了,怎么现在出现这个问题?8 k" r# f; C' A$ T# L) H w
5 y7 {4 M/ b& I! u% E1 \9 c
- K; c* P8 A Z9 j6 K; W) V* @& ?4 d
我把所有的插件都禁止后,发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢?robots.txt是这样的现在。
" v% a- c2 x! V# U8 j T) U- User-agent: *
/ }4 `5 U$ s8 w+ N5 G, P. [0 u - Disallow: /wp-admin/
& w6 I6 {2 Y4 T - Allow: /wp-admin/admin-ajax.php
1 O" X3 W y, @: `2 p - 9 Q( {+ R( s/ r1 t6 q& u5 M: U
- Sitemap: https://xxxxx.com/wp-sitemap.xml
复制代码 然后他们改了之后,我发现用了谷歌的url测试工具还是抓取不到,太坑了。' J7 L. H; k2 w' ^( J# f3 y! H
+ [/ |% o1 X, K7 f. f5 n我发现论坛这2天已经有几个人碰到被黑的情况,大家有空多检查下。我这个网站这次也是被黑的话,已经第二次了。。。& t# ~5 q+ w6 X
0 V0 s& |+ f: i7 A% g/ `已找到原因,CDN引起的,但是具体问题还在排查。。。5 J$ s7 T. e% a% F; B$ W% y& M
2 w- S; [3 h0 u i* H. r1 m9 m
|
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
x
|