|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 ; f. @. c; T8 K, h4 `8 e
" |0 A% W3 h ]& x/ M5 o ]' Z! \
我的一个网站,从3月21号开始,大量的网页的索引被移除。我一开始还以为是谷歌算法的影响,一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响,也不可能一下子来源谷歌的完全被拔毛,又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。
9 G3 t( M$ K7 b$ P8 a
- `( e: {4 j' j
. T# h& [6 ? P4 n+ q6 g$ q G& t0 t, p2 \6 h% _2 n6 y
; s( h5 w' p2 C, e 今天有空瞄了一眼网站工具,发现这索引不对啊,已经开始掉了一半了。然后我仔细一查,基本上所有的文章的索引都被移除了。
( V2 W' S8 p4 [2 b; {
% A1 y1 g1 a" R: O. G/ N+ N; r* V. o. I E) w4 b
然后看看哪些被移除的,发现网页可以正常访问,但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候,会提示Page fetch错误:Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了,怎么现在出现这个问题?; H4 v% D& O6 N2 s/ D
) ~3 {' d: U; A; _( W" E
7 g( C$ D1 M1 \* Q; N: E4 {我把所有的插件都禁止后,发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢?robots.txt是这样的现在。8 W, Y5 P& F9 _* @
- User-agent: *: J# u5 h# p( f( E
- Disallow: /wp-admin// b) t5 ? K$ H
- Allow: /wp-admin/admin-ajax.php# {$ Q" t; A; \3 F
- . _$ g# i2 i1 m$ n
- Sitemap: https://xxxxx.com/wp-sitemap.xml
复制代码 然后他们改了之后,我发现用了谷歌的url测试工具还是抓取不到,太坑了。* l- K8 N% o0 j- S/ I7 D9 A/ L: ?" }3 W
- }$ u( o) D* x8 R! A5 p, K, o5 o我发现论坛这2天已经有几个人碰到被黑的情况,大家有空多检查下。我这个网站这次也是被黑的话,已经第二次了。。。
9 ^5 k7 T0 R* G7 G1 E6 j1 n g- N4 N" p7 Q0 ]* R% l
已找到原因,CDN引起的,但是具体问题还在排查。。。# y" P7 y8 m# c' ~" o/ @) D
# B/ v) A8 i+ I0 A x+ l. h9 I |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
x
|