|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 . f" b1 R U1 m2 F }
/ Z1 W: c4 l+ i. ? 我的一个网站,从3月21号开始,大量的网页的索引被移除。我一开始还以为是谷歌算法的影响,一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响,也不可能一下子来源谷歌的完全被拔毛,又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。" a4 H8 v* P& |2 N; k* y
; b2 t" }* g5 W9 c/ a* N/ M
+ z( f7 K0 @0 f0 \1 s& C; d' u# o7 q& |* g7 B3 q
2 }8 c& L7 @! d1 b/ y, s6 t' L' f 今天有空瞄了一眼网站工具,发现这索引不对啊,已经开始掉了一半了。然后我仔细一查,基本上所有的文章的索引都被移除了。 Y$ O) i! r) Y$ H
, l' }& Z. M) Z$ ~% i/ `" o$ C
, K+ f9 N4 m/ o% N- t% x* M然后看看哪些被移除的,发现网页可以正常访问,但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候,会提示Page fetch错误:Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了,怎么现在出现这个问题?+ |& i3 u R* l( k9 t0 {3 h
! w# ~4 y9 f+ r0 j) Z, Z
+ M8 {# p! u! ~. G, a我把所有的插件都禁止后,发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢?robots.txt是这样的现在。
$ M0 W& U, A3 g. e* a- User-agent: *' x) w2 N1 c6 L, i5 F- N
- Disallow: /wp-admin/
( v! E$ c& N+ G% {9 ~. P$ W - Allow: /wp-admin/admin-ajax.php
% Y8 U& T/ {5 J" I; Q7 W' m - ) H# C# n& S' j4 r! M4 _2 K
- Sitemap: https://xxxxx.com/wp-sitemap.xml
复制代码 然后他们改了之后,我发现用了谷歌的url测试工具还是抓取不到,太坑了。: u7 P+ {% K; r) Y# ?' C2 n
1 ? x- d- V% U
我发现论坛这2天已经有几个人碰到被黑的情况,大家有空多检查下。我这个网站这次也是被黑的话,已经第二次了。。。) J8 R9 K2 ?$ A
' z6 J" A" O0 `+ S
已找到原因,CDN引起的,但是具体问题还在排查。。。
$ R& C. I9 t0 {: ]- Q r5 \; ~5 {7 b v1 f3 r: I5 H2 w u) _) L- L X
|
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|