|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑
1 g0 D2 E+ B x3 v' r# f( P/ ?0 @% u7 u2 R4 z, Y1 h+ m
我的一个网站,从3月21号开始,大量的网页的索引被移除。我一开始还以为是谷歌算法的影响,一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响,也不可能一下子来源谷歌的完全被拔毛,又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。
5 b5 J7 W/ u% e+ f2 h4 p0 t# }% i# O4 D3 ^& }
6 ]1 p1 o" n6 K' h5 b% P- j8 @
) |$ E5 O! s3 L& Q' l3 y# f. S, l6 K2 Q% K8 X* D0 A9 H% R
今天有空瞄了一眼网站工具,发现这索引不对啊,已经开始掉了一半了。然后我仔细一查,基本上所有的文章的索引都被移除了。
4 a G, R/ h. o r1 W8 f
3 S* W$ Y' J- h/ g. H+ R5 s8 U- j/ y' e$ L; h, p
然后看看哪些被移除的,发现网页可以正常访问,但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候,会提示Page fetch错误:Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了,怎么现在出现这个问题?3 u$ v. g# f) f" ? J% _2 {3 @, Z
( k \8 R1 F3 [
, m: V' Z9 L8 B! R) j0 E; O( [2 A& k我把所有的插件都禁止后,发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢?robots.txt是这样的现在。5 i+ G* Z- O& ?' L
- User-agent: *, ~* e& `2 N* X; n4 L5 n
- Disallow: /wp-admin/
4 z! B! O$ R! w# s" _3 j - Allow: /wp-admin/admin-ajax.php1 I( \7 f4 b4 c9 a Q
- % N7 I. ^" S4 |
- Sitemap: https://xxxxx.com/wp-sitemap.xml
复制代码 然后他们改了之后,我发现用了谷歌的url测试工具还是抓取不到,太坑了。$ _0 d( N4 ~2 B2 e W2 a& }
0 S8 G0 K$ \9 n# N, w我发现论坛这2天已经有几个人碰到被黑的情况,大家有空多检查下。我这个网站这次也是被黑的话,已经第二次了。。。
4 Q, Z" U- m$ i9 Q: `" m, K# X# _8 ^$ n9 r4 e! [% F
已找到原因,CDN引起的,但是具体问题还在排查。。。4 s5 E- X+ Q! U
! |# k( B, @# Q8 e2 \& b
|
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|