|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑
) Y2 u- ^) L4 _% ^- o7 q* f+ `; M& z6 I, z% d2 |$ B0 Z
我的一个网站，从3月21号开始，大量的网页的索引被移除。我一开始还以为是谷歌算法的影响，一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响，也不可能一下子来源谷歌的完全被拔毛，又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。
* k9 l' ]- [/ G( a+ R5 N# B2 o$ b
3 \* l: y: U0 Q7 |' ]9 u
$ o$ M) O3 e: g% {& l
( g2 d8 Z9 D4 g- { g- w0 A% q0 @3 Y2 v. ^& U$ z# Z3 |
今天有空瞄了一眼网站工具，发现这索引不对啊，已经开始掉了一半了。然后我仔细一查，基本上所有的文章的索引都被移除了。
/ Z7 I, L- ^! q$ `
# p4 w! h0 e' ]9 F4 |/ i9 X- v# Y% ~
然后看看哪些被移除的，发现网页可以正常访问，但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候，会提示Page fetch错误：Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了，怎么现在出现这个问题？( v0 Z0 @ r: \3 u5 W2 E
& }. z7 l4 P8 O; C& a
) j, `: k. l* e* o* t- m% q我把所有的插件都禁止后，发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢？robots.txt是这样的现在。
% O, {8 _- Y2 q# d$ {2 y- User-agent: *' ?6 o+ m1 L5 ]( p& H+ c
- Disallow: /wp-admin/ l0 E5 d [) y
- Allow: /wp-admin/admin-ajax.php% f }+ t4 b( [4 \ i' ^/ N+ ]
- - F- M }. n) X
- Sitemap: https://xxxxx.com/wp-sitemap.xml
( J. i/ n8 U1 i! o, @: y
- {0 \; w& C! }# w$ X4 ]我发现论坛这2天已经有几个人碰到被黑的情况，大家有空多检查下。我这个网站这次也是被黑的话，已经第二次了。。。
/ Y5 i1 m& E5 B x. B
; i- P6 U! t; ]* _7 N, j: [已找到原因，CDN引起的，但是具体问题还在排查。。。
; b# k$ ?: r9 ?, h2 g- m. V6 K) @1 k5 ?# a
|
本帖子中包含更多资源
您需要 登录 才可以下载或查看，没有账号？立即注册
x
|
发表于 2022-4-13 22:05:35
发表于 2022-4-13 22:14:38
楼主
发表于 2022-4-14 07:01:24
发表于 2022-4-14 07:41:56
