|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 ! j: l# i6 e/ _$ }+ H
. P& x$ c6 p6 [$ v) [( Z+ g 我的一个网站，从3月21号开始，大量的网页的索引被移除。我一开始还以为是谷歌算法的影响，一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响，也不可能一下子来源谷歌的完全被拔毛，又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。
: R% G6 ]& ]' l0 ]4 W$ c9 ` f3 ^4 T9 x( i; a
+ ~& f9 \& \0 e# @/ X
d1 K; N! b4 X* q0 W
- { g' X9 [: g9 Y
今天有空瞄了一眼网站工具，发现这索引不对啊，已经开始掉了一半了。然后我仔细一查，基本上所有的文章的索引都被移除了。$ h1 }7 i% N9 G: J$ ?- |& _' R
1 v, a) F$ y% I" F" h! i5 R/ v% n0 h. w' b
然后看看哪些被移除的，发现网页可以正常访问，但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候，会提示Page fetch错误：Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了，怎么现在出现这个问题？
2 `) I0 o7 p, I9 f' Y1 q- d. n6 `5 r8 y
8 j6 H! J( j5 ?" r3 G5 q2 P- a
我把所有的插件都禁止后，发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢？robots.txt是这样的现在。
6 F3 T- k/ d( F( F1 Z" {- User-agent: *; C8 q$ F/ t9 c- C( [
- Disallow: /wp-admin/
/ y+ O4 s7 U/ ~) i& R% r+ p, ^ - Allow: /wp-admin/admin-ajax.php* L0 V0 a- C+ p3 |' s1 Y% W+ N
- 4 q: v0 r" l# R, w2 B [
- Sitemap: https://xxxxx.com/wp-sitemap.xml
5 X' Z1 A* d3 E. ^% V! L: \我发现论坛这2天已经有几个人碰到被黑的情况，大家有空多检查下。我这个网站这次也是被黑的话，已经第二次了。。。
# u: P, l: [: ]5 W4 a6 c" `# Q7 a* o& ^: |
已找到原因，CDN引起的，但是具体问题还在排查。。。
- z# D J; T/ F/ ^. e* R+ t L0 z
* a6 c$ U P# \. ~% C; ^( B |
本帖子中包含更多资源
您需要 登录 才可以下载或查看，没有账号？立即注册
x
|
发表于 2022-4-13 22:05:35
发表于 2022-4-13 22:14:38
楼主
发表于 2022-4-14 07:01:24
发表于 2022-4-14 07:41:56
