|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 6 q3 g h$ R1 g* `0 U
3 g& ~/ r/ S% [. f 我的一个网站，从3月21号开始，大量的网页的索引被移除。我一开始还以为是谷歌算法的影响，一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响，也不可能一下子来源谷歌的完全被拔毛，又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。
& m# j9 F6 j5 E4 U& s* e, e# M: I. ]% g9 F; Z' z- t
. [2 R1 o/ L( _+ k! N
/ U5 I g1 Q4 p& H, \6 d
2 a" Z6 r$ K5 k 今天有空瞄了一眼网站工具，发现这索引不对啊，已经开始掉了一半了。然后我仔细一查，基本上所有的文章的索引都被移除了。
4 c% t; s; U7 ~% J* c: R" t) M+ H% O4 {7 ^1 ~% C6 I5 p
+ s* F8 D9 L- D6 z! Y
然后看看哪些被移除的，发现网页可以正常访问，但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候，会提示Page fetch错误：Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了，怎么现在出现这个问题？
/ {% b+ a S. I0 {# ~/ w0 Z6 F
2 d+ |8 T" E6 ]- ^: q' f$ t
2 @# k1 N7 z5 z' G: Z4 a. v我把所有的插件都禁止后，发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢？robots.txt是这样的现在。
- w" ]8 N% \8 W" D) g3 r- User-agent: *" h. |! i5 S8 P( _5 A+ _# Y
- Disallow: /wp-admin/
/ h+ u( X( L6 V, Q+ t- L. J - Allow: /wp-admin/admin-ajax.php
/ U1 g. R; D- W; ^
6 o, _3 R3 X! G( G: w: _- Sitemap: https://xxxxx.com/wp-sitemap.xml
5 s/ o/ o1 I# }
我发现论坛这2天已经有几个人碰到被黑的情况，大家有空多检查下。我这个网站这次也是被黑的话，已经第二次了。。。4 o4 `; r/ Q' W6 P3 x1 B3 \
/ G2 @ Z4 D/ _3 U' ^已找到原因，CDN引起的，但是具体问题还在排查。。。
' N% W$ B5 H ]7 i' d
+ n* p. S5 B, u |
本帖子中包含更多资源
您需要 登录 才可以下载或查看，没有账号？立即注册
x
|
发表于 2022-4-13 22:05:35
发表于 2022-4-13 22:14:38
楼主
发表于 2022-4-14 07:01:24
发表于 2022-4-14 07:41:56
