|
|
本帖最后由 朝阳风雨 于 2022-4-13 23:48 编辑 / C5 o; |2 r# o# f, c- `& w) s
) }. \ |5 A$ q+ B5 n 我的一个网站，从3月21号开始，大量的网页的索引被移除。我一开始还以为是谷歌算法的影响，一开始也没有理它。但是最近发现越来越不对了。即使受到更新的影响，也不可能一下子来源谷歌的完全被拔毛，又不是采集站。非常诡异的曲线。点击快掉光了。而且我没有收到任何谷歌人工操作的提醒。
3 i+ M. ]) M f: m3 z4 g4 C% t" S& I8 B( I. a" q
% J" f8 Q- S7 P! H" Q
9 S1 b( ^* U7 n6 G3 F% |& d( v# ?4 w* I" ?' K1 }9 z; H
今天有空瞄了一眼网站工具，发现这索引不对啊，已经开始掉了一半了。然后我仔细一查，基本上所有的文章的索引都被移除了。
3 @& Y! g: D! \3 W9 ^, M/ z7 S
4 ~. h, e v( M; B: m6 a v
, }$ f5 `+ M4 ?) S$ Q+ O然后看看哪些被移除的，发现网页可以正常访问，但是谷歌抓取就是抓取不了。真是奇怪。抓取的时候，会提示Page fetch错误：Failed: Blocked due to access forbidden (403)。这个太不可思议了。网站已经运行了几年了，怎么现在出现这个问题？
+ A; G* N" I6 T* E9 F( w# x/ I8 d! m( w: g7 U
/ T- L" f H( W4 l3 l
我把所有的插件都禁止后，发现问题依然存在。然后联系了bluehost客服。他们说我的网站的robots.txt是没有的。那就真的诡异了。没有我之前的网站怎么能抓取到呢？robots.txt是这样的现在。
8 X9 X8 g. r6 K9 F/ w- User-agent: *
+ @5 s/ L* d$ B' g0 ] - Disallow: /wp-admin/
4 Y2 |) ~( i Y - Allow: /wp-admin/admin-ajax.php
! v1 M% e3 c' i A( o- C - ) z9 y5 v" Z& ^! f1 z" B
- Sitemap: https://xxxxx.com/wp-sitemap.xml
% K8 C- n2 h! t/ i2 M7 g& I
我发现论坛这2天已经有几个人碰到被黑的情况，大家有空多检查下。我这个网站这次也是被黑的话，已经第二次了。。。! ~! G4 g# \; }* s: [
, C8 U6 m$ `) I) u1 S
已找到原因，CDN引起的，但是具体问题还在排查。。。4 r1 v* o* x, ]# I7 |0 E# y
0 W; t: k0 f/ X, k8 x* r |
本帖子中包含更多资源
您需要 登录 才可以下载或查看，没有账号？立即注册
x
|
发表于 2022-4-13 22:05:35
发表于 2022-4-13 22:14:38
楼主
发表于 2022-4-14 07:01:24
发表于 2022-4-14 07:41:56
