AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

Binom
 谷歌+Bing+TT+MSN官方代理 
⚡️按条S5代理⚡️静态⚡️独享⚡️5G⚡️最干净<Wifi住宅+5G移动>IP代理指纹浏览器,就用AdsPower
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利广告开户独立站⚡️开户投放
DuoPlus专注打造跨境电商云手机E.PN 虚拟卡BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具
MediaGo+Taboola+Ob开户百度国际MediaGo⚡️让产品狂奔全球百度国际,高点击转化,快速放量百度国际MediaGo,独家原生流量
ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值
Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户(优势)⚡️个人户,bm户不限额,账单户一手BM分享户不限额9Proxy ⚡️ $0.04/IP, 无限带宽
FB二三解0.1元一个虚拟卡|PTM星际卡FB专用虚拟卡Google、Bing官方总代  联盟流量开户
FB账号资源/稳定靠谱/运行5年啦FB开户代投/三不限/白名单fb耐用号0.01一个fb账号官方合作商
搜索套利开户❤️Bigo/Kwai/MediagoFB资源,账单户,分享户,国内一手FB企业户BM户账单户源头广告位出租
查看: 25573|回复: 23

[吐槽] 网站没有流量,爬虫的到是不少

[复制链接]

6

主题

199

广告币

239

积分

初级会员

Rank: 2

积分
239
发表于 2020-9-28 19:43:03 | 显示全部楼层 |阅读模式
回复

使用道具 举报

79

主题

3919

广告币

5676

积分

版主

Rank: 7Rank: 7Rank: 7

积分
5676

社区QQ达人

发表于 2020-9-28 20:05:36 | 显示全部楼层
你这个是防爬的吧?关注内容,不用关注太多这些东西吧

点评

还是需要的。。。。服务的资源,绝大部分都给无量爬虫占据了。。。。 没事的时候,设置一个access log。。。就能看到了 爬虫太狠了  详情 回复 发表于 2020-9-28 21:04
回复 支持 反对

使用道具 举报

1621

主题

2万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
29734

社区QQ达人

发表于 2020-9-28 21:04:15 | 显示全部楼层
建网站以后,很大一部分资源都给爬虫搞走了" o$ C: ?. f/ M+ ^- J$ F3 x; u
; N, F  d, k4 l, p3 M' \, h* f
我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写nginx 规则要简单和省事的多

点评

要是爬内容的用谷歌的蜘蛛身份怎样破?防火墙怎样设置好点  详情 回复 发表于 2020-9-29 09:11
谢谢 河马  详情 回复 发表于 2020-9-29 08:55
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

1621

主题

2万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
29734

社区QQ达人

发表于 2020-9-28 21:04:58 | 显示全部楼层
朝阳风雨 发表于 2020-9-28 20:05
% n% T! z# `: [( \% S5 {你这个是防爬的吧?关注内容,不用关注太多这些东西吧

% z; k+ w  s  K* E. G8 a. l- W9 h& \( [还是需要的。。。。服务器的资源,绝大部分都给无量爬虫占据了。。。。. m) s& v& ^( J! i: ?% j& T
3 u4 L2 b1 d9 ^' ^' S
没事的时候,设置一个access log。。。就能看到了
2 J) c" W# t. p. |: w$ I1 X( O/ r' ^- U7 P/ Z  }8 n
爬虫太狠了

点评

这样就没有收录了,更不好  详情 回复 发表于 2020-9-29 08:56
偷懒用虚拟主机的我 还是算了 对我访问没有啥影响  详情 回复 发表于 2020-9-28 21:06
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

79

主题

3919

广告币

5676

积分

版主

Rank: 7Rank: 7Rank: 7

积分
5676

社区QQ达人

发表于 2020-9-28 21:06:38 | 显示全部楼层
河小马 发表于 2020-9-28 21:043 G- N4 N0 Y' Y0 W3 D
还是需要的。。。。服务器的资源,绝大部分都给无量爬虫占据了。。。。8 ?( y4 {4 m# Q
( U9 f4 G$ k) J  o7 S! Y7 o, l
没事的时候,设置一个access log ...
8 M1 d. Z# H/ _& l
偷懒用虚拟主机的我  还是算了 对我访问没有啥影响

点评

虚拟主机,一般都直接屏蔽了  详情 回复 发表于 2020-9-28 21:09
回复 支持 反对

使用道具 举报

1621

主题

2万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
29734

社区QQ达人

发表于 2020-9-28 21:09:27 | 显示全部楼层
朝阳风雨 发表于 2020-9-28 21:060 M3 E0 j# x2 h" H. s9 Y
偷懒用虚拟主机的我  还是算了 对我访问没有啥影响
+ s& ?4 F! m' S6 a5 p6 ~; |) }3 Q
虚拟主机,一般都直接屏蔽了

点评

那就省事快捷了  详情 回复 发表于 2020-9-28 21:13
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

79

主题

3919

广告币

5676

积分

版主

Rank: 7Rank: 7Rank: 7

积分
5676

社区QQ达人

发表于 2020-9-28 21:13:42 | 显示全部楼层
河小马 发表于 2020-9-28 21:093 B: D, H# ~) X+ d& [) J% T
虚拟主机,一般都直接屏蔽了

* @1 b) g3 |# i# H3 ~. T) ^那就省事快捷了
回复 支持 反对

使用道具 举报

6

主题

199

广告币

239

积分

初级会员

Rank: 2

积分
239
 楼主| 发表于 2020-9-29 08:55:25 | 显示全部楼层
河小马 发表于 2020-9-28 21:04
' i, u" ^1 Q6 Y, v5 M建网站以后,很大一部分资源都给爬虫搞走了
* y6 N1 \. h) h9 c3 W& E- B$ V/ B4 w7 a; E' M0 r4 d, Q
我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写 ...

' G" D$ ]) b6 @" v5 `谢谢 河马
回复 支持 反对

使用道具 举报

23

主题

72

广告币

162

积分

初级会员

Rank: 2

积分
162
发表于 2020-9-29 08:56:57 | 显示全部楼层
河小马 发表于 2020-9-28 21:04
, u$ J) [$ z9 t9 q/ \# |2 X& ~还是需要的。。。。服务器的资源,绝大部分都给无量爬虫占据了。。。。
% I7 \, r; b# m7 C- N
: \2 g* J& A2 J0 n) \9 U% X没事的时候,设置一个access log ...
* V$ N4 x% y" B& |2 A
这样就没有收录了,更不好

点评

爬的,我看主要都是php 路径的,关键我网站不是 php的呀  发表于 2020-9-29 09:27
回复 支持 反对

使用道具 举报

94

主题

2108

广告币

2992

积分

高级会员

Rank: 4

积分
2992

社区QQ达人

发表于 2020-9-29 09:05:14 | 显示全部楼层
强迫症表示, ~*  "(php|wget)" 不香么
回复 支持 反对

使用道具 举报

94

主题

2108

广告币

2992

积分

高级会员

Rank: 4

积分
2992

社区QQ达人

发表于 2020-9-29 09:11:36 | 显示全部楼层
河小马 发表于 2020-9-28 21:04* o" l0 C" a- R; u. k- U2 s/ O
建网站以后,很大一部分资源都给爬虫搞走了
$ v: [/ S6 e5 b3 ?% g" r
; X0 t' P8 r; d) K/ F+ I# e我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写 ...
3 t5 g# C  T$ y' Z7 F' m3 S9 I
要是爬内容的用谷歌的蜘蛛身份怎样破?防火墙怎样设置好点

点评

CF的防火墙,自动默认允许世界知名的搜索引擎的蜘蛛  详情 回复 发表于 2020-9-29 16:12
回复 支持 反对

使用道具 举报

23

主题

72

广告币

162

积分

初级会员

Rank: 2

积分
162
发表于 2020-9-29 09:32:01 | 显示全部楼层
我才不搞这些花里胡哨的屏蔽爬虫,一不小心搞降权了就亏大了,配置不够就升级,有投入才有收入
回复 支持 反对

使用道具 举报

584

主题

1935

广告币

3703

积分

金牌会员

Rank: 6Rank: 6

积分
3703
发表于 2020-9-29 11:03:42 | 显示全部楼层
用的是VPS,不懂代码,网站内容也被能去不少,干着急,没办法。
回复 支持 反对

使用道具 举报

15

主题

676

广告币

1027

积分

禁止访问

QQ:1582939837

积分
1027
发表于 2020-9-29 11:52:23 | 显示全部楼层
河小马 发表于 2020-9-28 21:04
2 G; }4 i. q0 a3 k建网站以后,很大一部分资源都给爬虫搞走了' {- |2 x- o. Q" z# F, B) M

; j, f, L) }! C- s: E我一般都是在cloudflare 的firewall 那里直接屏蔽爬虫,比你写 ...
$ }6 B! ]/ }4 [5 c3 u" Z3 z6 n
请问cloudflare 的firewall ,这种功能是免费的还是PRO收费版本?
; X) {+ N7 d* l  q* x/ |  x8 m
+ P2 p2 f9 c' z) }如果是免费的,可以知道下具体怎么操作么?

点评

免费的 CF的文档写的很清楚,自己看下文档就好了  详情 回复 发表于 2020-9-29 16:09
代收联盟款(PP或ACH)。物美价廉主机。 ieasyweb.com 着陆页设计。weebly pro版月费仅官网半价。aivoicer.com文字转语音。ufoforest.com低成本网店
回复 支持 反对

使用道具 举报

1621

主题

2万

广告币

2万

积分

管理员

宇宙无敌河马天神

Rank: 9Rank: 9Rank: 9

积分
29734

社区QQ达人

发表于 2020-9-29 16:09:42 | 显示全部楼层
加拿大华人 发表于 2020-9-29 11:523 d6 L6 O! q# O6 y5 k
请问cloudflare 的firewall ,这种功能是免费的还是PRO收费版本?1 M+ q0 ^. \+ L; E. K3 G

1 j5 y, ^8 ]/ Y6 X7 a" V如果是免费的,可以知道下具体怎么操 ...
  W. S+ w6 q9 i* |* U, z
免费的
. x, @2 \8 p# ~5 r1 ?; N! Y  i( [
4 }5 ]. }+ q  x. h4 VCF的文档写的很清楚,自己看下文档就好了
学会提问的艺术, 从小处入手, 忌大而空
AdvertCN电报群

我最喜欢用的工具
7200W全球动态不重复住宅IP代理
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2024-12-22 09:07 , Processed in 0.051063 second(s), 14 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表