AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

Binom
 谷歌+Bing+TT+MSN官方代理 
⚡️按条S5代理⚡️静态⚡️独享⚡️5G⚡️最干净<Wifi住宅+5G移动>IP代理指纹浏览器,就用AdsPower
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利广告开户独立站⚡️开户投放
DuoPlus专注打造跨境电商云手机E.PN 虚拟卡BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具
MediaGo+Taboola+Ob开户百度国际MediaGo⚡️让产品狂奔全球百度国际,高点击转化,快速放量百度国际MediaGo,独家原生流量
ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值
Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户(优势)⚡️个人户,bm户不限额,账单户一手BM分享户不限额9Proxy ⚡️ $0.04/IP, 无限带宽
FB二三解0.1元一个虚拟卡|PTM星际卡FB专用虚拟卡Google、Bing官方总代  联盟流量开户
FB账号资源/稳定靠谱/运行5年啦FB开户代投/三不限/白名单fb耐用号0.01一个fb账号官方合作商
广告位出租   
查看: 13227|回复: 11

[讨论] 现在采集用什么软件?

[复制链接]

82

主题

631

广告币

1184

积分

中级会员

Rank: 3Rank: 3

积分
1184

社区QQ达人

发表于 2016-4-1 11:13:23 | 显示全部楼层 |阅读模式
WordPress博客,想手动采集一部分,文字、图片、链接之类的,采集好之后直接发布,有什么采集软件或者采集脚本吗?
. w- G. z/ B) T/ c8 V& o( owprobot这个玩意儿好不好用?  i! b3 j5 K% p" G
- V3 e1 x8 z6 y  c' T
相关帖子
回复

使用道具 举报

3

主题

903

广告币

1942

积分

高级会员

Rank: 4

积分
1942

社区QQ达人

发表于 2016-4-1 11:33:24 | 显示全部楼层
回复 支持 反对

使用道具 举报

82

主题

631

广告币

1184

积分

中级会员

Rank: 3Rank: 3

积分
1184

社区QQ达人

 楼主| 发表于 2016-4-1 11:44:12 | 显示全部楼层
yinliang 发表于 2016-4-1 11:33
5 c# S' b( ~# d/ V6 D6 w火车头
" f/ A1 S" r7 a& M0 z" R0 x
谢谢回复!( w- `% R+ [3 f* B+ H
火车头是不是必须要买收费版本的?& ~0 J& F& H5 }- Z) ^
另外火车头可以直接写到WordPress数据库吗?
0 x- ^9 b9 c/ j/ n
回复 支持 反对

使用道具 举报

3

主题

903

广告币

1942

积分

高级会员

Rank: 4

积分
1942

社区QQ达人

发表于 2016-4-1 11:47:14 | 显示全部楼层
gresh 发表于 2016-4-1 11:44
9 q; C, x2 ?& G* v2 Y: h, x谢谢回复!! q* V+ C: G5 H5 c" m
火车头是不是必须要买收费版本的?4 N8 D6 `, S5 H6 a' K
另外火车头可以直接写到WordPress数据库吗?

+ ]* d5 Z- M6 i: [; m) W4 r' Y) S有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法
回复 支持 反对

使用道具 举报

82

主题

631

广告币

1184

积分

中级会员

Rank: 3Rank: 3

积分
1184

社区QQ达人

 楼主| 发表于 2016-4-1 12:52:26 | 显示全部楼层
yinliang 发表于 2016-4-1 11:47- s! e9 Z! g+ J  ?1 ~# n2 L
有破解版本的,另外,写数据库,这个是我自己写的脚本,你看有没有其它方法 ...
, s- Q; Q8 S2 }- C
自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考?
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
发表于 2016-4-1 13:16:04 | 显示全部楼层
gresh 发表于 2016-4-1 12:52
( T, t$ p) q: x# l8 C- T自己写!太厉害了,不知道这个脚本网上有没有什么教程,或者如何编写的资料可以参考? ...

0 ?+ D  m" \) [) U- f3 i" J可以参考火车头的wp免登陆接口,调用wp自身的发布函数,效率很高
回复 支持 反对

使用道具 举报

82

主题

631

广告币

1184

积分

中级会员

Rank: 3Rank: 3

积分
1184

社区QQ达人

 楼主| 发表于 2016-4-1 14:32:54 | 显示全部楼层
阿百川 发表于 2016-4-1 13:16! O' q9 v$ D1 t# e
可以参考火车头的wp免登陆接口,调用wp自身的发布函数,效率很高

0 ?2 w4 H; D, y  m3 d非常感谢,我去找一下
回复 支持 反对

使用道具 举报

103

主题

1819

广告币

2699

积分

高级会员

Rank: 4

积分
2699

社区QQ达人

发表于 2016-4-1 17:06:28 | 显示全部楼层
gresh 发表于 2016-4-1 14:32" w3 h. ^! H' K
非常感谢,我去找一下
6 H$ B7 p  f# a2 I
淘宝上几块钱就能解决9 `, |& t$ O7 O/ y9 K8 U
火车头是无论如何得学会使用的,学会火车头其他任何采集软件基本手到擒拿!
回复 支持 反对

使用道具 举报

18

主题

499

广告币

765

积分

中级会员

Rank: 3Rank: 3

积分
765

社区QQ达人

发表于 2016-4-1 19:20:38 | 显示全部楼层
wordpress发布模块9 w9 `1 x7 _. I7 S5 C% w) T
在網上求的,沒測試能否使用* h$ ~5 l+ |+ f; x0 {; q0 @9 l7 `$ j
http://pan.baidu.com/s/1ge6Bg8j
回复 支持 反对

使用道具 举报

82

主题

631

广告币

1184

积分

中级会员

Rank: 3Rank: 3

积分
1184

社区QQ达人

 楼主| 发表于 2016-4-1 20:58:04 | 显示全部楼层
kc0203 发表于 2016-4-1 19:202 l. r, @& _6 _4 C" e0 _3 a
wordpress发布模块; c$ c0 }7 a/ @) A9 ^
在網上求的,沒測試能否使用
, n& a- o1 _" b$ n; n  L+ Ehttp://pan.baidu.com/s/1ge6Bg8j
' ^* q8 Q& q2 S7 a5 K5 j
非常感谢,我在火车头论坛也看到很多插件,我先试试看!
回复 支持 反对

使用道具 举报

0

主题

7

广告币

17

积分

新手上路

Rank: 1

积分
17
发表于 2016-5-3 16:43:52 | 显示全部楼层
看自身需求,火车头有能采集的,也有不能采集的,还需要自己写规则,必然要懂点程序,不会的话,可以试试八爪鱼,话说都是收费的。
回复 支持 反对

使用道具 举报

6

主题

114

广告币

154

积分

初级会员

技术流 / 爬虫党

Rank: 2

积分
154
发表于 2016-5-3 17:22:28 | 显示全部楼层
我这边公司主业之一是帮人抓数据,我并不是要在这推广我们公司业务,只是提点小建议:
  F9 S' ~; G+ }# K1. 简单网站的话,用火车头八爪鱼之类的,比较好。简单不简单的判断在于,页面数量,是否更新频率非常高,是否需要分布式抓取,是否ajax网站,对方反爬机制是否很强大。比如说,你打算抓点新闻或者一些博客这种量级的需求,那桌面小软件还是可以的。
0 a: |* t# o8 k. V. p7 V+ `2. 火车头的好处并不是抓取本身,而是有很多的再发布模块可用,这个确实很省事。如果不考虑发布模块,那其实很多免费的软件可用,包括一些是全可视化操作的,非常方便6 ]' C. P  O* k% j( T$ c/ S
3. 如果你需要抓取的源网站逻辑比较复杂,而且你的时间成本还比较高的话,那你还是上淘宝找个人帮你做好火车头的规则把,如你时间成本高,那性价比还是不错的4 q1 i' a! E1 U( e; d" C
4. 对于那些逻辑复杂且极强反爬策略的,那还是考虑换个数据源把,自己做,花大量时间还不见得能成功抓取,如果找别人抓取,那成本也不低
http://www.jiashidata.com/gg/
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2024-11-25 21:49 , Processed in 0.054455 second(s), 18 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表