AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
Google-Bing-Mediago-Criteo开户
⚡️按条S5代理⚡️静态⚡️独享⚡️5G广告专用虚拟卡/U充值/高返点皇家代理IP⚡️#1性价比⚡️
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放
⚡️AdsPower:安全不封号,高效自动化Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️FB BM不限额,短id账单户
BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理
虚拟信用卡+独立站收款全球虚拟卡, 支持U充值各种主页、账单户、BM户(优势)⚡️TikTok企业户,bm户,账单户
IPCola原生住宅IP⚡️$1.8/条双ISP提供TK企业新户老户、谷歌新户老户PTM虚拟卡[全新卡BIN+高返点]FB虚拟卡⚡️消费越多返现越多
FB稳定代理/住宅IP/ADV50打五折 FB个号1块一个寻找顶级电商?AdsBranded等你!TK老户/国内外端口/预审/加白
SX.ORG 高质量代理⚡235+ 地区GG,FB,TK, 欧美源头, 欢迎合作广告位出租8500万高质量住宅IP,助力各种需求
虚拟卡返佣1%,国内持牌机构   
查看: 27424|回复: 26

[讨论] 求助从大文本中提取邮件地址

[复制链接]

38

主题

2564

广告币

2771

积分

高级会员

Rank: 4

积分
2771

社区QQ达人

发表于 2017-12-1 00:08:03 | 显示全部楼层 |阅读模式
本人有一个1G大的文本文件,里面是一些乱七八糟的文字,但是有部分邮箱地址 ,我想把这些邮箱地址提取出来 ,有什么好办法吗?试了好几个提取工具,连文本都打不开,打开文本超过5M就没反应了,有更好的办法吗?江湖救急!!谢谢!!!
- a7 h. V2 q! N& b& @/ y4 F+ N
相关帖子
回复

使用道具 举报

23

主题

1299

广告币

2244

积分

高级会员

Rank: 4

积分
2244

社区QQ达人

发表于 2017-12-1 00:14:04 | 显示全部楼层
PHP 一行一行的读取 然后从每一行里面正则表达式去匹配邮箱 应该是可以搞定的
回复 支持 1 反对 0

使用道具 举报

55

主题

105

广告币

647

积分

中级会员

Rank: 3Rank: 3

积分
647

社区QQ达人

发表于 2017-12-1 08:30:59 | 显示全部楼层
1G  分分钟搞定
回复 支持 反对

使用道具 举报

3

主题

38

广告币

58

积分

初级会员

Rank: 2

积分
58

社区QQ达人

发表于 2017-12-1 08:39:37 | 显示全部楼层
[\w!#$%&'*+/=?^_`{|}~-]+(?:\.[\w!#$%&'*+/=?^_`{|}~-]+)*@(?:[\w](?:[\w-]*[\w])?\.)+[\w](?:[\w-]*[\w])?
* W1 t1 M( ]! {- a; m3 P! h* K这个正则可以匹配,不过具体要用其他工具来实现匹配。

评分

参与人数 2广告币 +7 收起 理由
风儿 + 5 赞一个!
chable + 2 可以结合使用EMEDITOR

查看全部评分

回复 支持 反对

使用道具 举报

2

主题

314

广告币

444

积分

中级会员

Rank: 3Rank: 3

积分
444

社区QQ达人

发表于 2017-12-1 08:50:15 | 显示全部楼层
懂点编程的话用读取字节的IO函数读取加转换处理,3个G大小没问题,再大就用内存映射的方法。
& {/ f% H7 ^3 T' G
9 f# Q9 w" o. f不懂编程的话先将大文本分割成很多个小文件,再用你找到的那些工具处理。
QQ:2696779792
回复 支持 反对

使用道具 举报

60

主题

824

广告币

2051

积分

高级会员

Rank: 4

积分
2051

社区QQ达人

发表于 2017-12-1 09:46:01 | 显示全部楼层
hadoop,3个t也能给你搞了
回复 支持 反对

使用道具 举报

52

主题

762

广告币

1423

积分

高级会员

Rank: 4

积分
1423

社区QQ达人

发表于 2017-12-1 10:31:22 | 显示全部楼层
写个正则匹配。。。。
我是C罗!!!
回复 支持 反对

使用道具 举报

12

主题

1985

广告币

2564

积分

高级会员

Rank: 4

积分
2564

社区QQ达人

发表于 2017-12-1 12:07:47 | 显示全部楼层
各显神通.~~  我就找个漂亮的小妹 让她慢慢处理吧...
回复 支持 反对

使用道具 举报

38

主题

2564

广告币

2771

积分

高级会员

Rank: 4

积分
2771

社区QQ达人

 楼主| 发表于 2017-12-1 12:28:08 来自手机 | 显示全部楼层
大神真多啊!有没有现成的工具推荐一下?自己编程太麻烦了
回复 支持 反对

使用道具 举报

3

主题

38

广告币

58

积分

初级会员

Rank: 2

积分
58

社区QQ达人

发表于 2017-12-1 13:09:44 | 显示全部楼层
http://tool.oschina.net/regex#
9 S0 N/ W6 N; b! l本来想自己写一个python脚本,不过中午折腾rb格式,没折腾出来。3 c" F- A2 Y. W5 {# j$ Z5 Y
目前手动比较方便一点的就是,把内容放到上面这个正则工具里,点击右边的匹配邮箱,然后点击测试匹配。下面邮箱就全部匹配了。
; h  `) p3 Y; B+ A鼠标移动上去,拉取,选中,复制到其他txt,excel里。搞定。

评分

参与人数 1广告币 +5 收起 理由
风儿 + 5

查看全部评分

回复 支持 反对

使用道具 举报

103

主题

1827

广告币

2706

积分

高级会员

Rank: 4

积分
2706

社区QQ达人

发表于 2017-12-1 13:31:21 | 显示全部楼层
EDITPLUS+正则
回复 支持 反对

使用道具 举报

38

主题

2564

广告币

2771

积分

高级会员

Rank: 4

积分
2771

社区QQ达人

 楼主| 发表于 2017-12-1 17:15:30 | 显示全部楼层
大神们 是1G的文本文件 不可能手工粘贴上去。更不是一个文本编辑器能处理的
回复 支持 反对

使用道具 举报

27

主题

1057

广告币

2681

积分

高级会员

Rank: 4

积分
2681
发表于 2017-12-3 21:25:04 | 显示全部楼层
EmEditor(文本编辑器)。官方说的处理248G的文件也不在话下。然后用正则表达式把非邮箱的字符替换为空白,把邮箱留下就可以了。

点评

大神 我用 正则[-0-9a-zA-Z.+_]+@[-0-9a-zA-Z.+_]+\.[a-zA-Z]{2,4} 绿色高亮了所有EMAIL,问题是我如何给他取反呢?把不是emial的全部替换为空格呢?  详情 回复 发表于 2017-12-4 11:44
大神能给个正则表达式替换的例子吗?  详情 回复 发表于 2017-12-3 23:01

评分

参与人数 1广告币 +2 收起 理由
affempire + 2 NB!

查看全部评分

回复 支持 反对

使用道具 举报

38

主题

2564

广告币

2771

积分

高级会员

Rank: 4

积分
2771

社区QQ达人

 楼主| 发表于 2017-12-3 23:01:50 | 显示全部楼层
alibaba 发表于 2017-12-3 21:25  }2 k+ x; M2 ]7 C& `
EmEditor(文本编辑器)。官方说的处理248G的文件也不在话下。然后用正则表达式把非邮箱的字符替换为空白, ...

/ g1 |1 t0 }; _/ p大神能给个正则表达式替换的例子吗?
回复 支持 反对

使用道具 举报

19

主题

290

广告币

532

积分

中级会员

Rank: 3Rank: 3

积分
532

社区QQ达人

发表于 2017-12-4 00:39:19 | 显示全部楼层
本帖最后由 bjzhush 于 2017-12-4 00:45 编辑
$ W: |/ p5 S5 N1 P2 D6 E  U( s, q3 D5 t( y
花了几分钟帮你写了下
( M( x; t! T  V6 N+ z/ w例如源文件为这个txt5 b7 z. S( X4 {) [
➜  ~ cat x.txt' Z+ J9 T, p8 w, g1 v
hitest+ Q" e# u. Z! G7 r) Z3 P$ s, J
[email protected]
& d& Y  V4 E. {3 B$ \& qhi  [email protected] test1 j. b8 X, a2 {" \$ v
[email protected]  [email protected]7 ^5 q: c! c/ E) R$ P7 S
执行后,得到result.txt
  v! @% Q* U+ r  _) K➜  ~ cat result.txt 8 ?4 G' N& P7 R* @: E
[email protected]9 h' v* Q; U( z  Y* V1 Q6 u9 {2 s
[email protected]1 y! ~! y1 W& ]2 K+ S
[email protected]. d5 k6 W+ J# _" T# O7 W
[email protected]
7 f& U4 r2 j( K/ y7 Y# V
( T- J/ ]" e# t( ?; Z+ K代码如下:
/ |  V' O% C: X( Q* Y8 e8 c
  1. <?php/ ?3 M& j! I9 U# k& n5 v" d9 \
  2. $file = 'x.txt';  t( @/ G* n4 \' O; A4 l" P% j
  3. $fp = fopen($file, 'r');+ ]+ w$ F  q; n  I" d/ _, h+ b
  4. if (!$fp) {3 x7 E8 h7 z/ L. ~+ ~
  5.     exit('failed to open'.$file);
    6 [/ {2 Y& C: ]+ W( H: U
  6. }2 U; P$ b6 c8 ]' B3 p- |' |* S$ U; \- k
  7. $lineNumber = 0;4 o, `7 i+ k9 j* j
  8. while($line = fgets($fp)) {/ }/ s4 r* @. a
  9.     $lineNumber++;
    : F( S6 |7 E7 ~; L! X4 W/ ^/ f
  10.     $pattern = '/[a-z0-9_\-\+]+@[a-z0-9\-]+\.([a-z]{2,4})(?:\.[a-z]{2})?/i';- }5 r6 A, [2 k# _
  11.     preg_match_all($pattern, $line, $matches);. ^% j6 T- K" U- V7 v% j$ {
  12.     if (!empty($matches[0])) {8 c6 f  b* N1 v& q% {
  13.         foreach ($matches[0] as $mail) {
    4 s7 g& M2 D. v' [( s! X8 F
  14.             echo $mail.' found from line '.$lineNumber.PHP_EOL;
    * e( U: W( ~5 |
  15.             file_put_contents('result.txt', $mail.PHP_EOL, FILE_APPEND);
    1 c& H5 m+ {7 l0 W- }. ~% v
  16.         }
    2 G5 u+ X6 \% s, X: j7 t* e
  17.     }
    2 M5 R' _+ f9 f; e' k  C: u7 [
  18. }
    0 t/ \# [$ ^1 O  W) M
  19. echo "All Done";
    1 h$ U4 R5 m. ~* O' l  M: i
复制代码
功能:支持提取一行多个email地址,结果全部保存到result.txt ,没有做去重
# }1 q. t4 [& T/ V5 J7 M/ z使用:代码里面的源文件是x.txt ,可以换成你自己的文件名,php保存为getMail.php  然后  php getMail.php 结果保存在result.txt里面

点评

谢谢大神。你这个脚本处理速度快吗?我3G的文本文件多久能处理完呢?  详情 回复 发表于 2017-12-4 10:43

评分

参与人数 2广告币 +7 收起 理由
leeker + 5 乐于助人
iyahoo + 2 很给力!

查看全部评分

回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-2-1 23:45 , Processed in 0.053335 second(s), 15 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表