【请教】怎么统计网站的log数据？

妃子笑

大家好啊，从网站的服务器上下载了www.abc.com_nginx.log
; i1 w7 O6 q4 L3 ?
: w: c/ E6 i' Q& Y  P想看看log数据。
- N) {1 \9 c0 B! E9 {1 `8 Z) f
但是数据比较分散、杂乱：
& D+ Q0 i( J' `; H
203.208.60.10 - - [10/Aug/2019:06:25:06 +0800] "GET /pba.html HTTP/1.1" 200 17416 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
/ S* }. x( f0 J, |* u123.125.71.105 - - [10/Aug/2019:06:25:09 +0800] "GET /tag/forty-seven HTTP/1.1" 301 5 "-" "Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"
123.125.71.32 - - [10/Aug/2019:06:25:10 +0800] "GET /tag/forty-seven/ HTTP/1.1" 200 36940 "-" "Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"
203.208.60.124 - - [10/Aug/2019:06:25:10 +0800] "GET /cari.html HTTP/1.1" 200 13978 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
185.86.164.102 - - [10/Aug/2019:06:25:13 +0800] "GET /wp-login.php HTTP/1.1" 301 178 "-" "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.103 Safari/537.36"
203.208.60.105 - - [10/Aug/2019:06:25:14 +0800]
, {" r5 e8 i5 B2 k. [

( z$ U* ?5 T# Q: X: w- f$ {% Y! c上面这种数据有几十M，我想按IP统计下，按照每个IP访问次数多少从高到低排列，并且显示每个IP访问的次数，要怎么弄呢？

我之前见过别人的，但是不知道怎么弄？用notepad++还是excel统计呢？
$ e$ U( w: n0 `3 L' E2 p8 m
! D( {6 i* K' w! ^: G9 q7 o# L谢谢！@_@
) F( p5 m6 p% w9 z

老刘

谷歌统计不好吗？
0 n8 ?( |" h. _, y/ K  ^) L/ b; x
5 U3 x! p+ ]- S: A$ Y7 l( l& R非要看LOG，可以搜索一下LOG分析工具。
# G" N8 O& Q# g( p3 @8 C% k" r

dookey

搜一下 goaccess 吧 可以统计log

妃子笑

5 b1 l, s% T+ r, `% I

老刘 发表于 2019-8-10 12:31
0 U0 s. a1 t2 m  o% H0 i2 O: a0 t谷歌统计不好吗？
( Z2 K" K! `, }1 k9 \. s
非要看LOG，可以搜索一下LOG分析工具。

- j$ H$ R' G6 A6 }好的，谢谢！不过我的是中文站，加谷歌搜索会变慢吧？

妃子笑

dookey 发表于 2019-8-10 15:12
- j8 ^& q) X. s1 [7 h2 z. s搜一下 goaccess 吧 可以统计log

/ @+ _+ b1 A  j: S, Q. i好的，谢谢啦，我找找。

syoi489

用linux命令其实很简单，参考https://blog.csdn.net/zhangkaiadl/article/details/92763221

河小马

对你来，可能excel 更简单一点

妃子笑

河小马 发表于 2019-8-13 14:30
对你来，可能excel 更简单一点

/ i% n% e6 @4 Y. f( g. u5 ?是啊，小河马，我就想用excel排列一下，但是不知道怎么弄。一直没弄好。

小码农

awk '{print $1}' nginx.log |sort -n|uniq -c|sort -rn|head        

妃子笑

小码农 发表于 2019-8-27 13:24
7 ~! a8 r1 x& F0 a6 C2 j# Xawk '{print $1}' nginx.log |sort -n|uniq -c|sort -rn|head

谢谢，我差不多就是用这个方式看的，一般看前20名，有问题就都揪出来了，。呵呵！谢谢你啊！

小码农

妃子笑 发表于 2019-8-11 13:45
& ~- W7 X, I' R$ F  e- D) U好的，谢谢！不过我的是中文站，加谷歌搜索会变慢吧？

& p. @+ ~8 q" S7 Z( k& i9 P5 a# G7 |中文站用百度也行。