【请教】怎么统计网站的log数据？

妃子笑

大家好啊，从网站的服务器上下载了www.abc.com_nginx.log
: O7 p+ y' A7 I
3 |7 Z& C$ d2 K想看看log数据。
! B1 I) b4 {1 H) v: f" A4 s+ |
但是数据比较分散、杂乱：
, `' ~' l& y1 b6 e' I( @
203.208.60.10 - - [10/Aug/2019:06:25:06 +0800] "GET /pba.html HTTP/1.1" 200 17416 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
, [: k7 ^! t4 w/ P4 ^& D123.125.71.105 - - [10/Aug/2019:06:25:09 +0800] "GET /tag/forty-seven HTTP/1.1" 301 5 "-" "Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"
$ [& n& Q: v) g3 j8 G' d5 K123.125.71.32 - - [10/Aug/2019:06:25:10 +0800] "GET /tag/forty-seven/ HTTP/1.1" 200 36940 "-" "Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"
* h0 n% c( c+ w7 {  B# t2 M6 N: o203.208.60.124 - - [10/Aug/2019:06:25:10 +0800] "GET /cari.html HTTP/1.1" 200 13978 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
" W: m# y8 c) ]2 P. `) F+ h185.86.164.102 - - [10/Aug/2019:06:25:13 +0800] "GET /wp-login.php HTTP/1.1" 301 178 "-" "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.103 Safari/537.36"
203.208.60.105 - - [10/Aug/2019:06:25:14 +0800]
/ t) P& D" o. k- v. e

5 x0 D4 h% T/ i) }+ [上面这种数据有几十M，我想按IP统计下，按照每个IP访问次数多少从高到低排列，并且显示每个IP访问的次数，要怎么弄呢？
' _, T. @' n& e8 {
. L& {. a5 e. f$ N( D1 q& H' P我之前见过别人的，但是不知道怎么弄？用notepad++还是excel统计呢？
& r& c& }0 y1 g" E/ n% m6 M
谢谢！@_@
7 S2 x& v+ Z: I8 l6 I6 X* `4 m

$ F, {* f* [( i2 ]) e

老刘

谷歌统计不好吗？
% @; ?' [* k: v2 Q- d6 @7 A" ?) Z
非要看LOG，可以搜索一下LOG分析工具。
: F# @8 |" O$ Y3 D! ?: V* X

dookey

搜一下 goaccess 吧 可以统计log

妃子笑

/ V0 Y% x7 R" P& h; n, |

老刘 发表于 2019-8-10 12:31
+ u8 H0 d- |3 V, l+ Y. O0 c. H谷歌统计不好吗？
7 y/ b1 l9 o8 y" w. b* C% U8 f+ m
* [  j& t- ]7 g6 t+ w非要看LOG，可以搜索一下LOG分析工具。

好的，谢谢！不过我的是中文站，加谷歌搜索会变慢吧？

妃子笑

dookey 发表于 2019-8-10 15:12
搜一下 goaccess 吧 可以统计log

7 A0 H" F: T  p: K4 W& m) W好的，谢谢啦，我找找。

syoi489

用linux命令其实很简单，参考https://blog.csdn.net/zhangkaiadl/article/details/92763221

河小马

对你来，可能excel 更简单一点

妃子笑

河小马 发表于 2019-8-13 14:30
对你来，可能excel 更简单一点

是啊，小河马，我就想用excel排列一下，但是不知道怎么弄。一直没弄好。

小码农

awk '{print $1}' nginx.log |sort -n|uniq -c|sort -rn|head        

妃子笑

小码农 发表于 2019-8-27 13:24
& T2 l; ?4 ~% Qawk '{print $1}' nginx.log |sort -n|uniq -c|sort -rn|head

谢谢，我差不多就是用这个方式看的，一般看前20名，有问题就都揪出来了，。呵呵！谢谢你啊！

小码农

妃子笑 发表于 2019-8-11 13:45
好的，谢谢！不过我的是中文站，加谷歌搜索会变慢吧？

中文站用百度也行。