2010-07-10 38 views
0

我有从日志条目的列表:如何根据时间戳将记录分组到桶中?

15:38:52.363 1031 
15:41:06.347 1259 
15:41:06.597 1171 
15:48:44.115 1588 
15:48:44.125 1366 
15:48:44.125 1132 
15:53:14.525 1348 
15:53:15.121 1553 
15:53:15.181 1286 
15:53:15.187 1293 

第一个是时间戳,第二个是值。

现在我试图将它们分成20秒的时间间隔。我想要总结这些值,或者得到它们的平均值。我不知道最简单的方法是什么?最好我可以通过一些简单的shell脚本来做到这一点,所以我可以将我的grep语句放入并获得一个划分的列表。谢谢!

回答

1

这个gawk脚本完全忽略小数秒。它还一无所知从一开始就跨越到下一个(交叉00:00:00):

grep ... | awk -v interval=20 'function groupout() {print "----", "Timespan ending:", strftime("%T", prevtime), "Sum:", sum, "Avg:", sum/count, "----"} BEGIN {prevtime = 0} {split($1, a, "[:.]"); time = mktime(strftime("%Y %m %d") " " a[1] " " a[2] " " a[3]); if (time > prevtime + interval) {if (NR != 1) {groupout(); sum=0; count=0}}; print; sum+=$2; count++; prevtime = time} END {groupout()}' 

输出:

15:38:52.363 1031 
---- Timespan ending: 15:38:52 Sum: 1031 Avg: 1031 ---- 
15:41:06.347 1259 
15:41:06.597 1171 
---- Timespan ending: 15:41:06 Sum: 2430 Avg: 1215 ---- 
15:48:44.115 1588 
15:48:44.125 1366 
15:48:44.125 1132 
---- Timespan ending: 15:48:44 Sum: 4086 Avg: 1362 ---- 
15:53:14.525 1348 
15:53:15.121 1553 
15:53:15.181 1286 
15:53:15.187 1293 
---- Timespan ending: 15:53:15 Sum: 5480 Avg: 1370 ---- 

这又是其可读性:

awk -v interval=20 ' 
function groupout() { 
    print "----", "Timespan ending:", strftime("%T", prevtime), "Sum:", sum, "Avg:", sum/count, "----" 
} 
BEGIN { 
    prevtime = 0 
} 
{ 
    split($1, a, "[:.]"); 
    time = mktime(strftime("%Y %m %d") " " a[1] " " a[2] " " a[3]); 
    if (time > prevtime + interval) { 
     if (NR != 1) {groupout(); sum=0; count=0} 
    }; 
    print; 
    sum+=$2; 
    count++; 
    prevtime = time 
} 
END {groupout()}' 
相关问题