Комментарии на: Сеанс консольной магии: анализ access логов nginx'а.

От: Корчагин Станислав

Корчагин Станислав — Fri, 06 Mar 2009 08:21:20 +0000

Не эквивалентно, ибо “uniq -c” выдаст количество совпадений строк, а не ip’шников.

От: IlVin

IlVin — Fri, 06 Mar 2009 07:57:27 +0000

awk ‘ { requests_count_from_ips[$1]++ }
END { for (ip in requests_count_from_ips) { print requests_count_from_ips[ip] “: ” ip;
} }’ | sort -nr

Это плохой пример, если нужно пропарсить гигабайты упакованных логов
А гигабайты обрабатывает конструкция:

sort | uniq -c | awk ‘{ print $1 “: ” $2 }’ | sort -nr

Т.е.
awk ‘ { requests_count_from_ips[$1]++ }
END { for (ip in requests_count_from_ips) { print requests_count_from_ips[ip] “: ” ip;
} }’
Эквивалентно
sort | uniq -c

От: Корчагин Станислав

Корчагин Станислав — Wed, 28 Jan 2009 20:31:21 +0000

Цветовое кодирование? Можно пример?

От: Павел Воронин

Павел Воронин — Wed, 28 Jan 2009 20:26:36 +0000

Давно уже вдоль и поперёк изъезженная тема, но всё равно как садишься за консоль, аж волосы дыбом встают от ощущения магии. =)

Я, кстати, люблю ещё применять цветовое кодирование на основе каких-либо критериев. Awk по сути использует псевдо-C язык, я же предпочитаю писать анализаторы на awk в связке с PHP.

От: Станислав

Станислав — Tue, 25 Nov 2008 20:51:00 +0000

>idler комментирует…
> 2 секунды, 4 секунды…
> Это ни о чем не говорит – мощности машины ведь не >указаны
На самом деле это не особо важно. Главное, что это не 3 часа, а секунды.

От: Arceny

Arceny — Tue, 25 Nov 2008 01:59:00 +0000

Пофиксил ))

От: Arceny

Arceny — Tue, 25 Nov 2008 01:57:00 +0000

awk: cmd. line:5: END blocks must have an action part

От: idler

idler — Thu, 20 Nov 2008 10:45:00 +0000

2 секунды, 4 секунды…
Это ни о чем не говорит – мощности машины ведь не указаны

От: Lzh

Lzh — Wed, 12 Nov 2008 13:19:00 +0000

а не думаешь что оно уже где-нить реализовано? всетаки задача анализа логов не такая уж и редкая.

От: Станислав

Станислав — Wed, 12 Nov 2008 04:04:00 +0000

Ну так!

Одна из безумных идей - реализовать подобие fluent intarface для логов.

lmbLog('access.log')->filter(1, '192.168.0.1')->count(3)->groupby(8);