awk vs sql: предварительные результаты
- From
- Slawa Olhovchenkov (2:5030/500)
- To
- Valentin Davydov
- Date
- 2006-11-30T17:19:52Z
- Area
- RU.UNIX.BSD
Hello Valentin!
30 Nov 06, Valentin Davydov writes to Slawa Olhovchenkov:
>> VD> Когда (и если - мало ли на какие ограничения он может наткнуться) awk
>> VD> закончит свою работу, я, надеюсь, опубликую более подробные данные.
>>
>> А программу на awk оптимизировать пробовал? Написать на нем сначала
>> внешнюю ленточную сортировку, потом результать в один проход агрегировать.
VD> Я, пока писал вышеотквоченное, ещё решил sort | awk попробовать. Только
VD> ведь сортируй - не сортируй, всё равно промежуточные данные на диск должны
VD> лезть. Правда, с sortом всё не так чисто: при том количестве промежуточных
VD> файлов в $TMPDIR, которые он создаёт, ещё нормально работает dirhash. Но
VD> чтобы и это проверить, надо не просто много данных, а экспоненциально
VD> много, а у меня такого количества дисков и времени нету.
Т.е. sort|awk всех порвал?
... и молодая не узнает, какой у паpня был CONNECT...
--- GoldED+/BSD 1.1.5
* Origin: (2:5030/500)
SEEN-BY: 50/12 203 400/814 450/186 1024 451/30 550/196 4614/20 4635/4
SEEN-BY: 5000/5000 5011/13 5012/46 5015/28 5019/26 31 5020/154 175 400 545 549
SEEN-BY: 5020/758 1523 1604 1630 2142 2238 2395 2450 2590 2871 4441 5021/3 29
SEEN-BY: 5022/128 5025/3 750 5027/12 5029/32 5030/49 500 556 966 1063 1080
SEEN-BY: 5030/1900 1957 2828 5031/47 70 5035/38 5040/47 5042/13 5045/7 5049/50
SEEN-BY: 5049/97 5054/1 4 8 9 11 28 35 36 37 45 66 67 70 75 84 85 5055/95
SEEN-BY: 5059/9 37 5062/1 10 5063/3 5064/7 5076/1 5077/70 5080/80 1003 5082/6
SEEN-BY: 5083/21 5084/9 5085/13 5090/108 5094/4 5095/20 5096/18 5099/11
SEEN-BY: 6001/10
PATH: 5030/500 5020/4441 545 5054/1 37