The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  ВХОД  слежка  RSS
"Squid+SARG ! Help me ..... "
Вариант для распечатки  
Пред. тема | След. тема 
Форумы Настройка Squid и других прокси серверов (Public)
Изначальное сообщение [Проследить за развитием треда]

"Squid+SARG ! Help me ..... " 
Сообщение от Vlad Искать по авторуВ закладки(??) on 26-Май-05, 14:54  (MSK)
Система RedHat Linix 9 Squid 2.5 Stable 9
Комп !! 2.4 Mhz Пень 40 Gb винт

Поставил SARG 2.0.7
маленькие логи достаточно быстро анализировал ... но вот лог разросся и
SARG висит .... причем считывет лог нормально далее я смотрю по процессам возникает процесс SORT текущих IP ... и вот на 2 IP где лог поболее и зависает ..... процесс длится долго оч .и загружает проц на 96 процентов .
читал что пишут ..писал ( export lc_all=c export lc_all=a) ничего не помогает .. после получаса -40 минут висения я вырубаю...
Буду оч благодарен за умные мысли ...... а то голова пухнет

  Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

 Оглавление

Индекс форумов | Темы | Пред. тема | След. тема
Сообщения по теме

1. "Squid+SARG ! Help me ..... " 
Сообщение от Admin Искать по авторуВ закладки(??) on 27-Май-05, 02:53  (MSK)
Не забивай винт тонами файлов SARGа. Возьми www.internet-office.kiev.ua, там для Squid есть хороший анализатор, ставить правда дольше (используется MySQL), но отчетов куча


  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

3. "Squid+SARG ! Help me ..... " 
Сообщение от Junior emailИскать по авторуВ закладки(ok) on 27-Май-05, 07:49  (MSK)
>Не забивай винт тонами файлов SARGа. Возьми www.internet-office.kiev.ua, там для Squid есть
>хороший анализатор, ставить правда дольше (используется MySQL), но отчетов куча


Самый неумный совет какой только может быть по вопросу. "Купи другой анализатор". Зачем??? Если можно нормально разрулить и эту ситуацию.
Вы получаете процент с продажи? Уже не первый топик с этой дурацкой рекламой.

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

5. "Squid+SARG ! Help me ..... " 
Сообщение от Admin Искать по авторуВ закладки(??) on 27-Май-05, 14:16  (MSK)
>Самый неумный совет какой только может быть по вопросу. "Купи другой анализатор".
>Зачем??? Если можно нормально разрулить и эту ситуацию.
>Вы получаете процент с продажи? Уже не первый топик с этой дурацкой
>рекламой.

Совет умный. У меня 3 Гб логов в месяц. Использовал SARG полгода. Но как дать статистику каждому пользователю отдельно, по отделам. К тому же объемы для SARG слишком большие. Пришлось поставить новую программу. Вот и решил посоветовать человеку как правильно делать, а Вы говорите "Зачем???"

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

6. "Squid+SARG ! Help me ..... " 
Сообщение от Junior emailИскать по авторуВ закладки(ok) on 27-Май-05, 14:23  (MSK)
>>Самый неумный совет какой только может быть по вопросу. "Купи другой анализатор".
>>Зачем??? Если можно нормально разрулить и эту ситуацию.
>>Вы получаете процент с продажи? Уже не первый топик с этой дурацкой
>>рекламой.
>
>Совет умный. У меня 3 Гб логов в месяц. Использовал SARG полгода.
>Но как дать статистику каждому пользователю отдельно, по отделам. К тому
>же объемы для SARG слишком большие. Пришлось поставить новую программу. Вот
>и решил посоветовать человеку как правильно делать, а Вы говорите "Зачем???"
>

Ерунда. У меня каждодневно обрабатывает многогиговый лог и ничего. Тот же сарг. Так что дело в железе и в руках. Посему - ерунда.

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

2. "Squid+SARG ! Help me ..... " 
Сообщение от ipmanyak Искать по авторуВ закладки(??) on 27-Май-05, 06:40  (MSK)
>Система RedHat Linix 9 Squid 2.5 Stable 9
>Комп !! 2.4 Mhz Пень 40 Gb винт
>
>Поставил SARG 2.0.7
>маленькие логи достаточно быстро анализировал ... но вот лог разросся и
>SARG висит .... причем считывет лог нормально далее я смотрю по процессам
>возникает процесс SORT текущих IP ... и вот на 2 IP
>где лог поболее и зависает ..... процесс длится долго оч .и
>загружает проц на 96 процентов .
>читал что пишут ..писал ( export lc_all=c export lc_all=a) ничего не помогает
>.. после получаса -40 минут висения я вырубаю...
>Буду оч благодарен за умные мысли ...... а то голова пухнет
возможно не хватает места в tmp

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

4. "Squid+SARG ! Help me ..... " 
Сообщение от Junior emailИскать по авторуВ закладки(ok) on 27-Май-05, 08:01  (MSK)
>Система RedHat Linix 9 Squid 2.5 Stable 9
>Комп !! 2.4 Mhz Пень 40 Gb винт
>
>Поставил SARG 2.0.7
>маленькие логи достаточно быстро анализировал ... но вот лог разросся и
>SARG висит .... причем считывет лог нормально далее я смотрю по процессам
>возникает процесс SORT текущих IP ... и вот на 2 IP
>где лог поболее и зависает ..... процесс длится долго оч .и
>загружает проц на 96 процентов .
>читал что пишут ..писал ( export lc_all=c export lc_all=a) ничего не помогает
>.. после получаса -40 минут висения я вырубаю...
>Буду оч благодарен за умные мысли ...... а то голова пухнет

Как уже подсказал ipmanyak, посмотри сколько места в разделах.
# df
# du -sh
Если /tmp маловат для этого - измени в конфиге сарга временную папку на тот каталог, где достаточно места и включи опцию удаления временных файлов из этого каталога. Включи опцию перезаписи статистики за период, чтобы не плодить кучу каталогов для одного и того же дня. Тогда данные будут просто добавляться к существующим, а не создаваться новые. Ну и для контроля запусти сарг с опциями вывода отладочной информации и расширенного вывода в STDOUT (опции -z и -x).
Так же не мешало бы всё-таки делать регулярную ротацию логов, чтобы не создавать многие гигабайты логов. Лучше использовать данные из нескольких логов при необходимости составить отчёт за год, чем ежедневно мослать монстрообразный файл, имхо.

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

7. "Squid+SARG ! Help me ..... " 
Сообщение от Vlad Искать по авторуВ закладки(??) on 27-Май-05, 14:38  (MSK)
В ТМP места предостаточно
а файл в 8 метров обрабатывается 1 час .... ну это же ерунда
когда я в тмп 1 Гиг свободно писал ......
эх что за муть

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

8. "Squid+SARG ! Help me ..... " 
Сообщение от Junior emailИскать по авторуВ закладки(ok) on 27-Май-05, 14:55  (MSK)
>В ТМP места предостаточно
>а файл в 8 метров обрабатывается 1 час .... ну это же
>ерунда
>когда я в тмп 1 Гиг свободно писал ......
>эх что за муть


Ну так запусти сарг с отладкой.

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

9. "Squid+SARG ! Help me ..... " 
Сообщение от ipmanyak Искать по авторуВ закладки(??) on 27-Май-05, 16:18  (MSK)
должен заметить, это проблема рх9 с обработкой Unicode sort'ом.
фикс проблемы:
во первых буковки нада писать большие !
export LC_ALL=C  
#env LC_ALL=C /sbin/sarg
второе прочитай ветку http://www.opennet.me/openforum/vsluhforumID12/2117.html  
насчет программы сортировки  из кореутилс и текстутилс
цитата:
Проблема вообщем-то решилась:
проц 1.7
три пользователя
нагрузки нет
Опытным путем было установлено:
На серваке 9-я шапка у нее прога сорт из кореутилс
вот именно она и жрала ресурсы проца
вставил текстутилс обработала 21метр логов за 1 минуту

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

10. "Squid+SARG ! Help me ..... " 
Сообщение от Vlad Искать по авторуВ закладки(??) on 27-Май-05, 16:39  (MSK)
>должен заметить, это проблема рх9 с обработкой Unicode sort'ом.
>фикс проблемы:
>во первых буковки нада писать большие !
>export LC_ALL=C
>#env LC_ALL=C /sbin/sarg
>второе прочитай ветку http://www.opennet.me/openforum/vsluhforumID12/2117.html
>насчет программы сортировки  из кореутилс и текстутилс
>цитата:
>Проблема вообщем-то решилась:
>проц 1.7
>три пользователя
>нагрузки нет
>Опытным путем было установлено:
>На серваке 9-я шапка у нее прога сорт из кореутилс
>вот именно она и жрала ресурсы проца
>вставил текстутилс обработала 21метр логов за 1 минуту


Писал Буковки большие ....
вот вданый момент собственно  и запустил LC_ALL=C /usr/bin/sarg -z
Файл 2 метра а делат он его 40 минут .... ну не хрень ли ..
>второе прочитай ветку http://www.opennet.me/openforum/vsluhforumID12/2117.html
>насчет программы сортировки  из кореутилс и текстутилс
а ветка уже удалена ...
<вставил текстутилс обработала>   -- а что надо сделать конкретно
может я что то и не понимаю ... подскажите плиз

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

11. "Squid+SARG ! Help me ..... " 
Сообщение от Vlad Искать по авторуВ закладки(??) on 27-Май-05, 17:33  (MSK)

**********************

ТЕМУ СНИМАЮ !!! ДОБИЛСЯ нескольких секунд при объеме файла 200 метров

*******************
Решение
поставил текстутилс !!

ВСЕМ СПАСИБО !

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

12. "Squid+SARG ! Help me ..... " 
Сообщение от ipmanyak Искать по авторуВ закладки(??) on 30-Май-05, 08:37  (MSK)
>
>
>**********************
>
>ТЕМУ СНИМАЮ !!! ДОБИЛСЯ нескольких секунд при объеме файла 200 метров
>
>*******************
>Решение
>поставил текстутилс !!
>
>ВСЕМ СПАСИБО !
поделись с обществом как поставил текстутилс !

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх

13. "Squid+SARG ! Help me ..... " 
Сообщение от Vlad Искать по авторуВ закладки(??) on 30-Май-05, 11:03  (MSK)

>поделись с обществом как поставил текстутилс !


Да всё оказалось проще чем я думал ... я скачал таровский архив textutils
разорхиваровал его ...далее проинтсталлил его
./configure
make
make install
он откомпилил все утилитки ..и я просто заменил старый SORT на данный ...
и всё запахало со свистом !

Удачи всем !

  Удалить Правка | Высказать мнение | Ответить | Рекомендовать в FAQ | Cообщить модератору | Наверх


Архив | Удалить

Индекс форумов | Темы | Пред. тема | След. тема
Оцените тред (1=ужас, 5=супер)? [ 1 | 2 | 3 | 4 | 5 ]
Пожалуйста, прежде чем написать сообщение, ознакомьтесь с данными рекомендациями.




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру