BiTel

Форум BiTel
bgbilling.ru     docs.bitel.ru     wiki.bitel.ru     dbinfo.bitel.ru     bgcrm.ru     billing.bitel.ru     bitel.ru    
Текущее время: 27 апр 2024, 15:27

Часовой пояс: UTC + 5 часов [ Летнее время ]




Начать новую тему Ответить на тему  [ Сообщений: 10 ] 
Автор Сообщение
 Заголовок сообщения: подсчет трафика в связке с flow-tools
СообщениеДобавлено: 17 дек 2008, 11:22 
Не в сети

Зарегистрирован: 12 фев 2008, 16:11
Сообщения: 485
Карма: 12
Вроде все настроил, трафик стал считать, только есть огромное различие м/у содержимым в логах flow-tools и обработанным трафиком.
Если смотреть в логах, то есть и вх и исх трафик, вх -130Мб за один час, а в отчете исх трафика нет, вх показывает 2,1 Гб за этот же час. 310Мб - против 3,5 Гб. Почему такая ограмная разница. На другом IP в логах 500кб, в статистике 41Мб, 1,9Мб против 35,6Мб.
Почему нет исх трафика. План привязок есть.


Вложения:
ipn.gif
ipn.gif [ 14.8 КБ | Просмотров: 8191 ]
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 18 дек 2008, 10:42 
Не в сети

Зарегистрирован: 12 фев 2008, 16:11
Сообщения: 485
Карма: 12
Up


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 18 дек 2008, 12:59 
Не в сети

Зарегистрирован: 12 фев 2008, 16:11
Сообщения: 485
Карма: 12
Промониторил 1 день (24часа), получилось по одному ip - netflow - 5.470Гб, по отчету - 69,58Гб, по другому ip - netflow - 63.926Mб, по отчету - 715Мб. Почему разница в 10-12 раз. Где чего смотреть.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 18 дек 2008, 15:49 
Не в сети
Разработчик

Зарегистрирован: 27 ноя 2006, 20:36
Сообщения: 5715
Карма: 93
1) Посмотрите Сервис-Журнал ошибок по модулю ошибок нет обработки.
2) Попробуйте разобраться по статье:
http://wiki.bgbilling.ru/index.php/%D0% ... 1%80%D0%B0


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 23 дек 2008, 12:58 
Не в сети

Зарегистрирован: 12 фев 2008, 16:11
Сообщения: 485
Карма: 12
Посмотрел, выходит такая ситуация. После конвертации в строке есть адрес назначения, нет адреса источника и наоборот. Хотя в сырых логах netflow все есть. Может такая ситуация возникала у кого-нибудь??????


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 24 дек 2008, 16:29 
Не в сети
Разработчик

Зарегистрирован: 27 ноя 2006, 20:36
Сообщения: 5715
Карма: 93
К следующей версии делаем штатный импорт из flow-tools логов, а то вечная головная боль со сторонними конверторами..


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 24 дек 2008, 17:11 
Не в сети
Клиент

Зарегистрирован: 12 фев 2008, 18:10
Сообщения: 3951
Карма: 249
вопрос наверное глупый, но ... почему бы не хранить данные в формате flow-tools? тогда файлы можно было бы обрабатывать не только биллингом, но и массой сторонних утилит :)


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 24 дек 2008, 18:30 
Не в сети
Разработчик
Аватара пользователя

Зарегистрирован: 19 дек 2006, 21:04
Сообщения: 5970
Карма: 256
Тут встает вопрос о sFlow, а также о сборе статистике по SNMP, которая сейчас в разработке.
В 4.6 будет новый формат логов с поддержкой сжатия, чтения в несколько потоков и записи в различных форматах в raw
(NetFlow/sFlow/SNMP, т.е. внутри лога они будут дежать как есть).
Также будет поддержка поля ToS/DS в NetFlow/sFlow, нескольких файлов для часового лога
и использование в качестве исходных логов - логов в формате flowtools.
Ну и, наверно, сделаем потоковый экспорт, чтобы можно было сделать примерно так:
Код:
export.sh -source6 -h2008-12-24-16 | flow-report


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 24 дек 2008, 19:11 
Не в сети
Клиент

Зарегистрирован: 12 фев 2008, 18:10
Сообщения: 3951
Карма: 249
Amir писал(а):
Тут встает вопрос о sFlow
...
В 4.6 будет новый формат логов с поддержкой сжатия, чтения в несколько потоков и записи в различных форматах в raw
(NetFlow/sFlow/SNMP, т.е. внутри лога они будут дежать как есть).

может тогда взять формат у nfdump? там и поддержка sflow есть и масса утилит которыми удобно файлы обрабатывать, в т.ч. и утилита конвертации :)

Amir писал(а):
о сборе статистике по SNMP, которая сейчас в разработке.

если позволите, то чуть-чуть подсоблю ;) см. МП


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re:
СообщениеДобавлено: 09 апр 2010, 15:54 
Не в сети

Зарегистрирован: 08 сен 2009, 20:05
Сообщения: 2
Карма: 0
snark писал(а):
может тогда взять формат у nfdump? там и поддержка sflow есть и масса утилит которыми удобно файлы обрабатывать, в т.ч. и утилита конвертации :)
в этом направлении есть новости ? в частности каким образом настроить работу обработчика нетфлоу бгбиллинга с nfdump'ом ?

я особо с вопросом подсунуть вывод "аля" флоу-тулс не задовался, как-то не очень хочется десяток трансляций делать формата логов, равно так же как и не хочется совсем использовать flow-tools.


Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 10 ] 

Часовой пояс: UTC + 5 часов [ Летнее время ]


Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
POWERED_BY
Русская поддержка phpBB
[ Time : 0.090s | 39 Queries | GZIP : On ]