forum.bitel.ru
http://forum.bitel.ru/

Логи netflow не обрабатываются
http://forum.bitel.ru/viewtopic.php?f=22&t=11		 Страница 1 из 1
Автор:  Владимир Шмагин [ 06 дек 2006, 20:03 ]
Заголовок сообщения:  Логи netflow не обрабатываются
Вначале я написал письмо в техподдержку, но мне ответили, что лучше бы я изложил проблему на форуме, что и делаю.
Помогите пож-та, её решить.

Уважаемые сотрудники поддержки BGBilling!

Мы планируем приобрести вашу систему подсчёта биллинга. Но перед приобретением мне поручили проверить тестовый вариант на работоспособность. Я собрал тестовый стенд:

User 172.18.100.5/24 Winxp sp2
172.18.100.33/24 -cisco3640- 172.18.19.33
Server 172.18.100.35/24 W2003
Client 172.18.68.249 WinXP sp2

Предполагалось, что user входит через cisco в сеть, скачивает информацию, cisco по netflow передаёт данные серверу биллинга, который в соответствии с заданным договором и тарифами ведёт учёт трафика.

Однако, по невыясненной причине, логи в C:\BGIPNNetflowCollector\BGIPNNetFlowCollectorlog\source_1\ все нулевые и ничего не начисляется. Вроде бы всё делал по инструкции.

Прошу, если возможно, посмотреть конфиги и логи и помочь с решением проблемы.

Заранее благодарен,
Владимир Шмагин,
Инженер службы IT


Заведённые параметры:

Модули
Код Название Базовый модуль
2 Наши выд.каналы Модуль выделенных каналов

Услуги
Код Название
1 Внешний входящий
2 Внешний исходящий

Источник
Netflow адрес хоста 172.18.100.33

Тарифные планы
Общий план №1 – Наши выд.каналы – услуга вн вход, вн исход

Договор
Режим – кредит, Тарифные планы – Общий план№1, Модули – Наши выд.каналы, доступ открыт.

Конфиг cisco:

interface FastEthernet0/0
ip address 172.18.19.33 255.255.255.0
ip accounting output-packets
speed auto
full-duplex
no cdp enable
!
interface FastEthernet0/1
ip address 172.18.100.33 255.255.255.0
ip route-cache flow
duplex auto
speed auto
!
router ospf 1933
router-id 172.18.19.33
log-adjacency-changes
no capability lls
network 172.18.19.0 0.0.0.255 area 1
network 172.18.100.0 0.0.0.255 area 1
ip http server
no ip http secure-server
ip route 0.0.0.0 0.0.0.0 172.18.19.1
ip flow-export version 5
ip flow-export destination 172.18.100.35 7223


Работают 4 службы:

BGBillingServer
BGDataLoader
BGIPNNetflow
BGScheduler

C:\BGBillingServer\log>type scheduler.out
Checking port 9066...
Port is free starting the applicalion...
Starting TEProccessManager on 9066
Creating socket on 9066

C:\BGBillingServer\log\dataloader.out
Checking port 9033...
Port is free starting the applicalion...
Starting DLProcessManager on 9033
Creating socket on 9033


C:\BGIPNNetflowCollector\netflow_ipn.properties
port.admin=2003
port.netflow=7223

#код модуля IPN
collector.mid=2
#опции подключения к БД
db.driver=com.mysql.jdbc.Driver
db.url=jdbc:mysql://127.0.0.1/bgbilling?useUnicode=true&characterEncoding=Cp1251
db.user=bill
db.pswd=bgbilling
db.maxActive=300
db.maxIdle=100
#максимальное количество обрабатываемых параллельно пакетов
netflow.thread.count=10
#частота генерации заданий в минутах
#если опция не указана - генерация происходит только на границе часа
#generate.minutes=15
#где хранить логи (папка должна существовать и должны быть полные права на нее для процесса коллектора)
log.dir=c:\BGIPNNetFlowCollector\log
#обслуживаемые источники (через запятую коды источников биллинга которые обслуживает данный коллектор)
#коллектор принимает потоки и обрабатывает логи только этих источников
sources=1
#загружать логи
load=1
#обрабатывать логи
process=1

Содержимое папки C:\BGIPNNetflowCollector\BGIPNNetFlowCollectorlog\source_1\2006\12\05

05.12.2006 15:00 <DIR> .

05.12.2006 15:00 <DIR> ..

05.12.2006 00:03 0 log_00

05.12.2006 01:08 0 log_01

05.12.2006 02:08 0 log_02

05.12.2006 04:00 0 log_03

05.12.2006 05:00 0 log_04

05.12.2006 06:00 0 log_05

05.12.2006 07:00 0 log_06

05.12.2006 08:00 0 log_07

05.12.2006 09:00 0 log_08

05.12.2006 10:00 0 log_09

05.12.2006 10:56 0 log_10

05.12.2006 11:08 0 log_11

05.12.2006 12:08 0 log_12

05.12.2006 13:22 0 log_13

05.12.2006 14:00 0 log_14

05.12.2006 15:00 0 log_15

16 файлов 0 байт

2 папок 6 512 873 472 байт свободно


C:\BGIPNNetflowCollector\log\netflow.out - пустой

C:\BGIPNNetflowCollector\log\netflow.log

…..
DEBUG 05.12.2006 15:29:10 [pool-1-thread-7] Parsing NetFlow packet

DEBUG 05.12.2006 15:29:10 [pool-1-thread-7] NetFlow packet version 5; flowCount: 1

DEBUG 05.12.2006 15:29:10 [pool-1-thread-7] Parsing flows..

DEBUG 05.12.2006 15:29:10 [pool-1-thread-7] 1 Flow 2:172.18.100.5:1403 / 1:172.17.72.33:53 65 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:10 [pool-1-thread-7] End packet parsing..

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] Recieved packet from 172.18.100.33; length = 456 running thread..

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] Parsing NetFlow packet

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] NetFlow packet version 5; flowCount: 9

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] Parsing flows..

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 1 Flow 2:172.18.100.5:1053 / 1:172.17.72.33:53 62 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 2 Flow 2:172.18.100.5:1230 / 1:172.17.72.33:53 65 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 3 Flow 2:172.18.100.5:1044 / 1:172.17.72.33:53 130 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 4 Flow 2:172.18.100.5:1234 / 1:172.17.72.33:53 130 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 5 Flow 2:172.18.100.5:1403 / 1:172.17.72.33:53 167 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 6 Flow 2:172.18.100.5:1044 / 1:172.17.72.14:53 260 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 7 Flow 2:172.18.100.5:1234 / 1:172.17.72.14:53 260 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 8 Flow 2:172.18.100.5:138 / 0:172.18.100.255:138 229 nextHop: 0.0.0.0

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] 9 Flow 2:172.18.100.5:1235 / 1:172.17.72.33:53 65 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:34 [pool-1-thread-8] End packet parsing..

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] Recieved packet from 172.18.100.33; length = 360 running thread..

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] Parsing NetFlow packet

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] NetFlow packet version 5; flowCount: 7

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] Parsing flows..

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] 1 Flow 2:172.18.100.5:1403 / 1:172.17.72.14:53 1058 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] 2 Flow 2:172.18.100.5:1235 / 1:172.17.72.14:53 260 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] 3 Flow 2:172.18.100.5:1053 / 1:172.17.72.33:53 102 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] 4 Flow 2:172.18.100.5:1230 / 1:172.17.72.33:53 61 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] 5 Flow 2:172.18.100.5:2512 / 1:172.17.72.33:53 260 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] 6 Flow 2:172.18.100.5:1053 / 1:172.17.72.14:53 758 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] 7 Flow 2:172.18.100.5:1230 / 1:172.17.72.14:53 565 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:46 [pool-1-thread-9] End packet parsing..

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] Recieved packet from 172.18.100.33; length = 168 running thread..

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] Parsing NetFlow packet

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] NetFlow packet version 5; flowCount: 3

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] Parsing flows..

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] 1 Flow 2:172.18.100.5:2512 / 1:172.17.72.14:53 585 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] 2 Flow 2:172.18.100.5:3384 / 1:172.17.72.33:53 102 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] 3 Flow 2:172.18.100.5:3384 / 1:172.17.72.14:53 510 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:29:58 [pool-1-thread-10] End packet parsing..

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] Recieved packet from 172.18.100.33; length = 360 running thread..

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] Parsing NetFlow packet

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] NetFlow packet version 5; flowCount: 7

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] Parsing flows..

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] 1 Flow 2:172.18.100.5:1403 / 1:172.17.72.33:53 98 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] 2 Flow 2:172.18.100.5:1235 / 1:172.17.72.33:53 68 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] 3 Flow 2:172.18.100.5:3388 / 1:172.17.72.33:53 102 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] 4 Flow 2:172.18.100.5:1403 / 1:172.17.72.14:53 490 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] 5 Flow 2:172.18.100.5:1235 / 1:172.17.72.14:53 340 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] 6 Flow 2:172.18.100.5:3388 / 1:172.17.72.14:53 510 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] 7 Flow 2:172.18.100.5:3389 / 1:172.17.72.33:53 82 nextHop: 172.18.19.1

DEBUG 05.12.2006 15:30:11 [pool-1-thread-1] End packet parsing..

…….

(это был кусочек протокола - так он на несколько дней растянулся)




C:\BGIPNNetflowCollector\log\loader.log

…

DEBUG 05.12.2006 15:15:11 Load NetFlow packet from 172.18.100.33

DEBUG 05.12.2006 15:15:23 Load NetFlow packet from 172.18.100.33

DEBUG 05.12.2006 15:15:35 Load NetFlow packet from 172.18.100.33

….



C:\BGIPNNetflowCollector\log\generator.log



INFO 05.12.2006 15:00:07 Generating process tasks..

DEBUG 05.12.2006 15:00:07 mid => 2; time => 05.12.2006 14

DEBUG 05.12.2006 15:00:07 source => bitel.billing.server.load.bean.Source@fd9b97

INFO 05.12.2006 15:00:07 Add process task 2:1 05.12.2006 14

INFO 05.12.2006 15:00:07 Generate source data..

DEBUG 05.12.2006 15:01:07 Looking..

DEBUG 05.12.2006 15:02:07 Looking..

DEBUG 05.12.2006 15:03:07 Looking..

DEBUG 05.12.2006 15:04:07 Looking..

DEBUG 05.12.2006 15:05:07 Looking..

DEBUG 05.12.2006 15:06:07 Looking..







C:\BGIPNNetflowCollector\log>dataloader.log



INFO 05.12.2006 14:00:08 Processing source:1 time: 2006-12-05 13:00:00.0

INFO 05.12.2006 14:00:08 proccess [ 05-12-2006 13:00:00; mid => 2; param => 1

rts => 0; errors => 0; time => 31 ms.

INFO 05.12.2006 15:00:07 Processing source:1 time: 2006-12-05 14:00:00.0

INFO 05.12.2006 15:00:07 proccess [ 05-12-2006 14:00:00; mid => 2; param => 1

ts => 0; errors => 0; time => 16 ms.







C:\BGIPNNetflowCollector\log\collector.log



INFO 05.12.2006 13:22:07 Starting BG NetFlow collector for IPN..

INFO 05.12.2006 13:22:07 Reload source list.

INFO 05.12.2006 13:22:07 IP: 172.18.100.33 => 1

INFO 05.12.2006 13:22:07 Load => true; process => true

INFO 05.12.2006 13:22:07 Starting NetFlow listener on port 7223

INFO 05.12.2006 14:00:13 FLUSH 1

INFO 05.12.2006 15:00:03 FLUSH 1







Окружение Windows



C:\BGIPNNetflowCollector\log>path

PATH=C:\WINDOWS\system32;C:\WINDOWS;C:\WINDOWS\System32\Wbem;c:\Program Files\Java\jdk1.5.0_09\bin



C:\BGIPNNetflowCollector\log>set

ALLUSERSPROFILE=C:\Documents and Settings\All Users

APPDATA=C:\Documents and Settings\administrator\Application Data

BGBILLING_SERVER_DIR=C:\BGBillingServer

BGIPN_NETFLOW_HOME=c:\BGIPNNetflowCollector

CLIENTNAME=WS205

ClusterLog=C:\WINDOWS\Cluster\cluster.log

CommonProgramFiles=C:\Program Files\Common Files

COMPUTERNAME=SOHO

ComSpec=C:\WINDOWS\system32\cmd.exe

FARHOME=C:\Program Files\Far

FARLANG=Russian

FP_NO_HOST_CHECK=NO

HOMEDRIVE=C:

HOMEPATH=\Documents and Settings\administrator

JAVA_HOME=c:\Program Files\Java\jdk1.5.0_09

LOGONSERVER=\\SOHO

NUMBER_OF_PROCESSORS=4

OS=Windows_NT

Path=C:\WINDOWS\system32;C:\WINDOWS;C:\WINDOWS\System32\Wbem;c:\Program Files\Java\jdk1.5.0_09\bin

PATHEXT=.COM;.EXE;.BAT;.CMD;.VBS;.VBE;.JS;.JSE;.WSF;.WSH

PROCESSOR_ARCHITECTURE=x86

PROCESSOR_IDENTIFIER=x86 Family 15 Model 2 Stepping 9, GenuineIntel

PROCESSOR_LEVEL=15

PROCESSOR_REVISION=0209

ProgramFiles=C:\Program Files

PROMPT=$P$G

SESSIONNAME=RDP-Tcp#2

SystemDrive=C:

SystemRoot=C:\WINDOWS

TEMP=C:\DOCUME~1\ADMINI~1\LOCALS~1\Temp\2

TMP=C:\DOCUME~1\ADMINI~1\LOCALS~1\Temp\2

USERDOMAIN=SOHO

USERNAME=administrator

USERPROFILE=C:\Documents and Settings\administrator

windir=C:\WINDOWS
Автор:  Администратор [ 07 дек 2006, 14:36 ]
Заголовок сообщения: 
Попробуйте загрузить этот коллектор и поставить взамен существующего.
http://bgbilling.bitel.ru/patch/BGIPNNe ... or_4.0.zip
Страница 1 из 1 Часовой пояс: UTC + 5 часов [ Летнее время ]
Powered by phpBB® Forum Software © phpBB Group
http://www.phpbb.com/