forum.bitel.ru http://forum.bitel.ru/ |
|
Задержка в загрузке логов http://forum.bitel.ru/viewtopic.php?f=10&t=12983 |
Страница 1 из 1 |
Автор: | leliksuperr [ 27 июл 2018, 12:30 ] |
Заголовок сообщения: | Задержка в загрузке логов |
Добрый день! После обновления сервера при старых настройках появилась задержка в загрузке логов телефонии. То есть логи за 00 часов появляются только в 07 часов. С чем это может быть связано? Сервер: вер. 7.0.1395 / 20.07.2018 14:03:22 os: Linux; java: Java HotSpot(TM) 64-Bit Server VM, v.1.8.0_45 assist: вер. 7.0.94 / 14.03.2018 16:02:44 bill: вер. 7.0.143 / 10.07.2018 15:42:56 card: вер. 7.0.51 / 07.06.2018 16:41:02 dba: вер. 7.0.170 / 14.03.2018 16:03:34 drweb: вер. 7.0.78 / 14.03.2018 16:03:36 email: вер. 7.0.185 / 14.03.2018 16:03:39 inet: вер. 7.0.918 / 12.07.2018 11:28:02 npay: вер. 7.0.216 / 31.05.2018 15:53:21 payonline: вер. 7.0.83 / 23.04.2018 16:09:07 phone: вер. 7.0.312 / 10.07.2018 15:43:08 qiwi: вер. 7.0.57 / 14.03.2018 16:04:42 reports: вер. 7.0.245 / 12.07.2018 15:45:37 rscm: вер. 7.0.190 / 31.05.2018 15:53:23 ru.bitel.bgbilling.plugins.bonus: вер. 7.0.135 / 20.07.2018 14:03:55 ru.bitel.bgbilling.plugins.cladr: вер. 7.0.126 / 14.03.2018 16:03:33 ru.bitel.bgbilling.plugins.crm: вер. 7.0.204 / 20.07.2018 14:03:56 ru.bitel.bgbilling.plugins.dispatch: вер. 7.0.100 / 20.07.2018 14:03:56 ru.bitel.bgbilling.plugins.documents: вер. 7.0.186 / 20.07.2018 14:03:57 ru.bitel.bgbilling.plugins.helpdesk: вер. 7.0.201 / 20.07.2018 14:03:58 ru.bitel.bgbilling.plugins.organizer: вер. 7.0.78 / 14.03.2018 16:04:15 subscription: вер. 7.0.48 / 14.03.2018 16:05:11 trayinfo: вер. 7.0.181 / 14.03.2018 16:05:14 tv: вер. 7.0.298 / 10.07.2018 15:42:47 voiceip: вер. 7.0.210 / 08.06.2018 14:17:18 Окружение: Сервер: os: Linux amd64, 3.2.0-4-amd64 java: Java HotSpot(TM) 64-Bit Server VM, v.1.8.0_45 jre home: /opt/java/jdk1.8.0_45/jre default tz: 27.07.2018 10:28 SAMT +0400 (Europe/Samara) memory (use/total/max): 93M/238M/238M db time: master: 27.07.2018 10:28 SAMT db charset: connection: utf8(utf8_unicode_ci), database: utf8(utf8_unicode_ci) locale: ru_RU uptime: Started: 23.07.2018 16:38:16 Uptime: 3 d 17:50:11 |
Автор: | dimOn [ 27 июл 2018, 16:18 ] |
Заголовок сообщения: | Re: Задержка в загрузке логов |
ну так а загружаются они во сколько реально DataLoader-ом? |
Автор: | dimOn [ 27 июл 2018, 16:21 ] |
Заголовок сообщения: | Re: Задержка в загрузке логов |
Логи как готовятся, не сбились таймштампы на них итд, они реально появляются в 00 где нужно? Конвертер не тупит, не задерживает их? итд итп - это всё необходимая информация, если вы хотите чуть более расширенный ответ, чем "наверное что-то сломалось или вы неправильно настроили" |
Автор: | leliksuperr [ 27 июл 2018, 17:30 ] |
Заголовок сообщения: | Re: Задержка в загрузке логов |
Логи готовятся с задержкой в 2 часа (так настроено изначально, проблем не было). Конвертер не тупит и не задерживает, то есть лог за 00 часов должен (а до обновления так и было) загружался в 02 часа. На данный момент к 09 часам на сервере находятся логи с 00 по 07 часов (загрузка идет по ftp). Но загружается и обрабатывается только за 00 часов и не более. Если руками добавить загрузку из источника за имеющиеся периоды, загрузчик все равно ищет файл 9 часовой давности, его загружает, и более вперед не продвигается до следующей по расписанию загрузке. Причем непонятна именно задержка в 9 часов, а не в 2 или любое другое время. Генератор заданий на загрузку логов запускается каждый час, установка баланса телефонии тоже, переход в след. месяц тоже есть. Расписание не менялось уже 2 года |
Автор: | zavndw [ 27 июл 2018, 20:29 ] |
Заголовок сообщения: | Re: Задержка в загрузке логов |
а вы смотрели логи DataLoader? и главный вопрос логи планировщика? и вы его перезапускали после обновления? Может забыли |
Автор: | dimOn [ 28 июл 2018, 18:20 ] |
Заголовок сообщения: | Re: Задержка в загрузке логов |
ну да, первым делом логи надо смотреть что именно делает даталоадер |
Автор: | leliksuperr [ 31 июл 2018, 16:39 ] |
Заголовок сообщения: | Re: Задержка в загрузке логов |
Сервер обновляли, все останавливали и заново запускали, все как обычно. Логи Dataloader: Код: 07-31/14:15:07 INFO [Thread-27] dataloader - 64679 Load data from: /var/ftp/pub/CDR/2018/07/31_13.zip 07-31/14:15:07 INFO [Thread-28] dataloader - 64671 Load data from: /var/ftp/pub/CDR/2018/07/31_05.zip 07-31/14:15:08 INFO [Thread-28] dataloader - 64671 Set to load /var/ftp/pub/CDR/2018/07/31_05.zip 07-31/14:15:08 INFO [Thread-27] dataloader - 64679 Set to load /var/ftp/pub/CDR/2018/07/31_13.zip 07-31/14:15:11 INFO [Thread-0] dataloader - File not found, i'll try later.. 07-31/14:15:11 INFO [Thread-0] dataloader - 64679 End task => 4/0 sec. [0] 07-31/14:15:12 INFO [Thread-0] dataloader - 64671 End task => 4/0 sec. [0] 07-31/14:15:12 INFO [Thread-0] dataloader - tariff.only.month=false store.incoming.calls=true 07-31/14:15:12 INFO [Thread-0] dataloader - Create new traffic cache 07-31/14:15:12 INFO [Thread-0] dataloader - Create new month item finder... 07-31/14:15:12 INFO [Thread-0] dataloader - Create new item finder... 07-31/14:15:12 INFO [Thread-0] RangeMapCache - Loading RangeMap cache for mid 7 and millis=>1530388800000 07-31/14:15:12 INFO [Thread-0] dataloader - Item loaded By num: 88; by port: 0; rules: 0 07-31/14:15:12 INFO [Thread-0] CostMapCache - First loading costMap cache and geo codes for mid 7 07-31/14:15:12 INFO [inserter-p-3-t-2] dataloader - proccess [31-07-2018 05:00:00; mid => 7; param => 1] session inserted => 2 ms. 07-31/14:15:12 INFO [Thread-0] dataloader - proccess [31-07-2018 05:00:00; mid => 7; param => 1] ; records => 0; cl_ses => 0; in_ses => 0; op_ses => 0; time => 166/24 ms. Логи Scheduler: Код: 07-31/14:15:04 INFO [Thread-3] TaskExecuter - Starting periodic task #5: bitel.billing.server.phone.BalanceSetter 07-31/14:15:04 INFO [Thread-3] TaskExecuter - Starting periodic task #7: bitel.billing.server.load.TaskGenerator 07-31/14:15:04 INFO [pool-2-thread-5] TaskGenerator - Task finished time=9 ms. 07-31/14:15:04 INFO [pool-2-thread-2] BalanceSetter - Setting balances for independ and subs.. 07-31/14:15:04 INFO [pool-2-thread-2] BalanceSetter - Selected. 07-31/14:15:04 INFO [pool-2-thread-2] BalanceSetter - Selecting sub account 07-31/14:15:04 INFO [pool-2-thread-2] BalanceSetter - Selected. 07-31/14:15:04 INFO [pool-2-thread-2] BalanceSetter - Setting balance for super.. 07-31/14:15:04 INFO [pool-2-thread-2] BalanceSetter - Selected. 07-31/14:15:04 INFO [pool-2-thread-2] BalanceSetter - Task finished time=98 ms. Время на сервере проверяли, стоит местное время, правильное |
Страница 1 из 1 | Часовой пояс: UTC + 5 часов [ Летнее время ] |
Powered by phpBB® Forum Software © phpBB Group http://www.phpbb.com/ |