BiTel

Форум BiTel
bgbilling.ru     docs.bitel.ru     wiki.bitel.ru     dbinfo.bitel.ru     bgcrm.ru     billing.bitel.ru     bitel.ru    
Текущее время: 28 мар 2024, 23:48

Часовой пояс: UTC + 5 часов [ Летнее время ]




Начать новую тему Ответить на тему  [ Сообщений: 7 ] 
Автор Сообщение
 Заголовок сообщения: Задержка в загрузке логов
СообщениеДобавлено: 27 июл 2018, 12:30 
Не в сети

Зарегистрирован: 04 апр 2016, 12:52
Сообщения: 48
Карма: 0
Добрый день!
После обновления сервера при старых настройках появилась задержка в загрузке логов телефонии. То есть логи за 00 часов появляются только в 07 часов. С чем это может быть связано?

Сервер: вер. 7.0.1395 / 20.07.2018 14:03:22 os: Linux; java: Java HotSpot(TM) 64-Bit Server VM, v.1.8.0_45

assist: вер. 7.0.94 / 14.03.2018 16:02:44 bill: вер. 7.0.143 / 10.07.2018 15:42:56 card: вер. 7.0.51 / 07.06.2018 16:41:02 dba: вер. 7.0.170 / 14.03.2018 16:03:34
drweb: вер. 7.0.78 / 14.03.2018 16:03:36 email: вер. 7.0.185 / 14.03.2018 16:03:39 inet: вер. 7.0.918 / 12.07.2018 11:28:02 npay: вер. 7.0.216 / 31.05.2018 15:53:21
payonline: вер. 7.0.83 / 23.04.2018 16:09:07 phone: вер. 7.0.312 / 10.07.2018 15:43:08 qiwi: вер. 7.0.57 / 14.03.2018 16:04:42 reports: вер. 7.0.245 / 12.07.2018 15:45:37
rscm: вер. 7.0.190 / 31.05.2018 15:53:23
ru.bitel.bgbilling.plugins.bonus: вер. 7.0.135 / 20.07.2018 14:03:55 ru.bitel.bgbilling.plugins.cladr: вер. 7.0.126 / 14.03.2018 16:03:33 ru.bitel.bgbilling.plugins.crm: вер. 7.0.204 / 20.07.2018 14:03:56
ru.bitel.bgbilling.plugins.dispatch: вер. 7.0.100 / 20.07.2018 14:03:56 ru.bitel.bgbilling.plugins.documents: вер. 7.0.186 / 20.07.2018 14:03:57 ru.bitel.bgbilling.plugins.helpdesk: вер. 7.0.201 / 20.07.2018 14:03:58
ru.bitel.bgbilling.plugins.organizer: вер. 7.0.78 / 14.03.2018 16:04:15 subscription: вер. 7.0.48 / 14.03.2018 16:05:11 trayinfo: вер. 7.0.181 / 14.03.2018 16:05:14
tv: вер. 7.0.298 / 10.07.2018 15:42:47 voiceip: вер. 7.0.210 / 08.06.2018 14:17:18

Окружение:
Сервер:
os: Linux amd64, 3.2.0-4-amd64 java: Java HotSpot(TM) 64-Bit Server VM, v.1.8.0_45 jre home: /opt/java/jdk1.8.0_45/jre
default tz: 27.07.2018 10:28 SAMT +0400 (Europe/Samara) memory (use/total/max): 93M/238M/238M db time: master: 27.07.2018 10:28 SAMT
db charset: connection: utf8(utf8_unicode_ci), database: utf8(utf8_unicode_ci) locale: ru_RU uptime: Started: 23.07.2018 16:38:16 Uptime: 3 d 17:50:11


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: Задержка в загрузке логов
СообщениеДобавлено: 27 июл 2018, 16:18 
Не в сети
Аватара пользователя

Зарегистрирован: 30 май 2008, 15:51
Сообщения: 6055
Карма: 244
ну так а загружаются они во сколько реально DataLoader-ом?

_________________
I'm clever. I've got a computer.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: Задержка в загрузке логов
СообщениеДобавлено: 27 июл 2018, 16:21 
Не в сети
Аватара пользователя

Зарегистрирован: 30 май 2008, 15:51
Сообщения: 6055
Карма: 244
Логи как готовятся, не сбились таймштампы на них итд, они реально появляются в 00 где нужно? Конвертер не тупит, не задерживает их? итд итп - это всё необходимая информация, если вы хотите чуть более расширенный ответ, чем "наверное что-то сломалось или вы неправильно настроили"

_________________
I'm clever. I've got a computer.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: Задержка в загрузке логов
СообщениеДобавлено: 27 июл 2018, 17:30 
Не в сети

Зарегистрирован: 04 апр 2016, 12:52
Сообщения: 48
Карма: 0
Логи готовятся с задержкой в 2 часа (так настроено изначально, проблем не было). Конвертер не тупит и не задерживает, то есть лог за 00 часов должен (а до обновления так и было) загружался в 02 часа.

На данный момент к 09 часам на сервере находятся логи с 00 по 07 часов (загрузка идет по ftp). Но загружается и обрабатывается только за 00 часов и не более.


Если руками добавить загрузку из источника за имеющиеся периоды, загрузчик все равно ищет файл 9 часовой давности, его загружает, и более вперед не продвигается до следующей по расписанию загрузке. Причем непонятна именно задержка в 9 часов, а не в 2 или любое другое время.

Генератор заданий на загрузку логов запускается каждый час, установка баланса телефонии тоже, переход в след. месяц тоже есть. Расписание не менялось уже 2 года


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: Задержка в загрузке логов
СообщениеДобавлено: 27 июл 2018, 20:29 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 27 мар 2012, 11:59
Сообщения: 2676
Карма: 72
а вы смотрели логи DataLoader?
и главный вопрос логи планировщика? и вы его перезапускали после обновления? Может забыли


Последний раз редактировалось zavndw 29 июл 2018, 04:29, всего редактировалось 1 раз.

Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: Задержка в загрузке логов
СообщениеДобавлено: 28 июл 2018, 18:20 
Не в сети
Аватара пользователя

Зарегистрирован: 30 май 2008, 15:51
Сообщения: 6055
Карма: 244
ну да, первым делом логи надо смотреть что именно делает даталоадер

_________________
I'm clever. I've got a computer.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: Задержка в загрузке логов
СообщениеДобавлено: 31 июл 2018, 16:39 
Не в сети

Зарегистрирован: 04 апр 2016, 12:52
Сообщения: 48
Карма: 0
Сервер обновляли, все останавливали и заново запускали, все как обычно.

Логи Dataloader:
Код:
07-31/14:15:07  INFO [Thread-27] dataloader - 64679 Load data from: /var/ftp/pub/CDR/2018/07/31_13.zip
07-31/14:15:07  INFO [Thread-28] dataloader - 64671 Load data from: /var/ftp/pub/CDR/2018/07/31_05.zip
07-31/14:15:08  INFO [Thread-28] dataloader - 64671 Set to load /var/ftp/pub/CDR/2018/07/31_05.zip
07-31/14:15:08  INFO [Thread-27] dataloader - 64679 Set to load /var/ftp/pub/CDR/2018/07/31_13.zip
07-31/14:15:11  INFO [Thread-0] dataloader - File not found, i'll try later..
07-31/14:15:11  INFO [Thread-0] dataloader - 64679 End task => 4/0 sec. [0]
07-31/14:15:12  INFO [Thread-0] dataloader - 64671 End task => 4/0 sec. [0]
07-31/14:15:12  INFO [Thread-0] dataloader - tariff.only.month=false store.incoming.calls=true
07-31/14:15:12  INFO [Thread-0] dataloader - Create new traffic cache
07-31/14:15:12  INFO [Thread-0] dataloader - Create new month item finder...
07-31/14:15:12  INFO [Thread-0] dataloader - Create new item finder...
07-31/14:15:12  INFO [Thread-0] RangeMapCache - Loading RangeMap cache for mid 7 and millis=>1530388800000
07-31/14:15:12  INFO [Thread-0] dataloader - Item loaded By num: 88; by port: 0; rules: 0
07-31/14:15:12  INFO [Thread-0] CostMapCache - First loading costMap cache and geo codes for mid 7
07-31/14:15:12  INFO [inserter-p-3-t-2] dataloader - proccess [31-07-2018 05:00:00; mid => 7; param => 1]  session inserted => 2 ms.
07-31/14:15:12  INFO [Thread-0] dataloader - proccess [31-07-2018 05:00:00; mid => 7; param => 1] ; records => 0; cl_ses => 0; in_ses => 0; op_ses => 0; time => 166/24 ms.


Логи Scheduler:
Код:
07-31/14:15:04  INFO [Thread-3] TaskExecuter - Starting periodic task #5: bitel.billing.server.phone.BalanceSetter
07-31/14:15:04  INFO [Thread-3] TaskExecuter - Starting periodic task #7: bitel.billing.server.load.TaskGenerator
07-31/14:15:04  INFO [pool-2-thread-5] TaskGenerator - Task finished time=9 ms.
07-31/14:15:04  INFO [pool-2-thread-2] BalanceSetter - Setting balances for independ and subs..
07-31/14:15:04  INFO [pool-2-thread-2] BalanceSetter - Selected.
07-31/14:15:04  INFO [pool-2-thread-2] BalanceSetter - Selecting sub account
07-31/14:15:04  INFO [pool-2-thread-2] BalanceSetter - Selected.
07-31/14:15:04  INFO [pool-2-thread-2] BalanceSetter - Setting balance for super..
07-31/14:15:04  INFO [pool-2-thread-2] BalanceSetter - Selected.
07-31/14:15:04  INFO [pool-2-thread-2] BalanceSetter - Task finished time=98 ms.


Время на сервере проверяли, стоит местное время, правильное


Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 7 ] 

Часовой пояс: UTC + 5 часов [ Летнее время ]


Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron
POWERED_BY
Русская поддержка phpBB
[ Time : 0.122s | 32 Queries | GZIP : On ]