BiTel

Форум BiTel
bgbilling.ru     docs.bitel.ru     wiki.bitel.ru     dbinfo.bitel.ru     bgcrm.ru     billing.bitel.ru     bitel.ru    
Текущее время: 26 окт 2021, 17:56

Часовой пояс: UTC + 5 часов [ Летнее время ]




Начать новую тему Ответить на тему  [ Сообщений: 13 ] 
Автор Сообщение
 Заголовок сообщения: [6.1] Даталоадер
СообщениеДобавлено: 29 фев 2016, 17:42 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 29 мар 2010, 23:11
Сообщения: 5837
Карма: 472
Код:
| 14614 | billing | 10.0.6.8:51159 | bgbilling | Query   |   23 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14615 | billing | 10.0.6.8:51191 | bgbilling | Query   |    0 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14616 | billing | 10.0.6.8:51192 | bgbilling | Query   |    4 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14617 | billing | 10.0.6.8:51283 | bgbilling | Query   |    0 | updating                        | DELETE FROM log_session_10_201602 WHERE source_id=7 AND hour='2016-02-16 01:00:00'                   |         0 |        137218 |         1 |
| 14618 | billing | 10.0.6.8:51304 | bgbilling | Sleep   |  350 |                                 | NULL                                                                                                 |         0 |             1 |         2 |
| 14619 | billing | 10.0.6.8:51360 | bgbilling | Sleep   |    4 |                                 | NULL                                                                                                 |         1 |             0 |      1798 |
| 14620 | billing | 10.0.6.8:51389 | bgbilling | Sleep   |    0 |                                 | NULL                                                                                                 |         1 |             0 |      1581 |
| 14621 | billing | 10.0.6.8:51418 | bgbilling | Query   |   28 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14622 | billing | 10.0.6.8:51446 | bgbilling | Query   |   38 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14623 | billing | 10.0.6.8:51449 | bgbilling | Query   |   13 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14624 | billing | 10.0.6.8:51470 | bgbilling | Query   |    9 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14625 | billing | 10.0.6.8:51474 | bgbilling | Sleep   |  350 |                                 | NULL                                                                                                 |         0 |           240 |         1 |
| 14626 | billing | 10.0.6.8:51482 | bgbilling | Query   |   18 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
| 14627 | billing | 10.0.6.8:51486 | bgbilling | Query   |   33 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE                        |         0 |             0 |         1 |
+-------+---------+----------------+-----------+---------+------+---------------------------------+------------------------------------------------------------------------------------------------------+-----------+---------------+-----------+

_________________
Цитаты великих людей :umnik:
Напишите в helpdesk © stark
повторяю: => хелпдеск => доработка => профит © dimOn
свершилось... © skn
Мой код изящен, лёгок, оригинален, краток. Как прохладный весенний ветерок, как звонкий ручей! © dimOn
Вежливый разработчик © Artur
Эти баги тоже исправлены, как и те, которые еще не написаны © Artur
ну т.е. существует воркэраунд, ок © dimOn


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер
СообщениеДобавлено: 29 фев 2016, 20:45 
Не в сети
Разработчик

Зарегистрирован: 07 апр 2007, 23:51
Сообщения: 4482
Откуда: Уфа, Россия
Карма: 186
а какой размер талицы (записей) log_session_10_201602
и какие индексы у таблицы есть?


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер
СообщениеДобавлено: 01 мар 2016, 04:01 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 29 мар 2010, 23:11
Сообщения: 5837
Карма: 472
Код:
mysql> show index from bgbilling.log_session_10_201602;
+-----------------------+------------+---------------+--------------+---------------+-----------+-------------+----------+--------+------+------------+---------+---------------+
| Table                 | Non_unique | Key_name      | Seq_in_index | Column_name   | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment |
+-----------------------+------------+---------------+--------------+---------------+-----------+-------------+----------+--------+------+------------+---------+---------------+
| log_session_10_201602 |          0 | PRIMARY       |            1 | id            | A         |      427440 |     NULL | NULL   |      | BTREE      |         |               |
| log_session_10_201602 |          1 | session_start |            1 | session_start | A         |      427440 |     NULL | NULL   |      | BTREE      |         |               |
| log_session_10_201602 |          1 | log           |            1 | source_id     | A         |          17 |     NULL | NULL   |      | BTREE      |         |               |
| log_session_10_201602 |          1 | log           |            2 | hour          | A         |         665 |     NULL | NULL   |      | BTREE      |         |               |
| log_session_10_201602 |          1 | cid           |            1 | cid           | A         |         133 |     NULL | NULL   |      | BTREE      |         |               |
| log_session_10_201602 |          1 | sid           |            1 | sid           | A         |          10 |     NULL | NULL   |      | BTREE      |         |               |
| log_session_10_201602 |          1 | item_id       |            1 | item_id       | A         |       17810 |     NULL | NULL   |      | BTREE      |         |               |
+-----------------------+------------+---------------+--------------+---------------+-----------+-------------+----------+--------+------+------------+---------+---------------+
7 rows in set (0.06 sec)


Код:
+---------------------------------+-------+-------+-------+------------+---------+
| sql_table                       | rows  | DATA  | idx   | total_size | idxfrac |
+---------------------------------+-------+-------+-------+------------+---------+
| bgbilling.log_session_10_201602 | 0.43M | 0.07G | 0.05G | 0.12G      |    0.76 |
+---------------------------------+-------+-------+-------+------------+---------+
1 row in set (0.05 sec)


Вложения:
dataloader.txt [18.13 КБ]
Скачиваний: 411

_________________
Цитаты великих людей :umnik:
Напишите в helpdesk © stark
повторяю: => хелпдеск => доработка => профит © dimOn
свершилось... © skn
Мой код изящен, лёгок, оригинален, краток. Как прохладный весенний ветерок, как звонкий ручей! © dimOn
Вежливый разработчик © Artur
Эти баги тоже исправлены, как и те, которые еще не написаны © Artur
ну т.е. существует воркэраунд, ок © dimOn
Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер
СообщениеДобавлено: 01 мар 2016, 04:04 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 29 мар 2010, 23:11
Сообщения: 5837
Карма: 472
jstack потому что он завис снова. третий раз за сутки.

_________________
Цитаты великих людей :umnik:
Напишите в helpdesk © stark
повторяю: => хелпдеск => доработка => профит © dimOn
свершилось... © skn
Мой код изящен, лёгок, оригинален, краток. Как прохладный весенний ветерок, как звонкий ручей! © dimOn
Вежливый разработчик © Artur
Эти баги тоже исправлены, как и те, которые еще не написаны © Artur
ну т.е. существует воркэраунд, ок © dimOn


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер
СообщениеДобавлено: 01 мар 2016, 04:06 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 29 мар 2010, 23:11
Сообщения: 5837
Карма: 472
После kill-9 и запуска шустро обрабатывает квадратики, но через некоторое время начинает замедляться и в конце концов виснет.

Код:
| 16765 | billing | 10.0.6.8:43019   | bgbilling | Query   |     0 | updating                        | DELETE FROM log_incoming_session_10_201602 WHERE source_id=7 AND hour='2016-02-13 07:00:00' |         0 |         37736 |         1 |
| 16766 | billing | 10.0.6.8:43032   | bgbilling | Query   |    13 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16767 | billing | 10.0.6.8:43033   | bgbilling | Query   |     1 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16780 | billing | 10.0.6.8:60376   | bgbilling | Sleep   |     0 |                                 | NULL                                                                                        |         0 |             0 |         2 |
| 16785 | billing | 10.0.6.8:38960   | bgbilling | Sleep   |     7 |                                 | NULL                                                                                        |         0 |             0 |         2 |
| 16786 | billing | 10.0.6.8:32911   | bgbilling | Sleep   |     0 |                                 | NULL                                                                                        |         1 |             6 |         2 |
| 16787 | billing | 10.0.6.8:43057   | bgbilling | Query   |    26 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16788 | billing | 10.0.6.8:42800   | bgbilling | Sleep   |     0 |                                 | NULL                                                                                        |         0 |             0 |         2 |
| 16789 | billing | 10.0.6.8:43062   | bgbilling | Query   |    34 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16790 | billing | 10.0.6.8:43063   | bgbilling | Sleep   |     0 |                                 | NULL                                                                                        |         1 |             0 |         3 |
| 16791 | billing | 10.0.6.8:43066   | bgbilling | Sleep   |     0 |                                 | NULL                                                                                        |         1 |             0 |         3 |
| 16792 | billing | 10.0.6.8:43067   | bgbilling | Query   |    30 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16793 | billing | 10.0.6.8:43068   | bgbilling | Sleep   |     0 |                                 | NULL                                                                                        |         0 |             1 |         1 |
| 16794 | billing | 10.0.6.8:43082   | bgbilling | Query   |    22 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16795 | billing | 10.0.6.8:43119   | bgbilling | Query   |     9 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16796 | billing | 10.0.6.8:43138   | bgbilling | Sleep   |     0 |                                 | NULL                                                                                        |         1 |             0 |       697 |
| 16797 | billing | 10.0.6.8:43141   | bgbilling | Query   |    18 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |
| 16798 | billing | 10.0.6.8:43144   | bgbilling | Query   |     5 | Waiting for table metadata lock | LOCK TABLES log_session_10_201602 WRITE, log_incoming_session_10_201602 WRITE               |         0 |             0 |         1 |

_________________
Цитаты великих людей :umnik:
Напишите в helpdesk © stark
повторяю: => хелпдеск => доработка => профит © dimOn
свершилось... © skn
Мой код изящен, лёгок, оригинален, краток. Как прохладный весенний ветерок, как звонкий ручей! © dimOn
Вежливый разработчик © Artur
Эти баги тоже исправлены, как и те, которые еще не написаны © Artur
ну т.е. существует воркэраунд, ок © dimOn


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер
СообщениеДобавлено: 01 мар 2016, 04:08 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 29 мар 2010, 23:11
Сообщения: 5837
Карма: 472
Это уже после перезапуска, когда замедлился
Код:
# ./data_loader_status.sh
Sending 'status' on 127.0.0.1:9033
Result: DataLoader working
Started: 01.03.2016 01:03:04   Uptime: 0 d 00:04:20
Memory total: 2 860 515 328; max: 2 885 681 152; free: 348 317 648
Memory pools:
  Non-heap memory[Code Cache]: max: 50 331 648; used: 4 375 168; peek: 4 385 344
  Heap memory[PS Eden Space]: max: 373 293 056; used: 348 127 232; peek: 759 169 024
  Heap memory[PS Survivor Space]: max: 348 127 232; used: 0; peek: 308 260 200
  Heap memory[PS Old Gen]: max: 2 164 260 864; used: 2 164 060 136; peek: 2 164 219 512
  Non-heap memory[PS Perm Gen]: max: 536 870 912; used: 23 659 752; peek: 23 733 840
Thread count: 42
Trees in cache: 0
Hour logs loaded : 1; processed: 281
Connections pool to Master status Idle: 0; Active: 13; maxActive: 300; maxIdle: 20

_________________
Цитаты великих людей :umnik:
Напишите в helpdesk © stark
повторяю: => хелпдеск => доработка => профит © dimOn
свершилось... © skn
Мой код изящен, лёгок, оригинален, краток. Как прохладный весенний ветерок, как звонкий ручей! © dimOn
Вежливый разработчик © Artur
Эти баги тоже исправлены, как и те, которые еще не написаны © Artur
ну т.е. существует воркэраунд, ок © dimOn


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер
СообщениеДобавлено: 01 мар 2016, 16:13 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 29 мар 2010, 23:11
Сообщения: 5837
Карма: 472
Код:
Информация о версии:

  Клиент: вер. 6.1.884 / 12.02.2016 17:26:57
    os: Windows 8.1; java: Java HotSpot(TM) Client VM, v.1.8.0_66
    ВНИМАНИЕ: Спецификация 1.8 не рекомендуется (поддерживается 1.7)
  Сервер: вер. 6.1.1120 / 12.02.2016 17:27:01
    os: Linux; java: Java HotSpot(TM) 64-Bit Server VM, v.1.7.0_72

  bill: вер. 6.1.264 / 04.02.2016 22:18:43
  card: вер. 6.1.207 / 09.12.2015 15:07:19
  dba: вер. 6.1.163 / 26.11.2015 21:59:29
  dialup: вер. 6.1.315 / 06.10.2015 17:55:59
  inet: вер. 6.1.728 / 01.02.2016 16:49:49
  ipn: вер. 6.1.234 / 20.11.2015 18:01:49
  mps: вер. 6.1.198 / 14.12.2015 05:01:39
  npay: вер. 6.1.196 / 02.12.2015 19:29:57
  phone: вер. 6.1.257 / 14.10.2015 17:27:56
  reports: вер. 6.1.203 / 06.10.2015 17:56:01
  rscm: вер. 6.1.175 / 05.05.2015 21:19:00
  ru.bitel.bgbilling.plugins.bonus: вер. 6.1.123 / 13.01.2016 03:03:39
  ru.bitel.bgbilling.plugins.cashcheck: вер. 6.1.99 / 08.02.2015 20:45:25
  ru.bitel.bgbilling.plugins.cladr: вер. 6.1.115 / 08.02.2015 20:45:26
  ru.bitel.bgbilling.plugins.crm: вер. 6.1.187 / 08.02.2015 20:45:26
  ru.bitel.bgbilling.plugins.dispatch: вер. 6.1.76 / 12.02.2016 17:27:11
  ru.bitel.bgbilling.plugins.documents: вер. 6.1.214 / 09.02.2016 22:19:42
  ru.bitel.bgbilling.plugins.helpdesk: вер. 6.1.202 / 08.02.2015 20:45:28
  ru.bitel.bgbilling.plugins.organizer: вер. 6.1.70 / 08.02.2015 20:45:28
  trayinfo: вер. 6.1.164 / 30.10.2015 14:37:13
  tv: вер. 6.1.229 / 15.01.2016 01:28:58
  voiceip: вер. 6.1.189 / 09.12.2015 15:07:20
  yamoney: вер. 6.1.57 / 25.08.2015 22:26:29

_________________
Цитаты великих людей :umnik:
Напишите в helpdesk © stark
повторяю: => хелпдеск => доработка => профит © dimOn
свершилось... © skn
Мой код изящен, лёгок, оригинален, краток. Как прохладный весенний ветерок, как звонкий ручей! © dimOn
Вежливый разработчик © Artur
Эти баги тоже исправлены, как и те, которые еще не написаны © Artur
ну т.е. существует воркэраунд, ок © dimOn


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер (CRM)
СообщениеДобавлено: 01 мар 2016, 17:43 
Не в сети
Разработчик

Зарегистрирован: 08 ноя 2007, 01:05
Сообщения: 8343
Откуда: Уфа
Карма: 238
у вас один DataLoader запущен ? jstack сняли после того как возникла эта ситуация? Лучше их снимать несколько штук подряд с интервалом небольшим. По этому jstack не виду пока ничего особенного.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер (CRM)
СообщениеДобавлено: 01 мар 2016, 17:44 
Не в сети
Разработчик

Зарегистрирован: 08 ноя 2007, 01:05
Сообщения: 8343
Откуда: Уфа
Карма: 238
Напишите в helpdesk, дайте доступ посмотреть.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер (CRM)
СообщениеДобавлено: 02 мар 2016, 16:57 
Не в сети
Разработчик

Зарегистрирован: 08 ноя 2007, 01:05
Сообщения: 8343
Откуда: Уфа
Карма: 238
Так что там с jstack? И доступом. Есть пару соображений в чем дело и как исправить, но все таки хотелось бы удостоверится и возможно посмотреть на месте.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер (CRM)
СообщениеДобавлено: 02 мар 2016, 17:57 
Не в сети
Клиент
Аватара пользователя

Зарегистрирован: 29 мар 2010, 23:11
Сообщения: 5837
Карма: 472
Сегодня не экспериментируем, бухи выгрузку закончат.
Потом буду играться на текущем месяце.
Пока не повторялось просто

_________________
Цитаты великих людей :umnik:
Напишите в helpdesk © stark
повторяю: => хелпдеск => доработка => профит © dimOn
свершилось... © skn
Мой код изящен, лёгок, оригинален, краток. Как прохладный весенний ветерок, как звонкий ручей! © dimOn
Вежливый разработчик © Artur
Эти баги тоже исправлены, как и те, которые еще не написаны © Artur
ну т.е. существует воркэраунд, ок © dimOn


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер (CRM)
СообщениеДобавлено: 02 мар 2016, 18:12 
Не в сети
Разработчик

Зарегистрирован: 08 ноя 2007, 01:05
Сообщения: 8343
Откуда: Уфа
Карма: 238
Phricker писал(а):
Сегодня не экспериментируем, бухи выгрузку закончат.
Потом буду играться на текущем месяце.
Пока не повторялось просто


можно поиграться на копии базы и прошлом месяце.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: [6.1] Даталоадер (CRM)
СообщениеДобавлено: 29 мар 2016, 19:09 
Не в сети
Разработчик

Зарегистрирован: 08 ноя 2007, 01:05
Сообщения: 8343
Откуда: Уфа
Карма: 238
Исправлено, обновление выложено.


Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 13 ] 

Часовой пояс: UTC + 5 часов [ Летнее время ]


Кто сейчас на конференции

Сейчас этот форум просматривают: Google [Bot] и гости: 2


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron
POWERED_BY
Русская поддержка phpBB
[ Time : 0.061s | 46 Queries | GZIP : On ]