ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Падает мускуль
25 сообщений из 55, страница 1 из 3
  1  все
Падает мускуль
    #39132817
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
01:00:01 UTC - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help
diagnose the problem, but since we have already crashed,
something is definitely wrong and this may fail.
Please help us make Percona XtraDB Cluster better by reporting any
bugs at  https://bugs.launchpad.net/percona-xtradb-cluster 

key_buffer_size=8388608
read_buffer_size=131072
max_used_connections=51
max_threads=501
thread_count=50
connection_count=25
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 1170062 K  bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

Thread pointer: 0x2a76c820
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Segmentation fault

Памяти 64 гига, почти вся свободна.
Куда копать...?
...
Рейтинг: 0 / 0
21.12.2015, 10:46:59
| Ответить | Цитировать | Написать  
Падает мускуль
    #39132822
miksoft
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
miksoft
Участник
Что за ОС и какой разрядности MySQL ?
...
Рейтинг: 0 / 0
21.12.2015, 10:52:41
| Ответить | Цитировать | Написать  
Падает мускуль
    #39132827
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Код: plaintext
1.
Ubuntu 14.04.3 LTS
3.13.0-68-generic #111-Ubuntu SMP Fri Nov 6 18:17:06 UTC 2015 x86_64 x86_64 x86_64 GNU/Linux

2 ноды на галере, падают по очереди 1-2 раза в сутки, там нагрузка небольшая пока.


Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
apt-cache policy percona-xtradb-cluster-server-5.6
percona-xtradb-cluster-server-5.6:
  Installed: 5.6.26-25.12-1.trusty
  Candidate: 5.6.26-25.12-1.trusty
  Version table:
 *** 5.6.26-25.12-1.trusty 0
        500  http://repo.percona.com/apt/  trusty/main amd64 Packages
        100 /var/lib/dpkg/status

В гугле находил логи, у них там полный бэктрейс показан, как его включить?
...
Рейтинг: 0 / 0
21.12.2015, 10:57:37
| Ответить | Цитировать | Написать  
Падает мускуль
    #39132830
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Вот полный лог
 
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
2015-12-20 21:19:38 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:39 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:41 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
01:00:01 UTC - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help
diagnose the problem, but since we have already crashed,
something is definitely wrong and this may fail.
Please help us make Percona XtraDB Cluster better by reporting any
bugs at  https://bugs.launchpad.net/percona-xtradb-cluster 

key_buffer_size=8388608
read_buffer_size=131072
max_used_connections=51
max_threads=501
thread_count=50
connection_count=25
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 1170062 K  bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

Thread pointer: 0x2a76c820
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Segmentation fault
151221 01:00:01 mysqld_safe Number of processes running now: 0
151221 01:00:01 mysqld_safe WSREP: not restarting wsrep node automatically
151221 01:00:01 mysqld_safe mysqld from pid file /var/run/mysqld/mysqld.pid ended
151221 03:38:17 mysqld_safe Starting mysqld daemon with databases from /var/lib/mysql
...
Рейтинг: 0 / 0
21.12.2015, 11:00:20
| Ответить | Цитировать | Написать  
Падает мускуль
    #39132834
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Код: plaintext
1.
2.
3.
4.
root@tdb-01:~# grep "mysqld got signal 11" /var/log/mysql/error.log
12:48:18 UTC - mysqld got signal 11 ;
15:08:01 UTC - mysqld got signal 11 ;
04:00:01 UTC - mysqld got signal 11 ;

Код: plaintext
1.
2.
3.
root@tdb-02:~# grep "mysqld got signal 11" /var/log/mysql/error.log
11:35:38 UTC - mysqld got signal 11 ;
01:00:01 UTC - mysqld got signal 11 ;

Время интересное (первые падения могли быть действительно из-за памяти)
...
Рейтинг: 0 / 0
21.12.2015, 11:02:36
| Ответить | Цитировать | Написать  
Падает мускуль
    #39132837
miksoft
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
miksoft
Участник
Hett
Код: plaintext
01:00:01
Уж больно число круглое.
В это время по крону не срабатывает ли чего? Ротация логов, например, или еще что-то?
...
Рейтинг: 0 / 0
21.12.2015, 11:02:50
| Ответить | Цитировать | Написать  
Падает мускуль
    #39132839
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Руками ротацию не настраивали. Крон точно не трогали.
...
Рейтинг: 0 / 0
21.12.2015, 11:05:26
| Ответить | Цитировать | Написать  
Падает мускуль
    #39133012
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Хотя надо процессы в приложении посмотреть, скорее там какой-то запрос..
...
Рейтинг: 0 / 0
21.12.2015, 12:52:42
| Ответить | Цитировать | Написать  
Падает мускуль
    #39135305
netwind
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
netwind
Участник
подписался на тему. буду сюда отправлять любителей "отказоустойчивости для бложиков".
...
Рейтинг: 0 / 0
23.12.2015, 03:17:37
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136435
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
netwind,

это не обшибки галеры, это проблемы конфигурации и т.д.
...
Рейтинг: 0 / 0
23.12.2015, 18:47:36
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136440
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Похоже все таки в галере дело,
https://mariadb.atlassian.net/browse/MDEV-8737
...
Рейтинг: 0 / 0
23.12.2015, 18:50:11
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136446
netwind
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
netwind
Участник
Alex_Ustinov, и что же на это указывает ? Напомню, 11 - это SIGSEGV
конечно надо ловить core и разбираться, но это все равно никто не умеет делать.
...
Рейтинг: 0 / 0
23.12.2015, 18:52:03
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136454
netwind
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
netwind
Участник
HettПохоже все таки в галере дело,
На самом деле не подтверждено. Наличие SIGSEGV ничего конкретного о природе ошибки не дает утверждать.
Однако известно, что в проверенных версиях mysql SIGSEGV почти никогда не возник бы.
...
Рейтинг: 0 / 0
23.12.2015, 18:55:12
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136455
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Да добыли бектрейс, точь в точь как по ссылке, поэтому даже копировать сюда думаю смысла нет.
...
Рейтинг: 0 / 0
23.12.2015, 18:56:34
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136458
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
netwind,

я вижу то что вижу
я не ищу решение...

для начала необходимо проанализировать вот это:

2015-12-20 21:19:38 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:39 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:41 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution

DNS имя ноды (как я понимаю) не разрешается...
убираем разрешение DNS и тестим дальше (допустим указываем просто АйПи)
...
Рейтинг: 0 / 0
23.12.2015, 18:59:30
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136462
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Это вообще какой-то левый IP, никак руки до iptables не доходят, проект только развернули просто.
...
Рейтинг: 0 / 0
23.12.2015, 19:01:30
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136466
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
netwindHettПохоже все таки в галере дело,
На самом деле не подтверждено. Наличие SIGSEGV ничего конкретного о природе ошибки не дает утверждать.
Однако известно, что в проверенных версиях mysql SIGSEGV почти никогда не возник бы.
примерно это может быть переполнение памяти
...
Рейтинг: 0 / 0
23.12.2015, 19:04:48
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136470
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
Hett,

это лог системы? общий message.log?
...
Рейтинг: 0 / 0
23.12.2015, 19:07:25
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136479
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Исключено. Да и он в логе пишет сколько употребил в момент фолта
...
Рейтинг: 0 / 0
23.12.2015, 19:11:00
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136493
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
Hett,

пересчитайте
key_buffer_size + (read_buffer_size + sort_buffer_size )*max_threads
уменьшите max_threads

выставьте "максимально" минимальное, номинал какой-нибудь

запустите в дебаге , ну и ждем вестей
...
Рейтинг: 0 / 0
23.12.2015, 19:27:15
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136500
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
Hett,

ну и много памяти не есть решение всех проблем, например здесь , честно говоря даже толком не глянул на книгу, но суть понятна, что флаги компиляции тоже важны. Может ст'оит пересобрать пакет самому...
...
Рейтинг: 0 / 0
23.12.2015, 19:32:59
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136533
netwind
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
netwind
Участник
Alex_Ustinovnetwind,

я вижу то что вижу

Угу. А мы видим дальше.

backtrace может быть и похож, но вот же там разработчик просит прислать файл core. Значит информации все равно мало . Может тот случай, а может и нет. Вы пришлите им, раз уж проект пока не содержит никаких секретных данных.
...
Рейтинг: 0 / 0
23.12.2015, 20:13:18
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136553
Фотография Hett
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Hett
Участник
Alex_UstinovHett,

пересчитайте
key_buffer_size + (read_buffer_size + sort_buffer_size )*max_threads
уменьшите max_threads

выставьте "максимально" минимальное, номинал какой-нибудь

запустите в дебаге , ну и ждем вестей

Вообще-то там уже посчитано :)

авторkey_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 1170062 K bytes of memory

На параллельном проекте без галеры работает в более суровых условиях и память там на полную используется.
...
Рейтинг: 0 / 0
23.12.2015, 21:02:43
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136558
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
netwind,

дык елы-палы....

угу, и "мы" видим дальше
тонко подмечено - информации действительно мало, будь ее достаточно, все бы сразу зарешалось.
Что можно понять по логам состояния...

Поэтому запустить надо в дебаге и посмотреть поконкретнее.
И повторюсь - память решает не все. Ждем вестей с дебагом.


Hett,
репозитарии лишние не подключали? Ubuntu и так славен быстрым включением необстрелянных пакетов и ядер.
Может пока не поздно посмотреть в сторону FreeBSD
...
Рейтинг: 0 / 0
23.12.2015, 21:13:01
| Ответить | Цитировать | Написать  
Падает мускуль
    #39136559
Фотография Alex_Ustinov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alex_Ustinov
Участник
HettНа параллельном проекте без галеры работает в более суровых условиях и память там на полную используется.так и ошибка общая на 100 случаев...
это может быть и какая-то блокировка ibbdata ("в момент допустим авторасширения") и использование swap (он у вас есть? лучше отрубить) и еще 98 причин
вы как раз спрашивали про расширенный лог - в дебаге он и будет
почему 2 ноды? если я не путаю, то рекомендуется 3...
...
Рейтинг: 0 / 0
23.12.2015, 21:22:19
| Ответить | Цитировать | Написать  
25 сообщений из 55, страница 1 из 3
  1  все
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Падает мускуль
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=47&msg=39132822&tid=1832323]:
 0ms
get settings:
 8ms
get forum list:
 20ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 39ms
get topic data:
 12ms
get forum data:
 3ms
get page messages:
 89ms
get tp. blocked users:
 2ms
others: 213ms
total:  394ms
созд. / загр.: 394ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]