Гость
Войти | Профиль | Очистить
Целевая тема:
Создать новую тему:
Автор:
Действия ...
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Падает мускуль / 25 сообщений из 55, страница 1 из 3
  1  все
21.12.2015, 10:46:59
    #39132817
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
01:00:01 UTC - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help
diagnose the problem, but since we have already crashed,
something is definitely wrong and this may fail.
Please help us make Percona XtraDB Cluster better by reporting any
bugs at  https://bugs.launchpad.net/percona-xtradb-cluster 

key_buffer_size=8388608
read_buffer_size=131072
max_used_connections=51
max_threads=501
thread_count=50
connection_count=25
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 1170062 K  bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

Thread pointer: 0x2a76c820
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Segmentation fault

Памяти 64 гига, почти вся свободна.
Куда копать...?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
21.12.2015, 10:52:41
    #39132822
miksoft
miksoft
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Что за ОС и какой разрядности MySQL ?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
21.12.2015, 10:57:37
    #39132827
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Код: plaintext
1.
Ubuntu 14.04.3 LTS
3.13.0-68-generic #111-Ubuntu SMP Fri Nov 6 18:17:06 UTC 2015 x86_64 x86_64 x86_64 GNU/Linux

2 ноды на галере, падают по очереди 1-2 раза в сутки, там нагрузка небольшая пока.


Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
apt-cache policy percona-xtradb-cluster-server-5.6
percona-xtradb-cluster-server-5.6:
  Installed: 5.6.26-25.12-1.trusty
  Candidate: 5.6.26-25.12-1.trusty
  Version table:
 *** 5.6.26-25.12-1.trusty 0
        500  http://repo.percona.com/apt/  trusty/main amd64 Packages
        100 /var/lib/dpkg/status

В гугле находил логи, у них там полный бэктрейс показан, как его включить?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
21.12.2015, 11:00:20
    #39132830
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Вот полный лог
 
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
2015-12-20 21:19:38 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:39 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:41 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
01:00:01 UTC - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help
diagnose the problem, but since we have already crashed,
something is definitely wrong and this may fail.
Please help us make Percona XtraDB Cluster better by reporting any
bugs at  https://bugs.launchpad.net/percona-xtradb-cluster 

key_buffer_size=8388608
read_buffer_size=131072
max_used_connections=51
max_threads=501
thread_count=50
connection_count=25
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 1170062 K  bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

Thread pointer: 0x2a76c820
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Segmentation fault
151221 01:00:01 mysqld_safe Number of processes running now: 0
151221 01:00:01 mysqld_safe WSREP: not restarting wsrep node automatically
151221 01:00:01 mysqld_safe mysqld from pid file /var/run/mysqld/mysqld.pid ended
151221 03:38:17 mysqld_safe Starting mysqld daemon with databases from /var/lib/mysql
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
21.12.2015, 11:02:36
    #39132834
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Код: plaintext
1.
2.
3.
4.
root@tdb-01:~# grep "mysqld got signal 11" /var/log/mysql/error.log
12:48:18 UTC - mysqld got signal 11 ;
15:08:01 UTC - mysqld got signal 11 ;
04:00:01 UTC - mysqld got signal 11 ;

Код: plaintext
1.
2.
3.
root@tdb-02:~# grep "mysqld got signal 11" /var/log/mysql/error.log
11:35:38 UTC - mysqld got signal 11 ;
01:00:01 UTC - mysqld got signal 11 ;

Время интересное (первые падения могли быть действительно из-за памяти)
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
21.12.2015, 11:02:50
    #39132837
miksoft
miksoft
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Hett
Код: plaintext
01:00:01
Уж больно число круглое.
В это время по крону не срабатывает ли чего? Ротация логов, например, или еще что-то?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
21.12.2015, 11:05:26
    #39132839
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Руками ротацию не настраивали. Крон точно не трогали.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
21.12.2015, 12:52:42
    #39133012
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Хотя надо процессы в приложении посмотреть, скорее там какой-то запрос..
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 03:17:37
    #39135305
netwind
netwind
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
подписался на тему. буду сюда отправлять любителей "отказоустойчивости для бложиков".
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 18:47:36
    #39136435
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
netwind,

это не обшибки галеры, это проблемы конфигурации и т.д.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 18:50:11
    #39136440
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Похоже все таки в галере дело,
https://mariadb.atlassian.net/browse/MDEV-8737
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 18:52:03
    #39136446
netwind
netwind
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Alex_Ustinov, и что же на это указывает ? Напомню, 11 - это SIGSEGV
конечно надо ловить core и разбираться, но это все равно никто не умеет делать.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 18:55:12
    #39136454
netwind
netwind
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
HettПохоже все таки в галере дело,
На самом деле не подтверждено. Наличие SIGSEGV ничего конкретного о природе ошибки не дает утверждать.
Однако известно, что в проверенных версиях mysql SIGSEGV почти никогда не возник бы.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 18:56:34
    #39136455
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Да добыли бектрейс, точь в точь как по ссылке, поэтому даже копировать сюда думаю смысла нет.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 18:59:30
    #39136458
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
netwind,

я вижу то что вижу
я не ищу решение...

для начала необходимо проанализировать вот это:

2015-12-20 21:19:38 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:39 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:40 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution
2015-12-20 21:19:41 12274 [Warning] IP address '45.34.219.6' could not be resolved: Temporary failure in name resolution

DNS имя ноды (как я понимаю) не разрешается...
убираем разрешение DNS и тестим дальше (допустим указываем просто АйПи)
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 19:01:30
    #39136462
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Это вообще какой-то левый IP, никак руки до iptables не доходят, проект только развернули просто.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 19:04:48
    #39136466
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
netwindHettПохоже все таки в галере дело,
На самом деле не подтверждено. Наличие SIGSEGV ничего конкретного о природе ошибки не дает утверждать.
Однако известно, что в проверенных версиях mysql SIGSEGV почти никогда не возник бы.
примерно это может быть переполнение памяти
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 19:07:25
    #39136470
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Hett,

это лог системы? общий message.log?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 19:11:00
    #39136479
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Исключено. Да и он в логе пишет сколько употребил в момент фолта
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 19:27:15
    #39136493
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Hett,

пересчитайте
key_buffer_size + (read_buffer_size + sort_buffer_size )*max_threads
уменьшите max_threads

выставьте "максимально" минимальное, номинал какой-нибудь

запустите в дебаге , ну и ждем вестей
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 19:32:59
    #39136500
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Hett,

ну и много памяти не есть решение всех проблем, например здесь , честно говоря даже толком не глянул на книгу, но суть понятна, что флаги компиляции тоже важны. Может ст'оит пересобрать пакет самому...
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 20:13:18
    #39136533
netwind
netwind
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Alex_Ustinovnetwind,

я вижу то что вижу

Угу. А мы видим дальше.

backtrace может быть и похож, но вот же там разработчик просит прислать файл core. Значит информации все равно мало . Может тот случай, а может и нет. Вы пришлите им, раз уж проект пока не содержит никаких секретных данных.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 21:02:43
    #39136553
Hett
Hett
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
Alex_UstinovHett,

пересчитайте
key_buffer_size + (read_buffer_size + sort_buffer_size )*max_threads
уменьшите max_threads

выставьте "максимально" минимальное, номинал какой-нибудь

запустите в дебаге , ну и ждем вестей

Вообще-то там уже посчитано :)

авторkey_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 1170062 K bytes of memory

На параллельном проекте без галеры работает в более суровых условиях и память там на полную используется.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 21:13:01
    #39136558
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
netwind,

дык елы-палы....

угу, и "мы" видим дальше
тонко подмечено - информации действительно мало, будь ее достаточно, все бы сразу зарешалось.
Что можно понять по логам состояния...

Поэтому запустить надо в дебаге и посмотреть поконкретнее.
И повторюсь - память решает не все. Ждем вестей с дебагом.


Hett,
репозитарии лишние не подключали? Ubuntu и так славен быстрым включением необстрелянных пакетов и ядер.
Может пока не поздно посмотреть в сторону FreeBSD
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
23.12.2015, 21:22:19
    #39136559
Alex_Ustinov
Alex_Ustinov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Падает мускуль
HettНа параллельном проекте без галеры работает в более суровых условиях и память там на полную используется.так и ошибка общая на 100 случаев...
это может быть и какая-то блокировка ibbdata ("в момент допустим авторасширения") и использование swap (он у вас есть? лучше отрубить) и еще 98 причин
вы как раз спрашивали про расширенный лог - в дебаге он и будет
почему 2 ноды? если я не путаю, то рекомендуется 3...
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
  1  все
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Падает мускуль / 25 сообщений из 55, страница 1 из 3
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение  
Полит. конфиден.  
созд. / загр.: 481ms
Закрыть
start [/forum/topic.php?fid=47&mobile=1&tid=1832323]:
 0ms
get settings:
 7ms
get forum list:
 9ms
check forum access:
 2ms
check topic access:
 2ms
track hit:
 163ms
get topic data:
 8ms
get forum data:
 2ms
get page messages:
 53ms
get tp. blocked users:
 1ms
others: 234ms
total:  481ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]