Гость
Войти | Профиль | Очистить
Целевая тема:
Создать новую тему:
Автор:
Действия ...
Форумы / Oracle [игнор отключен] [закрыт для гостей] / Тормозит сервер / 15 сообщений из 15, страница 1 из 1
19.12.2016, 17:18
    #39370425
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Есть старый сервер с Oracle на RHEL4 (2 CPU, по 4 ядра).
К серверу смонтирован сетевой диск по iscsi, на который сохраняются бэкапы.
Сегодня по какой-то причине перегрузился.
Сейчас сервер загрузился и работает, но в нем наблюдается какая-то задумчивость - на ввод любой команды он реагирует задержкой, иногда в 5-10 секунд.
В top какой-то заметной загрузки CPU я не вижу, обычно CPU загружен не более 20%. Правда load average более 70, но для данного сервера (8 ядер) это, мне кажется, нормально.

После перезагрузки сервера база данных запустилась, но тоже отличалась некоторой задумчивостью.
Затем в логах появилось сообщение "kernel: tnslsnr[23700]: segfault at 0000000000000018 rip 000000344af6889d rsp 0000007fbfff8ff0 error 4" и сейчас БД недоступна.

Подскажите, куда смотреть?
Сейчас я думаю сделать shutdown базы, перегрузить сервер и посмотреть лог загрузки.

________________________
Мы смотрим с оптимизмом...
...в оптический прицел.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
19.12.2016, 17:53
    #39370453
Vadim Lejnin
Vadim Lejnin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Код: plsql
1.
Правда load average более 70, но для данного сервера (8 ядер) это, мне кажется, нормально.


Для Вашего сервера нормально 16
Вини-ПухЭто жжж... не спроста!
Смотреть:
1) memtest (выбрать при загрузке)
2) /var/log/messages
3) dmesg
4) смотреть статистику при проблемах(RHEL4 под рукой нет, поэтому некоторые ключи могут не взлететь):
sar -W 10 10
sar -d 10 10
sar -q 10 10
sar -u 10 10

5)cat /proc/meminfo
6) cat /proc/cpuinfo
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
19.12.2016, 18:12
    #39370471
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
До этого сервер загрузился, но пытался смонтировать iscsi-тома до того, как поднялась сеть (безуспешно), так что я закомментировал эти тома в /etc/fstab и затем смонтировал их вручную.
Теперь погасил базу, перегрузил сервер и никаких тормозов пока не замечаю. load average около единицы.

В /var/log/messages есть "Buffer I/O error on device sdb", но /dev/sdb это не том, это access-устройство на СХД.
Других ошибок в логе и в dmesg я не увидел.

sar у меня отсутствует, буду искать старые RPM.

А на что именно смотреть в meminfo и cpuinfo?
Вроде бы ничего проблемного там не вижу.
 

Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.
49.
50.
51.
52.
53.
54.
55.
56.
57.
58.
59.
60.
61.
62.
63.
64.
65.
66.
67.
68.
69.
70.
71.
72.
73.
74.
75.
76.
77.
78.
79.
80.
81.
82.
83.
84.
85.
86.
87.
88.
89.
90.
91.
92.
93.
94.
95.
96.
97.
98.
99.
100.
101.
102.
103.
104.
105.
106.
107.
108.
109.
110.
111.
112.
113.
114.
115.
116.
117.
118.
119.
120.
121.
122.
123.
124.
125.
126.
127.
128.
129.
130.
131.
132.
133.
134.
135.
136.
137.
138.
139.
140.
141.
142.
143.
144.
145.
146.
147.
148.
149.
150.
151.
152.
153.
154.
155.
156.
157.
158.
159.
160.
161.
162.
163.
164.
165.
166.
167.
168.
169.
170.
171.
172.
173.
174.
175.
176.
177.
178.
179.
180.
181.
182.
183.
184.
185.
186.
187.
188.
189.
190.
191.
192.
193.
194.
195.
196.
197.
198.
199.
200.
201.
202.
203.
204.
205.
206.
207.
208.
209.
210.
[root@bm-db /]# cat /proc/meminfo
MemTotal:      4036388 kB
MemFree:         43504 kB
Buffers:        101820 kB
Cached:        3496320 kB
SwapCached:      38976 kB
Active:        2038400 kB
Inactive:      1818380 kB
HighTotal:           0 kB
HighFree:            0 kB
LowTotal:      4036388 kB
LowFree:         43504 kB
SwapTotal:     2031608 kB
SwapFree:      1866980 kB
Dirty:             148 kB
Writeback:           0 kB
Mapped:        1832924 kB
Slab:            66784 kB
CommitLimit:   4049800 kB
Committed_AS:  2755024 kB
PageTables:      42416 kB
VmallocTotal: 536870911 kB
VmallocUsed:    264132 kB
VmallocChunk: 536606367 kB
HugePages_Total:     0
HugePages_Free:      0
Hugepagesize:     2048 kB
[root@bm-db /]# cat /proc/cpuinfo
processor       : 0
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 0
siblings        : 4
core id         : 0
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5989.05
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:

processor       : 1
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 1
siblings        : 4
core id         : 4
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5985.09
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:

processor       : 2
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 0
siblings        : 4
core id         : 2
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5985.07
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:

processor       : 3
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 1
siblings        : 4
core id         : 6
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5985.08
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:

processor       : 4
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 0
siblings        : 4
core id         : 1
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5985.03
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:

processor       : 5
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 1
siblings        : 4
core id         : 5
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5985.10
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:

processor       : 6
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 0
siblings        : 4
core id         : 3
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5985.06
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:

processor       : 7
vendor_id       : GenuineIntel
cpu family      : 6
model           : 7
model name      : Intel(R) Xeon(R) CPU           X5450  @ 3.00GHz
stepping        : 6
cpu MHz         : 2992.538
cache size      : 6144 KB
physical id     : 1
siblings        : 4
core id         : 7
cpu cores       : 4
fpu             : yes
fpu_exception   : yes
cpuid level     : 10
wp              : yes
flags           : fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm syscall nx lm pni monitor ds_cpl est tm2 cx16 xtpr lahf_lm
bogomips        : 5985.09
clflush size    : 64
cache_alignment : 64
address sizes   : 38 bits physical, 48 bits virtual
power management:
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
20.12.2016, 16:37
    #39371193
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Вообщем пока выключил вообще iscsi, но проблемы остаются.
Как только запускаю сервер, работающий с БД, load average на сервере начинает расти, дорос до 70.
Останавливаю сервер и load average понемногу снижается, сейчас около 30.
При этом top показывает, что большой процент занимает wait (50-60%). Скорее всего это ввод/вывод, но пока подробнее посмотреть не могу, iotop на сервере не установлен, а готовый бинарник нигде пока найти не могу.
В логах чисто, никаких ошибок не вижу.
Это может быть Oracle, который восстанавливает данные после прошлого некорректного выключения?
В /opt/oracle/admin/bm/bdump/alert_bm.log есть такие записи:
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
Tue Dec 20 12:50:11 2016
Thread 1 advanced to log sequence 53160 (LGWR switch)
  Current log# 5 seq# 53160 mem# 0: /u01/oradata/bm/redo/redo05a.log
  Current log# 5 seq# 53160 mem# 1: /u01/oradata/bm/redo/redo05b.log
Tue Dec 20 14:57:52 2016
Thread 1 advanced to log sequence 53161 (LGWR switch)
  Current log# 1 seq# 53161 mem# 0: /u01/oradata/bm/redo/redo01a.log
  Current log# 1 seq# 53161 mem# 1: /u01/oradata/bm/redo/redo01b.log
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
20.12.2016, 16:48
    #39371203
Vadim Lejnin
Vadim Lejnin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
авторsar у меня отсутствует, буду искать старые RPM.
Код: plsql
1.
2.
vmstat 10 10
iostat 10 10


Что - нибудь менялось? Например параметры Oracle, или нагрузка
У вас всго 4Gb памяти


Код: plsql
1.
2.
3.
4.
5.
6.
7.
8.
Tue Dec 20 12:50:11 2016
Thread 1 advanced to log sequence 53160 (LGWR switch)
  Current log# 5 seq# 53160 mem# 0: /u01/oradata/bm/redo/redo05a.log
  Current log# 5 seq# 53160 mem# 1: /u01/oradata/bm/redo/redo05b.log
Tue Dec 20 14:57:52 2016
Thread 1 advanced to log sequence 53161 (LGWR switch)
  Current log# 1 seq# 53161 mem# 0: /u01/oradata/bm/redo/redo01a.log
  Current log# 1 seq# 53161 mem# 1: /u01/oradata/bm/redo/redo01b.log



показывет что особой нагрузки на запись у Вас нет

в top какие процессы?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
20.12.2016, 19:57
    #39371340
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Сейчас нагрузка упала (load average: 0.04, 0.04, 0.01), поэтому измерения наверное будут не показательны.
Когда нагрузка была высокой, в top часто был oracle. Сейчас особо ничего нет.
 

Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.
49.
50.
51.
52.
53.
54.
55.
56.
57.
58.
59.
60.
61.
62.
63.
64.
65.
66.
67.
68.
69.
70.
71.
72.
73.
74.
75.
76.
77.
78.
79.
80.
81.
82.
83.
84.
85.
86.
87.
88.
89.
90.
91.
92.
93.
94.
95.
96.
97.
98.
99.
100.
101.
102.
103.
104.
105.
106.
107.
108.
109.
110.
111.
112.
113.
114.
115.
116.
117.
118.
119.
120.
121.
122.
123.
124.
125.
126.
127.
128.
129.
130.
131.
132.
133.
134.
135.
136.
137.
138.
139.
140.
141.
142.
143.
144.
145.
146.
147.
148.
149.
150.
151.
152.
153.
154.
155.
156.
157.
158.
159.
160.
161.
162.
163.
164.
# vmstat 10 10
procs -----------memory---------- ---swap-- -----io---- --system-- ----cpu----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in    cs us sy id wa
 1  0 196872  85036  22076 3497344   21   18  2193    41   75   109  2  1 79 19
 0  0 196872  84972  22096 3497392    0    0     4    40 1030    69  0  0 100  0
 0  0 196872  85036  22108 3497380    0    0     4    46 1047    84  0  0 100  0
 0  0 196872  84972  22124 3497432    0    0     2    34 1029    63  0  0 100  0
 0  0 196872  84972  22136 3497420    0    0     4    28 1028    64  0  0 100  0
 0  0 196872  84972  22144 3497480    0    0     3    29 1028    64  0  0 100  0
 0  0 196872  84844  22152 3497608    0    0     3    62 1034    66  0  0 100  0
 0  0 196872  84844  22160 3497668    0    0     4    32 1029    64  0  0 100  0
 0  0 196872  84780  22172 3497656    0    0     3    43 1043    81  0  0 100  0
 0  0 196872  84780  22188 3497640    0    0     2    32 1026    60  0  0 100  0


# top -b -n 1
top - 19:45:47 up 10:09,  1 user,  load average: 0.04, 0.03, 0.00
Tasks: 144 total,   1 running, 143 sleeping,   0 stopped,   0 zombie
Cpu(s):  2.0% us,  0.7% sy,  0.0% ni, 78.7% id, 18.6% wa,  0.0% hi,  0.1% si
Mem:   4036388k total,  3942008k used,    94380k free,    22320k buffers
Swap:  2031608k total,   196872k used,  1834736k free,  3487376k cached

  PID USER      PR  NI %CPU    TIME+  %MEM  VIRT  RES  SHR S COMMAND
    1 root      16   0    0   0:02.26  0.0  4756  548  456 S init
    2 root      RT   0    0   0:00.02  0.0     0    0    0 S migration/0
    3 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/0
    4 root      RT   0    0   0:00.00  0.0     0    0    0 S migration/1
    5 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/1
    6 root      RT   0    0   0:00.00  0.0     0    0    0 S migration/2
    7 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/2
    8 root      RT   0    0   0:00.00  0.0     0    0    0 S migration/3
    9 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/3
   10 root      RT   0    0   0:00.00  0.0     0    0    0 S migration/4
   11 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/4
   12 root      RT   0    0   0:00.00  0.0     0    0    0 S migration/5
   13 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/5
   14 root      RT   0    0   0:00.00  0.0     0    0    0 S migration/6
   15 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/6
   16 root      RT   0    0   0:00.00  0.0     0    0    0 S migration/7
   17 root      34  19    0   0:00.00  0.0     0    0    0 S ksoftirqd/7
   18 root       5 -10    0   0:00.01  0.0     0    0    0 S events/0
   19 root       5 -10    0   0:00.00  0.0     0    0    0 S events/1
   20 root       5 -10    0   0:00.00  0.0     0    0    0 S events/2
   21 root       5 -10    0   0:00.00  0.0     0    0    0 S events/3
   22 root       5 -10    0   0:00.00  0.0     0    0    0 S events/4
   23 root       5 -10    0   0:00.00  0.0     0    0    0 S events/5
   24 root       5 -10    0   0:00.00  0.0     0    0    0 S events/6
   25 root       5 -10    0   0:00.00  0.0     0    0    0 S events/7
   26 root       5 -10    0   0:00.00  0.0     0    0    0 S khelper
   27 root      15 -10    0   0:00.00  0.0     0    0    0 S kacpid
   76 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/0
   77 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/1
   78 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/2
   79 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/3
   80 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/4
   81 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/5
   82 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/6
   83 root       5 -10    0   0:00.00  0.0     0    0    0 S kblockd/7
   84 root      15   0    0   0:00.00  0.0     0    0    0 S khubd
  119 root      15   0    0   0:00.01  0.0     0    0    0 S pdflush
  120 root      15   0    0   0:00.00  0.0     0    0    0 S pdflush
  121 root      15   0    0   4:24.85  0.0     0    0    0 S kswapd0
  122 root      12 -10    0   0:00.00  0.0     0    0    0 S aio/0
  123 root       5 -10    0   0:00.00  0.0     0    0    0 S aio/1
  124 root       5 -10    0   0:00.00  0.0     0    0    0 S aio/2
  125 root       5 -10    0   0:00.00  0.0     0    0    0 S aio/3
  126 root       5 -10    0   0:00.00  0.0     0    0    0 S aio/4
  127 root       5 -10    0   0:00.00  0.0     0    0    0 S aio/5
  128 root       5 -10    0   0:00.00  0.0     0    0    0 S aio/6
  129 root       5 -10    0   0:00.00  0.0     0    0    0 S aio/7
  273 root      24   0    0   0:00.00  0.0     0    0    0 S kseriod
  520 root      19   0    0   0:00.00  0.0     0    0    0 S scsi_eh_0
  538 root       5 -10    0   0:00.00  0.0     0    0    0 S ata/0
  539 root       8 -10    0   0:00.00  0.0     0    0    0 S ata/1
  540 root       5 -10    0   0:00.00  0.0     0    0    0 S ata/2
  541 root       5 -10    0   0:00.00  0.0     0    0    0 S ata/3
  542 root       5 -10    0   0:00.00  0.0     0    0    0 S ata/4
  543 root       5 -10    0   0:00.00  0.0     0    0    0 S ata/5
  544 root      10 -10    0   0:00.00  0.0     0    0    0 S ata/6
  545 root       5 -10    0   0:00.00  0.0     0    0    0 S ata/7
  546 root      10 -10    0   0:00.00  0.0     0    0    0 S ata_aux
  617 root      15   0    0   0:00.86  0.0     0    0    0 S kjournald
 1278 root       6 -10    0   0:00.00  0.0     0    0    0 S kauditd
 1978 root       6 -10    0   0:00.02  0.0  3608  464  372 S udevd
 2447 oracle    15   0    0   0:07.29  5.8 2186m 229m 223m S oracle
 2747 root      19   0    0   0:00.00  0.0     0    0    0 S kjournald
 4921 oracle    16   0    0   0:00.22  1.3 2180m  51m  48m S oracle
 5009 oracle    16   0    0   0:00.02  0.7 2180m  26m  23m S oracle
 5011 oracle    16   0    0   0:00.02  0.7 2180m  26m  23m S oracle
 5027 oracle    16   0    0   0:00.02  0.7 2180m  26m  22m S oracle
 5045 oracle    16   0    0   0:00.01  0.7 2180m  26m  23m S oracle
 6063 oracle    16   0    0   0:03.60  3.7 2181m 145m 140m S oracle
 6065 oracle    16   0    0   0:02.67  3.4 2181m 134m 129m S oracle
 6379 root      17   0    0   0:00.00  0.0  2380  280  216 S sesh
 6380 root      18   0    0   0:00.00  0.0 71304 1296 1016 S su
 6381 root      15   0    0   0:00.21  0.0 54076 1712 1208 S bash
 7653 root      16   0    0   0:00.76  0.1 64400 2500 1740 S mc
 7655 root      16   0    0   0:00.05  0.0 54000 1576 1196 S bash
 9942 root      15   0    0   0:00.00  0.0  6152 1076  764 R top
22645 root      16   0    0   0:00.01  0.0  3632  600  488 S syslogd
22649 root      16   0    0   0:00.00  0.0  2540  372  296 S klogd
22663 root      16   0    0   0:00.00  0.0  2552  304  204 S irqbalance
23042 rpc       18   0    0   0:00.00  0.0  4756  564  444 S portmap
23062 rpcuser   19   0    0   0:00.00  0.0  5808  744  628 S rpc.statd
23099 root      16   0    0   0:00.00  0.0 20932  416  212 S rpc.idmapd
23206 root      19   0    0   0:00.00  0.0  2544  448  364 S acpid
23218 root      16   0    0   0:00.01  0.1 72280 2216 1492 S cupsd
23307 root      16   0    0   0:00.09  0.0 21936 1276  864 S sshd
23328 root      18   0    0   0:00.00  0.0  8720  780  616 S xinetd
23471 root      16   0    0   0:00.01  0.1 35012 2432  976 S sendmail
23481 smmsp     16   0    0   0:00.00  0.0 27808 1828  748 S sendmail
23492 root      16   0    0   0:00.00  0.0  4180  344  264 S gpm
23502 root      16   0    0   0:00.01  0.0 57096  992  576 S crond
23524 xfs       16   0    0   0:00.00  0.0 10400 1772  736 S xfs
23543 root      16   0    0   0:00.00  0.0  8916  424  296 S atd
23553 dbus      16   0    0   0:00.03  0.0 20948  984  760 S dbus-daemon-1
23567 root      19   0    0   0:00.00  0.0 10044  940  780 S cups-config-dae
23578 root      16   0    0   0:09.94  0.1 15208 2568 1288 S hald
23875 oracle    16   0    0   0:10.40  0.3 48780  13m 6228 S tnslsnr
23928 oracle    16   0    0   0:07.00  0.6 2181m  24m  20m S oracle
23930 oracle    16   0    0   0:00.06  0.4 2180m  17m  13m S oracle
23932 oracle    16   0    0   0:02.57  9.4 2180m 368m 365m S oracle
23934 oracle    16   0    0   0:03.07 14.4 2187m 568m 559m S oracle
23936 oracle    15   0    0   0:34.39  0.9 2194m  33m  29m S oracle
23938 oracle    16   0    0   0:01.38  1.7 2181m  65m  61m S oracle
23940 oracle    16   0    0   0:03.44  5.0 2182m 195m 190m S oracle
23942 oracle    16   0    0   0:00.05  1.0 2181m  41m  36m S oracle
23944 oracle    16   0    0   0:01.29  2.7 2182m 105m  99m S oracle
23946 oracle    16   0    0   0:02.73  4.3 2183m 169m 162m S oracle
23948 oracle    16   0    0   0:02.19  1.7 2180m  67m  64m S oracle
23950 oracle    16   0    0   0:00.00  0.4 2181m  17m  13m S oracle
23952 oracle    16   0    0   0:00.00  0.4 2180m  16m  13m S oracle
23960 oracle    16   0    0   0:01.01  0.7 2195m  28m  14m S oracle
23962 oracle    16   0    0   0:01.29  0.7 2195m  28m  14m S oracle
23964 oracle    16   0    0   0:00.01  0.5 2180m  18m  15m S oracle
24007 root      17   0    0   0:00.00  0.0  2528  404  336 S mingetty
24008 root      18   0    0   0:00.00  0.0  2528  404  336 S mingetty
24009 root      19   0    0   0:00.00  0.0  2528  404  336 S mingetty
24010 root      18   0    0   0:00.00  0.0  2528  404  336 S mingetty
24011 root      18   0    0   0:00.00  0.0  2528  404  336 S mingetty
24012 root      18   0    0   0:00.00  0.0  2528  404  336 S mingetty
24564 oracle    16   0    0   0:35.18  8.4 2181m 329m 324m S oracle
24566 oracle    16   0    0   0:17.81  8.0 2181m 316m 311m S oracle
24582 oracle    16   0    0   0:00.84  2.8 2182m 112m 106m S oracle
24584 oracle    16   0    0   0:00.05  0.4 2180m  17m  14m S oracle
30494 oracle    16   0    0   0:00.02  0.7 2180m  26m  22m S oracle
30498 oracle    16   0    0   0:00.02  0.7 2180m  26m  22m S oracle
30504 oracle    16   0    0   0:00.01  0.7 2180m  25m  22m S oracle
30508 oracle    16   0    0   0:03.90  1.4 2180m  56m  52m S oracle
30510 oracle    16   0    0   0:07.95  7.3 2182m 288m 283m S oracle
30512 oracle    15   0    0   0:02.71  5.6 2182m 222m 217m S oracle
30514 oracle    16   0    0   0:01.61  3.7 2183m 147m 142m S oracle
30516 oracle    16   0    0   0:03.81  5.3 2182m 210m 205m S oracle
30518 oracle    16   0    0   0:04.90  7.1 2183m 281m 276m S oracle
30520 oracle    16   0    0   0:04.56  4.7 2183m 186m 180m S oracle
30522 oracle    16   0    0   0:04.50  6.0 2182m 235m 230m S oracle
30524 oracle    16   0    0   0:00.30  0.7 2180m  27m  23m S oracle
30526 oracle    16   0    0   0:00.42  1.1 2180m  43m  39m S oracle
30528 oracle    16   0    0   0:00.39  1.0 2180m  40m  36m S oracle
30530 oracle    16   0    0   0:00.40  1.0 2180m  41m  37m S oracle
30536 oracle    16   0    0   0:00.01  0.7 2180m  26m  22m S oracle
30538 oracle    16   0    0   0:00.36  0.7 2180m  27m  23m S oracle
30540 oracle    16   0    0   0:00.38  0.7 2180m  27m  23m S oracle
31411 root      16   0    0   0:00.00  0.1 37100 2580 2016 S sshd


Никакие параметры или настройки не менялись.

Вообще у меня есть предположение, что нагрузка связана с тем, что Oracle восстанавливал или откатывал транзакции с журналов, которые не были выполнены из-за аварийного отключения сервера. А сейчас все восстановил и далее работать будет уже обычным образом. Такое возможно?
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
20.12.2016, 21:15
    #39371375
ma1tus
ma1tus
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Alibek B., о восстановлении - там же, в alert; и, возможно fsck проверяла iscsi
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
27.12.2016, 19:48
    #39376342
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Разработчики подключились, но пока ничего криминального не нашли.
Сейчас приложение и база данных работают без каких-либо проблем, в том числе и массовые операции, которые штатно выполняются пару часов. Но когда я включаю сервер приложений в боевую нагрузку, нагрузка на сервер БД начинает расти и через несколько часов она доходит до запредельных значений (70-100), все начинает тормозить и через какое-то время падает база (обычно с ошибкой segfault падает TNS-листенер).

В боевой нагрузке идет большое количество insert в три таблицы, в двух из которых порядка 300М записей и в третьей порядка 20М записей.
Может быть повышение нагрузки на сервер связано с тем, что повреждены данные в dbf-файлах или запортилась статистика, из-за чего работа с этими тремя таблицами происходит значительно медленнее обычного? Или причина в чем-то другом?
Завтра я вместе с разработчиками думаю на некоторое время включить рабочую нагрузку и поснимать статистику.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
28.12.2016, 01:57
    #39376478
Vadim Lejnin
Vadim Lejnin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Alibek B.Разработчики подключились, но пока ничего криминального не нашли.
Сейчас приложение и база данных работают без каких-либо проблем, в том числе и массовые операции, которые штатно выполняются пару часов. Но когда я включаю сервер приложений в боевую нагрузку, нагрузка на сервер БД начинает расти и через несколько часов она доходит до запредельных значений (70-100), все начинает тормозить и через какое-то время падает база (обычно с ошибкой segfault падает TNS-листенер).

В боевой нагрузке идет большое количество insert в три таблицы, в двух из которых порядка 300М записей и в третьей порядка 20М записей.
Может быть повышение нагрузки на сервер связано с тем, что повреждены данные в dbf-файлах или запортилась статистика, из-за чего работа с этими тремя таблицами происходит значительно медленнее обычного? Или причина в чем-то другом?
Завтра я вместе с разработчиками думаю на некоторое время включить рабочую нагрузку и поснимать статистику.

Обычно такое поведение связана с началом swapping на ОС
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
28.12.2016, 09:50
    #39376577
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Ни ОЗУ, ни своп не менялись уже несколько лет, но ранее такого поведения не было.
Но за подсказку спасибо, сегодня понаблюдаю за своппингом под нагрузкой.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
28.12.2016, 11:51
    #39376709
Мутаген
Мутаген
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
надо проверить батарейку на RAID-контроллере. Похоже она отказала и отключился кеш на запись
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
28.12.2016, 12:33
    #39376768
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Спасибо за наводку, проверю.
Выглядит вполне возможным.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
28.12.2016, 14:27
    #39376918
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Мутагеннадо проверить батарейку на RAID-контроллере. Похоже она отказала и отключился кеш на запись
Хорошая была версия, к сожалению с батарейкой все в порядке.
Буду смотреть дальше.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
28.12.2016, 16:54
    #39377066
Alibek B
Alibek B
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Вообщем разработчики разобрались с проблемой.
Они обнаружили, что после сервер приложений записи определенного типа обрабатывает существенно медленнее обычных записей.
Я отключил отправку записей этого типа на сервер приложений (они несущественны) и теперь все работает штатным образом.
С этими записями система без каких-либо проблем работала пару лет и для меня несколько непонятно, почему проблема вылезла именно сейчас, тем более что записи эти различаются на прикладном уровне, а в базе данных он хранятся в одной таблице с остальными записями. Но причину выяснить разработчики не смогли и предположили, что это звезды так сошлись — совпало сразу несколько условий.
Вообщем проблема была не в БД и топик можно закрывать.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
28.12.2016, 20:21
    #39377224
Q.Tarantino
Q.Tarantino
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормозит сервер
Alibek B.,

очень внятно все описал. спасибо.
...
Рейтинг: 0 / 0
| Ответить | Цитировать | Написать  
Форумы / Oracle [игнор отключен] [закрыт для гостей] / Тормозит сервер / 15 сообщений из 15, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение  
Полит. конфиден.  
созд. / загр.: 472ms
Закрыть
start [/forum/topic.php?fid=52&mobile=1&tid=1886731]:
 0ms
get settings:
 8ms
get forum list:
 11ms
check forum access:
 3ms
check topic access:
 3ms
track hit:
 155ms
get topic data:
 10ms
get forum data:
 3ms
get page messages:
 52ms
get tp. blocked users:
 1ms
others: 226ms
total:  472ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]