Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Swappiness в 2,6 / 25 сообщений из 44, страница 1 из 2
22.11.2006, 15:19:41
    #34147149
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
подскажите плиз куда копать - при Swappiness=0 RHEL AS4 (2.6.17) продолжает свопить память :(
...
Рейтинг: 0 / 0
22.11.2006, 15:30:59
    #34147218
Adekamer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
кинь нам сюды вывод sysctl -a
а мы тут помозгуем что у тебя и где
...
Рейтинг: 0 / 0
22.11.2006, 15:43:57
    #34147285
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.
49.
50.
51.
52.
53.
54.
55.
56.
57.
58.
59.
60.
61.
62.
63.
64.
65.
66.
67.
68.
69.
70.
71.
72.
73.
74.
75.
76.
77.
78.
79.
80.
81.
82.
83.
84.
85.
86.
87.
88.
89.
vm.swap_token_timeout = 300
vm.legacy_va_layout = 0
vm.vfs_cache_pressure = 100
vm.block_dump = 0
vm.laptop_mode = 0
vm.max_map_count = 65536
vm.percpu_pagelist_fraction = 0
vm.min_free_kbytes = 3831
vm.drop_caches = 0
vm.lowmem_reserve_ratio = 256	256	32
vm.hugetlb_shm_group = 0
vm.nr_hugepages = 1024
vm.swappiness = 0
vm.nr_pdflush_threads = 2
vm.dirty_expire_centisecs = 3000
vm.dirty_writeback_centisecs = 500
vm.dirty_ratio = 16
vm.dirty_background_ratio = 4
vm.page-cluster = 3
vm.overcommit_ratio = 50
vm.overcommit_memory = 0
kernel.randomize_va_space = 1
kernel.bootloader_type = 2
kernel.unknown_nmi_panic = 0
kernel.ngroups_max = 65536
kernel.printk_ratelimit_burst = 10
kernel.printk_ratelimit = 5
kernel.panic_on_oops = 0
kernel.pid_max = 32768
kernel.overflowgid = 65534
kernel.overflowuid = 65534
kernel.pty.nr = 9
kernel.pty.max = 4096
kernel.random.uuid = bf44bc30-0587-429e-bef5-1cd7a977fefe
kernel.random.boot_id = 27e2c447-2626-4e27-a030-45f070fabfab
kernel.random.write_wakeup_threshold = 128
kernel.random.read_wakeup_threshold = 64
kernel.random.entropy_avail = 3668
kernel.random.poolsize = 4096
kernel.threads-max = 139263
kernel.sysrq = 0
kernel.sem = 250	32000	100	128
kernel.msgmnb = 16384
kernel.msgmni = 16
kernel.msgmax = 8192
kernel.shmmni = 4096
kernel.shmall = 2097152
kernel.shmmax = 3000000000
kernel.acct = 4	2	30
kernel.hotplug = /sbin/hotplug
kernel.modprobe = /sbin/modprobe
kernel.printk = 6	4	1	7
kernel.ctrl-alt-del = 0
kernel.real-root-dev = 0
kernel.tainted = 0
kernel.core_pattern = core
kernel.core_uses_pid = 1
kernel.panic = 0
kernel.domainname = (none)
kernel.hostname = nemo
kernel.version = #1 SMP Wed Jul 5 04:31:34 MSD 2006
kernel.osrelease = 2.6.17-RC001
kernel.ostype = Linux
fs.quota.warnings = 1
fs.quota.syncs = 14
fs.quota.free_dquots = 0
fs.quota.allocated_dquots = 0
fs.quota.cache_hits = 0
fs.quota.writes = 0
fs.quota.reads = 0
fs.quota.drops = 0
fs.quota.lookups = 0
fs.suid_dumpable = 0
fs.inotify.max_queued_events = 16384
fs.inotify.max_user_watches = 8192
fs.inotify.max_user_instances = 128
fs.aio-max-nr = 65536
fs.aio-nr = 65536
fs.lease-break-time = 45
fs.dir-notify-enable = 1
fs.leases-enable = 1
fs.overflowgid = 65534
fs.overflowuid = 65534
fs.dentry-state = 7577	5203	45	0	0	0
fs.file-max = 65536
fs.file-nr = 11584	0	65536
fs.inode-state = 6673	2850	0	0	0	0	0
fs.inode-nr = 6673	2850
fs.binfmt_misc.status = enabled
...
Рейтинг: 0 / 0
22.11.2006, 17:17:27
    #34147751
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Adekamerкинь нам сюды вывод sysctl -a
а мы тут помозгуем что у тебя и где
многа буков?
...
Рейтинг: 0 / 0
22.11.2006, 17:39:53
    #34147875
Adekamer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
попробуй vm.vfs_cache_pressure поднять хотяб до 1000
и кинь плиз cat /proc/meminfo до и после изменения позырим
ЗЫ: видео грабим ? или что такого тяжолого обрабатываем ?
...
Рейтинг: 0 / 0
22.11.2006, 17:44:37
    #34147887
Adekamer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
нормально смогу поковырять только дома - там у меня RHEL 4 - здеся (на работе 3-ка пользуется) так щта - не отчаивайся - вечерком покумекаем
...
Рейтинг: 0 / 0
22.11.2006, 17:58:24
    #34147932
MacDuck
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Adekamer
ЗЫ: видео грабим ? или что такого тяжолого обрабатываем ?

oracle у нее.
...
Рейтинг: 0 / 0
22.11.2006, 18:12:58
    #34147966
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Adekamerпопробуй vm.vfs_cache_pressure поднять хотяб до 1000
и кинь плиз cat /proc/meminfo до и после изменения позырим
ЗЫ: видео грабим ? или что такого тяжолого обрабатываем ?

подняла, но результаты будут известны в течении недели.
поскольку создать критическую нагрузку на продакшене с 8 гигами оперативки- рука не поднимется :)
а на тестовых - памяти поменьше и такого эффекта не наблюдается
...
Рейтинг: 0 / 0
22.11.2006, 18:25:58
    #34147999
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
DВА Adekamerпопробуй vm.vfs_cache_pressure поднять хотяб до 1000
и кинь плиз cat /proc/meminfo до и после изменения позырим
ЗЫ: видео грабим ? или что такого тяжолого обрабатываем ?

подняла, но результаты будут известны в течении недели.
поскольку создать критическую нагрузку на продакшене с 8 гигами оперативки- рука не поднимется :)
а на тестовых - памяти поменьше и такого эффекта не наблюдается
интересно, после установки vfs_cache_pressu=1000 своп стал быстренько уменьшаться с хорошей такой загрузкой процессоров...
...
Рейтинг: 0 / 0
22.11.2006, 18:33:28
    #34148023
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
пофигу :(
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
1  3 109308 284336 137032 3630508    0    6  1386  8056 3646  5321 35  7 40 18
10  7 111376 283544 135400 3582244    0    0   420  4762 3442  4911 17  9 57 17
 5  9 111376 318176 136312 3590692    0    0  2884  7443 4681  6021 39 10 27 24
 0  3 111376 311524 136544 3599560    0    0  1766  9746 3977  5527 35 10 35 19
 0  2 111376 306324 136632 3607012    0    0   170  4038 3162  4856  7  5 68 20
 9  7 111376 315704 137112 3614332    0    0  1052  7570 3381  4622 29  5 47 19
 1 10 111376 316944 137444 3624140    0    0  2336 11590 4717  6281 54  9 19 18
 1  4 111376 283940 137952 3632212    0    0   742  5487 3794  5517 18  8 57 17
13 10 111672 286120 137484 3618996    6  386   728  3974 3021  4302 19  5 60 16
 5  9 111672 295672 138072 3626468    0    0  2306  7536 3999  4911 60  8 17 15
 6  7 111672 295876 138940 3634960    0    0  2326  4813 3246  4936 58 10 18 14
 8  7 111672 284192 139360 3644160    0    0  2722  3378 3049  4346 54 11 24 11
 7  6 111672 283356 139864 3652236    0    0  1526  4230 3089  4442 64  8 17 10
 6  6 111896 609948 140500 3320244    0    0  1208  5381 3096  4384 58 11 21 11
12  5 111896 609184 140916 3328928    0    0   930  4667 3010  4571 54 10 26 10
 7  2 111896 582520 141356 3339408    0    0   782  7071 3202  5184 63  8 18 12
 9  6 111896 584532 141456 3346848    0    0  1428  3079 3389  5102 43 10 29 18
 7  3 111896 587628 141540 3353264    0    0   890  3602 2880  4303 53  8 22 17
 4  7 111896 589832 142000 3360604    0    0   564  4280 3259  4653 47 10 28 16
 9  4 111896 573896 142136 3368008    0    0   846  3751 3062  4538 42 11 28 18
 4  6 111896 569496 142536 3376708    0    0  1030  5162 2385  3805 54  9 24 14
 4  5 111896 572696 142812 3388392    0    0  1026  5731 2195  3701 38  7 37 17
 5  3 111896 555200 143160 3401564    0    0   892  7220 2157  3991 44  8 33 16
 5  2 111896 540632 143636 3411748    0    0  1064  6053 2005  3541 46  7 27 20
 9  3 111896 520064 144100 3421944    0    0   836  8075 1901  3555 55  8 20 16
 5  6 111896 514076 144820 3431884    0    0   746 10076 2624  3899 53  9 23 15
 2  6 111896 519136 144996 3440288    0    0   684  6598 2226  3590 31  8 40 22

...
Рейтинг: 0 / 0
22.11.2006, 18:35:10
    #34148034
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
 3  8 118940 273936 206132 3614872    0    0  1498  8582 3590  5345 22  5 48 24
 0  9 118940 254856 206752 3622052    0    0  1386  7102 2897  4655 12  6 58 24
10  5 114488 292780 154188 3616812    0 2912   984  7050 3446  5120 12  6 62 20
 1  6 114488 307128 154276 3622964    0    0   560  7724 3391  4713 35  7 41 16
 4  8 114488 309792 154716 3627464    0    0   924  6443 2917  4041 22  6 53 19
 3  5 114488 310016 154756 3633924    0    0   576  5823 2880  4079 35  7 44 15
 2  4 114488 282732 154800 3640056    0    6   764  7364 3698  5460 24  6 56 13
 2  4 114488 280592 155084 3644972    0    0   508  3057 3168  4486 20  6 61 13
 4  5 114488 283936 154904 3642320    0    6   792  6648 3302  4645 34  5 44 17
 8  4 114488 287624 155224 3649020    0    0   360  7607 3569  5328 23  7 53 18
 5  7 114488 279412 155012 3646696    0   98   760  4527 3189  4817 31  6 45 17
 2  5 114488 291332 154352 3635244    0  960   776  6280 3522  5084 29  7 47 17
 6  2 118928 287080 153324 3619280    0  440   624  6264 2902  4901 22  7 52 19
 3  5 118928 284436 153192 3617988    2    4   516  7972 2383  3599 35  8 37 19
 5  4 118928 312944 153540 3623360    0    0   834  7545 2186  3372 13  6 54 27
 5  6 118928 312548 153556 3628804    0    0   702  7278 2742  3974 24  5 50 21
 3  5 118928 307672 153604 3634736    0    0   536 11790 4838  6339 21  6 50 23
 2  2 118928 295688 154096 3644124    0    0   704 14422 4467  6472 20  7 53 20
 0  8 118928 290552 154292 3658228    0    0  4016 11095 3371  4872 34  6 41 19
 1  7 118932 280052 154736 3662208    0  384  1412 13245 2541  4281 15  5 56 24
 6  7 118948 284668 154776 3652068    0 1900   650  8082 2080  3201 21  5 53 21
 1  4 118948 284888 154816 3657228    0    0   496  5873 3670  5319 17  7 53 22
 1  4 118948 280260 155372 3664212    0    0   204  4980 3257  4814  8  4 68 20
 2  4 118944 299028 155440 3671392    0  632  3812  7926 3444  4818 30  6 46 19
procs -----------memory---------- ---swap-- -----io---- --system-- ----cpu----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in    cs us sy id wa
 1 10 118944 270168 169680 3678732    0    0  7707  8996 5104  5338 13  6 58 23
 4  4 118944 259712 184068 3647056    0 1324  8930 11907 5755  6215 24  9 46 22
 2  5 118944 254428 199828 3653396    0    0  8600  8327 5736  5607 17  6 54 23
 1  4 118944 240980 207996 3660048    0    0  5022  7507 4912  5957 16  7 50 27
 1  6 118944 239116 208080 3667764    0    0   806  9434 3603  5023 33  7 39 21
 2  5 118944 243496 204804 3664296    0    0  2130  6494 4698  7231 14  8 58 21
 3 13 118944 238816 204892 3637952    0    2  1858  7643 3945  5821 22  8 45 25
 1  8 118944 260968 204916 3631688    0    4  1126  8854 3672  5025 24  8 46 21
 2  4 118944 254580 205240 3627472    0    0   966  9006 3836  5623 22  7 45 27
 5  4 118944 251892 205340 3634392    0    0   930  8370 3970  5403 34  8 38 19
 0  8 118940 242832 205560 3641684   16    0   966  9534 4007  5652 20  6 50 25
 2  5 118940 282476 205860 3605524    0   26   972  8590 4388  6261 26  9 42 23
 0  6 118940 254384 207028 3631656    0    0  1388  8602 4023  6276 29  7 45 19
 0  7 118940 261264 206288 3602244    0  130  1026  6555 4246  6122 17  7 55 22


...
Рейтинг: 0 / 0
22.11.2006, 21:33:35
    #34148365
Adekamer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Ой :) а я еше хотел предложить ядро пересобрать с отключенной опцией поддержки свопа :) и отрубить все своповые партиции через swapoff :) да куры все кончились :) (Из анекдота)
ЗЫ: оптимизация системы под нагрузкой - оч тонкое и не простое дело
по хорошему надо набрать статистики vmstat iostat meminfo etc
после чего ужо можно смотреть более конкретно - что и как имеет смысл подкрутить
...
Рейтинг: 0 / 0
22.11.2006, 22:23:17
    #34148435
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
AdekamerОй :) а я еше хотел предложить ядро пересобрать с отключенной опцией поддержки свопа :) и отрубить все своповые партиции через swapoff :) да куры все кончились :) (Из анекдота)
ЗЫ: оптимизация системы под нагрузкой - оч тонкое и не простое дело
по хорошему надо набрать статистики vmstat iostat meminfo etc
после чего ужо можно смотреть более конкретно - что и как имеет смысл подкрутить
что подкрутить - и так понятно :)
вопрос - как? :(
...
Рейтинг: 0 / 0
23.11.2006, 08:58:41
    #34148819
Adekamer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
ну не скажите :) что подкрутить - а главное на сколько - это вопрос очень неодназначный - а вот как - это уже намного проще
ЗЫ: а зачем своп то отключать ? чтото тяжолое и очень большое обрабатывается - и дисковая система тормозит весь процесс ? может капнуть с другой стороны ?
...
Рейтинг: 0 / 0
23.11.2006, 09:50:38
    #34148940
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Adekamerну не скажите :) что подкрутить - а главное на сколько - это вопрос очень неодназначный - а вот как - это уже намного проще
ЗЫ: а зачем своп то отключать ? чтото тяжолое и очень большое обрабатывается - и дисковая система тормозит весь процесс ? может капнуть с другой стороны ?


Код: plaintext
1.
2.
3.
4.
5.
   
              total       used       free     shared    buffers     cached
Mem:       8295584    8009908     285676          0     206500    4795872
-/+ buffers/cache:    3007536    5288048
Swap:      4096564      59764    4036800

Своп отключать никто не собирается, тормозит систему жуткий обмен страниц, возникающий при необходимости выделить разным процессам какой-то объем памяти.
Т.е. в нормальной ситуации раскладка как показана по free выше, но когда появляется одновременно много процессов , пытающихся получить память, большая часть памяти выделяется не из под буферов, а почему-то хватает со свопа - в результате сервер вообще перестает реагировать, приходится перегружать. В нормальной ситуации, когда общий объем занятой процессами памяти не превышает 500-700 метров - они используют оперативку. В "критические" моменты по расчетам может понадобиться около 2 гиг - но ни разу получить не удавалось - усе умерало, при всем том, что под дисковым кешем более 4 гиг, которые к тому же активно системой не используются.
...
Рейтинг: 0 / 0
23.11.2006, 10:07:03
    #34149000
Adekamer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
а можно поинтересоваться - что из себя представляет сервер в плане железа ? что за дисковая система - какой проц и сколько мемори ?
на моей памяти ( а это более 6 лет) я так и не смог загрузить линух так - чтоб система не реагировала и не могла просраться
самые тяжолые случаи были с хорошо так нагруженной почтой - где была масса всяких секитов на спам и вирусняки
и ничего - разруливалось
хотя и тяжеловато
на не свовсем топовом железе кстати
...
Рейтинг: 0 / 0
23.11.2006, 10:19:26
    #34149052
Adekamer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
ЗЫ: ulimit вещь клевая - правда если все эти процессы не форки - а выполняются от разных юзверей - тогда можно разрулить оч какчественно такую траблу
да и просто зажать ulimit-ом процесс так чтоб не сожрал всю систему
...
Рейтинг: 0 / 0
23.11.2006, 10:40:34
    #34149145
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
4* intel xeon 3.33 , HT
msa1000
8 гиг оперативки, 4 подкачки
reiserfs
...
Рейтинг: 0 / 0
23.11.2006, 10:45:21
    #34149174
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Adekamer я так и не смог загрузить линух так - чтоб система не реагировала и не могла просраться
700 - 800 одновременно работающих юсеров делают это легко :))
...
Рейтинг: 0 / 0
23.11.2006, 11:33:02
    #34149410
MacDuck
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
Adekamer
да и просто зажать ulimit-ом процесс так чтоб не сожрал всю систему

Если жестко зажать, то при увеличении нагрузки Оракл упадет.
...
Рейтинг: 0 / 0
23.11.2006, 12:29:52
    #34149749
MacDuck
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
bdflush
?
...
Рейтинг: 0 / 0
23.11.2006, 13:41:52
    #34150104
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
вот какое предположение у меня возникло
не может ли вот это vm.nr_hugepages = 1024 портить картину?
эта память у меня приложением использоваться не может, но вот резервирует ли ее линукс или нет, пока она не востребована? потому как если да - то тут становится все на свои места - HugePages_Total=1024 * Hugepagesize= 2048 = 2 недостающих гига
и что означает параметр HugePages_Rsvd =0 ?
...
Рейтинг: 0 / 0
23.11.2006, 13:42:45
    #34150109
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
MacDuckbdflush
?
ядро другое - в 2.6 этого нет
...
Рейтинг: 0 / 0
23.11.2006, 13:59:14
    #34150202
DВА
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
DВАвот какое предположение у меня возникло
не может ли вот это vm.nr_hugepages = 1024 портить картину?
эта память у меня приложением использоваться не может, но вот резервирует ли ее линукс или нет, пока она не востребована? потому как если да - то тут становится все на свои места - HugePages_Total=1024 * Hugepagesize= 2048 = 2 недостающих гига
и что означает параметр HugePages_Rsvd =0 ?

проверила - не оно :(
...
Рейтинг: 0 / 0
23.11.2006, 14:05:04
    #34150235
Сына
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Swappiness в 2,6
DВАвот какое предположение у меня возникло
не может ли вот это vm.nr_hugepages = 1024 портить картину?
эта память у меня приложением использоваться не может, но вот резервирует ли ее линукс или нет, пока она не востребована?
Резервирует. Эти страницы сразу выделяются в памяти.
...
Рейтинг: 0 / 0
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Swappiness в 2,6 / 25 сообщений из 44, страница 1 из 2
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]