ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
10 сообщений из 10, страница 1 из 1
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495671
Shab
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Shab
Участник
Добрый день всем!

Система: intel JR2, дисковая система INFORTREND U-12, raid0 из 6 дисков, stripe 128k, логический диск 846 Гб
OS: RHEL4u2, ext3, занято 410 Гб, в каталоге куда пишу 47 файлов обьемом 116Гб.
Весь этот обьем записан со скоростью около 30-60гб\сек. Все что пытаюсь писать дальше размером больше 10М пишется со скоростью около 600к-1М/сек. ФАйлы меньшего размера пролетают мгновенно! "Размер имеет значение" ;)
Например
dd if=/dev/zero of=/u03/app/oracle/oradata/backup/tt3 bs=200M count=1
Наблюдая статистику io - сначала вижу интенсивное чтение диска около 7 сек
Потом запись 2М каждые 5 сек.

Такое впечатление, что начал писать оооочень маленькими блоками.
Почему может такое быть?
Самое главное есть еще 400 гигов, а реально пользоваться - проблема!!!
И как обойти проблему пока не придумал....

Александр
...
Рейтинг: 0 / 0
21.01.2006, 17:17:20
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495696
Фотография Adekamer
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Adekamer
Участник
Гм... очень интересно.....
если не страшно - поиграйся с уровнями журналирования... по умолчанию в ехт3 тип журналирования ordered
попробуй выставить writeback
хотя как мне кажется тонкость в чем то другом
далее - ты смотрел статистику через iostat ?
глянь что твориться с системой - в частности с памятью через vmstat
даже если сам разберешся - напиши сюда - в чем была тонкость плз.
...
Рейтинг: 0 / 0
21.01.2006, 17:38:25
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495697
Shab
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Shab
Участник
где 30Гб/сек читать 30Мб\сек
...
Рейтинг: 0 / 0
21.01.2006, 17:39:15
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495733
Фотография Adekamer
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Adekamer
Участник
это понятно что обшибся :) но тем не менее скорость просто так не падает просто так в разы....
что при копировании выдает iostat и vmstat ?
...
Рейтинг: 0 / 0
21.01.2006, 19:06:52
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495760
Shab
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Shab
Участник
пользуюсь dstat
dd if=/dev/zero of=/u03/app/oracle/oradata/backup/dead_speed7 bs=500M count=100 &
dstat -d -m
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
4096B    0 :   0     0 :   0     0 :   0     0 | 128M 4636k 3900M   17M
  12k 1162M:   0     0 :  28k 4096B:   0     0 | 167M 4824k 3863M   15M
4096B  240k:   0     0 :   0     0 :   0     0 | 163M 4976k 3866M   17M
   0   588k:   0     0 :8192B    0 :   0     0 | 159M 4672k 3873M   14M
--disk/sda----disk/sdb----disk/sdc----disk/sdd- ------memory-usage-----
_read write:_read write:_read write:_read write|_used _buff _cach _free
   0  4096B:   0     0 :8192B   80k:   0     0 | 155M 3424k 3876M   16M
4096B    0 :   0     0 :   0     0 :   0     0 | 151M 3420k 3876M   20M
4096B   78M:   0     0 :   0     0 :   0     0 | 150M 3536k 3880M   17M
   0    68k:   0     0 :  12k 4096B:   0     0 | 146M 3640k 3884M   17M
4096B 2844k:   0     0 :   0     0 :   0     0 | 142M 3756k 3888M   16M
8192B  268k:   0     0 :8192B   40k:   0     0 | 139M 3952k 3892M   15M
4096B   88k:   0     0 :   0     0 :   0     0 | 136M 4088k 3894M   16M
4096B    0 :   0     0 :   0     0 :   0     0 | 133M 4268k 3897M   16M
   0    13M:   0     0 :   0     0 :   0     0 | 130M 4308k 3900M   16M
  16k 6244k:   0     0 :   0     0 :   0     0 | 126M 4380k 3904M   15M
4096B 1099M:   0     0 :   0     0 :   0     0 | 164M 4508k 3865M   17M
4096B    0 :   0     0 :   0     0 :   0     0 | 160M 4464k 3869M   17M
   0     0 :   0     0 :   0     0 :   0     0 | 157M 4188k 3873M   16M
8192B  100k:   0     0 :   0     0 :   0     0 | 154M 4356k 3876M   17M
4096B  980k:   0     0 :   0     0 :   0     0 | 150M 3872k 3882M   14M
   0  8192B:   0     0 :   0     0 :   0     0 | 147M 3884k 3881M   19M
4096B   66M:   0     0 :   0     0 :   0     0 | 146M 4008k 3884M   16M
4096B    0 :   0     0 :   0     0 :   0     0 | 143M 4204k 3886M   16M
4096B 2184k:   0     0 :   0     0 :   0     0 | 141M 4348k 3889M   16M
4096B    0 :   0     0 :8192B   16k:   0     0 | 138M 4460k 3892M   16M
...
Рейтинг: 0 / 0
21.01.2006, 19:46:06
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495762
Shab
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Shab
Участник
Пару раз система закиллила процесс
Почему она его не загоняет в своп, а убивает?
...
Рейтинг: 0 / 0
21.01.2006, 19:47:53
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495806
Фотография Adekamer
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Adekamer
Участник
э... Я немного незнаком с dstat - думаю это что то спешал фо диск....
Я думаю надо всеж глянуть что при этом происходит с системой... настоятельно рекомендую паралельно в другой консоли запустить iostat и vmstat - станет понятно чего нехватает - где затык...
Извини - пока мало инфы чтоб можно было что то точно сказать - давай рыть дальше - если не проив :)
пы-сы: когда бушь запускать iostat & vmstat ставь обновление секунды 3
...
Рейтинг: 0 / 0
21.01.2006, 21:17:16
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495821
Shab
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Shab
Участник
да я только рад с этим разобраться :)

дай плиз вариант параметров iostat vmstat для удобного просмотра.

Создал я 3 файла обьемом 1,5 Мб на медленной скорости - дальше пишется пока быстро. И еще в одном каталоге пришлось создать "медленный файл".
Проверил места где обычно ротирую файлы - пока порядок. Эти медленные файлы не буду удалять пока не выясню причину.
...
Рейтинг: 0 / 0
21.01.2006, 21:45:53
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33495843
no-dashi-v2
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
no-dashi-v2
Гость
Shabdd if=/dev/zero of=/u03/app/oracle/oradata/backup/tt3 bs=200M count=1

??? Поставь хотя-бы 4М. Существует великое множество причин на это...
...
Рейтинг: 0 / 0
21.01.2006, 22:56:55
| Ответить | Цитировать | Написать  
Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
    #33496048
Фотография Adekamer
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Adekamer
Участник
значиться так
iostat -x 3 Это обшая по системе
iostat -k -p /dev/sda (/dev/hda или что там у нас - партиции покажет сам) это типа диски позырить
у vmstat ключей поболее
vmstat -a -n 3 - статистика с используемой памятью
vmstat -n 3 статистика с кешем
vmstat -d 3 статистика дисков - но не очень
цыфырка 3 - тайм обновления ставить оч маленькую тайм - нездорово - тк тоже кушаются системные ресурсы... большую - не актуально....
в обшем посматривая на статистику во время работы жуткой проги (демона) можно смотреть где затык - толь память - толь дисковая система - толь цпу банально не хватает.... дальше начинаем шаманить - и можем смотеть уже более глубоко и предметно на деяния нашего тюнигха....
...
Рейтинг: 0 / 0
22.01.2006, 13:17:53
| Ответить | Цитировать | Написать  
10 сообщений из 10, страница 1 из 1
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Падает скорость записи с 30Gb/sek до 4 mb/sek на ext3
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=25&msg=33495760&tid=1489868]:
 0ms
get settings:
 8ms
get forum list:
 15ms
check forum access:
 3ms
check topic access:
 3ms
track hit:
 68ms
get topic data:
 11ms
get forum data:
 3ms
get page messages:
 60ms
get tp. blocked users:
 2ms
others: 212ms
total:  385ms
созд. / загр.: 385ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]