Гость
Форумы / Hardware [игнор отключен] [закрыт для гостей] / Развалился raid5 / 25 сообщений из 26, страница 1 из 2
25.08.2015, 06:56
    #39035268
Dmitriy1984
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Имеем сервер HP proliant.
В нем два логических диска
С- Raid0 состоящий из двух дисков с установленной ОС.
D- Raid5 состоящий из 4 дисков.

После скачка напряжения логический диск D исчез. Также не видим никакими программами.
В настройках сервера выяснилось, что один из жестких дисков файлед т.е. вышел из строя.
В наличие есть такой же пустой диск.
Вопрос: Как восстановить диск D c информацией?
...
Рейтинг: 0 / 0
25.08.2015, 10:49
    #39035376
bga83
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Dmitriy1984,
если был действительно 5-й рейд, то вылет одного диска не привел бы пропаже логического тома. так что ситуация несколько странная.
А вообще все просто: устанавливается диск в сервер и через утилиту управления RAID-контроллером запускается ребилд

Dmitriy1984С- Raid0 состоящий из двух дисков с установленной ОС.с какой целью используется 0-й рейд? проблем в жизни мало?
...
Рейтинг: 0 / 0
25.08.2015, 12:11
    #39035469
Ivan_Pisarevsky
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Dmitriy1984D- Raid5
Dmitriy1984логический диск D исчез.
Dmitriy1984что один из жестких дисков файлед
Либо массив без избыточности, либо сдохло более одного диска. Все три пункта не могут быть одновременно, какой-то из них врет.
Dmitriy1984Вопрос: Как восстановить диск D c информацией?тащить спецам по восстановлению инфы, но лучше поднять бэкап. Как вариант поднять руками файлед диск в онлайн.

Dmitriy1984Raid0 состоящий из двух дисковЗа что боролись, на то и напоролись. Финал закономерен.
...
Рейтинг: 0 / 0
25.08.2015, 14:46
    #39035686
S.G.
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Dmitriy1984С- Raid0 состоящий из двух дисков с установленной ОС.
D- Raid5 состоящий из 4 дисков.Просто дикое очень странное сочетание из шести дисков.


Dmitriy1984...логический диск D исчез. Также не видим никакими программами.
В настройках сервера выяснилось, что один из жестких дисков файлед т.е. вышел из строя.
В наличие есть такой же пустой диск.
Вопрос: Как восстановить диск D c информацией?Если бы диск Д действительно был райд-5, он был бы виден, как "degraded". Сильно подозреваю, что Raid5 на D на самом деле тоже был raid0.
Так чтоооо....


Dmitriy1984После скачка напряжения UPS-а тоже нет?
...
Рейтинг: 0 / 0
25.08.2015, 15:24
    #39035723
Мимопроходящий
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Hello, S G.!
You wrote on 25 августа 2015 г. 15:25:16:

S G.> Сильно подозреваю, что Raid5 на D на самом деле тоже был raid0.
на 4-х дисках?
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
25.08.2015, 15:44
    #39035738
rahzer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Как вариант, диск D был полностью забит данными, винт выпал, объем массива уменьшился, но данные то не уменьшились и процесс восстановления не идет, потому что банально некуда.
Остальную банальщину уже озвучили.
...
Рейтинг: 0 / 0
25.08.2015, 15:49
    #39035744
rahzer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Вообще, надо зайти в утилиту управления рэйд-контроллером, посмотреть, что там вообще:
- какие массивы созданы
- какие у них статусы (дегрэйд, ребилд, ок и т.п.)
- какие диски каким массивам принадлежат
- какие диски вышли из строя
А то наобум советовать - смысл? Можно ведь и ошибиться, потом кучу денег платить за восстановление..
Ну тут похоже стандартный клинический случай - нет упсов, нет энергозащищенной памяти с включенным кэшем на запись, нет бэкапов (самое плохое)
...
Рейтинг: 0 / 0
25.08.2015, 16:16
    #39035779
Ivan_Pisarevsky
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
МимопроходящийHello, S G.!
You wrote on 25 августа 2015 г. 15:25:16:

S G.> Сильно подозреваю, что Raid5 на D на самом деле тоже был raid0.
на 4-х дисках?Технологически препятствий нет, а тем, кому "покласть на здравый смысл" возможно и не только такое.

rahzerКак вариант, диск D был полностью забит данными, винт выпал, объем массива уменьшился, но данные то не уменьшились и процесс восстановления не идет, потому что банально некуда.Трижды прочитал, нихрена не понял. Амбисни дураку как может такое быть? контроллеру глубоко пох на ФС массива и заполненность оного данными, оно оперирует блоками, лежит оно уровнем ниже. Каким боком тут заполненность?
...
Рейтинг: 0 / 0
25.08.2015, 16:30
    #39035792
rahzer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
авторТрижды прочитал, нихрена не понял. Амбисни дураку как может такое быть? контроллеру глубоко пох на ФС массива и заполненность оного данными, оно оперирует блоками, лежит оно уровнем ниже. Каким боком тут заполненность?
Ну смотри, например, у тебя:
- массив 5-го уровня из 4-х дисков по 300ГБ
- то есть 900ГБ полезного пространства (по формуле -1 диск под четность)
- Ты забиваешь все эти 900ГБ данными
- Выпадает один диск и..? У тебя уже 3*300ГБ, и надо еще один под четность отдать, в результате уже только 600ГБ!
300ГБ данных просто могут исчезнуть и в разном порядке, т.к. контроллеру пофиг что тереть. В реале будет еще хуже, так как может статься так, что часть документа (затерли блоки) уничтожена и документ не восстановить и тут уже не 300ГБ потерь будет, а больше.
Вот чтобы такого не происходило, в таких ситуациях контроллер стопорится и не производит ребилд, чтобы не пофигачить всю информацию массива.
Просто на обычных серверах это очень редко встречается, поэтому там как правило эта ситуация не встречается и описана только в серьезных технических документах.
А в СХД такая вероятность более вероятная, поэтому в документах к ним, тот же НР еще на свои Евы, говорил, чтобы следили за свободным местом в пулах.
...
Рейтинг: 0 / 0
25.08.2015, 16:35
    #39035799
Мимопроходящий
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Hello, Rahzer!
You wrote on 25 августа 2015 г. 16:35:16:

Rahzer> 300ГБ данных просто могут исчезнуть и в разном порядке, т.к. контроллеру пофиг что тереть
вы, Шариков, ерунду говорите.
И возмутительнее всего то, что говорите ее безапелляционно и уверенно.
Posted via ActualForum NNTP Server 1.5
...
Рейтинг: 0 / 0
25.08.2015, 16:36
    #39035802
rahzer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Понятно, что контроллер оперирует блоками, а не ФС, но он же еще и хранит блоки четности.
И если все блоки заполнены, а нужно по новой с учетом уменьшения количества блоков все перезаписывать, а ему некуда, вот он и стопорится.
...
Рейтинг: 0 / 0
25.08.2015, 16:39
    #39035807
rahzer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
МимопроходящийHello, Rahzer!
You wrote on 25 августа 2015 г. 16:35:16:

Rahzer> 300ГБ данных просто могут исчезнуть и в разном порядке, т.к. контроллеру пофиг что тереть
вы, Шариков, ерунду говорите.
И возмутительнее всего то, что говорите ее безапелляционно и уверенно.

В теории контроллер должен перезаписывать только блоки четности, но кто его знает, что там в прошивке и какие алгоритмы?
Часто производители перестраховываются.
...
Рейтинг: 0 / 0
25.08.2015, 16:51
    #39035819
rahzer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
У меня была такая ситуация, когда Интеловый сервак на массиве 5-го уровня в подобной же ситуации с выходом из строя диска массив перестроил, но записал мусором и в хаотичном порядке блоки. Да, массив был он-лайн, просто почти вся информация была не нем не восстановима, потому что он блоки четности писал не на их прежнее место, а не место других блоков (с информацией полезной для пользователей).
Так что обращались уже к бэкапам.
И не зря в том же НР даже специальные алерты существуют об свободном месте в пуле и рекомендациях, в какие пулы диски новые включать.
...
Рейтинг: 0 / 0
25.08.2015, 16:59
    #39035824
Sergey Orlov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
rahzerНу смотри, например, у тебя:
- массив 5-го уровня из 4-х дисков по 300ГБ
- то есть 900ГБ полезного пространства (по формуле -1 диск под четность)
- Ты забиваешь все эти 900ГБ данными
- Выпадает один диск и..? У тебя уже 3*300ГБ, и надо еще один под четность отдать, в результате уже только 600ГБ!
300ГБ данных просто могут исчезнуть и в разном порядке, т.к. контроллеру пофиг что тереть. В реале будет еще хуже, так как может статься так, что часть документа (затерли блоки) уничтожена и документ не восстановить и тут уже не 300ГБ потерь будет, а больше.
Вот чтобы такого не происходило, в таких ситуациях контроллер стопорится и не производит ребилд, чтобы не пофигачить всю информацию массива.
Просто на обычных серверах это очень редко встречается, поэтому там как правило эта ситуация не встречается и описана только в серьезных технических документах.
А в СХД такая вероятность более вероятная, поэтому в документах к ним, тот же НР еще на свои Евы, говорил, чтобы следили за свободным местом в пулах.
бред... На то он и RAID5, что при вылете одного диска вы не теряете свои данные...
...
Рейтинг: 0 / 0
25.08.2015, 17:03
    #39035829
Ivan_Pisarevsky
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
rahzerтот же НР еще на свои Евы, говорил, чтобы следили за свободным местом в пулах.дисковый пул евы и десктопный рэйд5... блин, это ж надо придумать сравнить.

Вообще никогда не встречал в диком виде нутряных контроллеров, чтоб можно было замутить онлайн миграцию массива, чтоб уменьшить итоговую емкость тома. Нет такого.

rahzerна массиве 5-го уровня в подобной же ситуации с выходом из строя диска массив перестроил, но записал мусором и в хаотичном порядке блоки.Или явный глюк прошивки, или умерло более одного накопителя и их частично подняли руками в онлайн, при этом промахнулись и подняли в онлайн диск который отпал не последним, вот и привет "лапша" вместо данных. Возможно была повреждена инфа на дисках кто какой номер в массиве и тоже "привет".
...
Рейтинг: 0 / 0
25.08.2015, 17:08
    #39035836
Sergey Orlov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
rahzerУ меня была такая ситуация, когда Интеловый сервак на массиве 5-го уровня в подобной же ситуации с выходом из строя диска массив перестроил, но записал мусором и в хаотичном порядке блоки. Да, массив был он-лайн, просто почти вся информация была не нем не восстановима, потому что он блоки четности писал не на их прежнее место, а не место других блоков (с информацией полезной для пользователей).
Так что обращались уже к бэкапам.
И не зря в том же НР даже специальные алерты существуют об свободном месте в пуле и рекомендациях, в какие пулы диски новые включать.
А все потому, что в некоторых дешевых контроллерах новый диск надо ставить сразу после извлечения умершего, в противном случае живые диски могут сдвинуться и тогда абзац... Что и случилось в вашем случае...
...
Рейтинг: 0 / 0
25.08.2015, 17:17
    #39035848
bga83
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
rahzerНу смотри, например, у тебя:
- массив 5-го уровня из 4-х дисков по 300ГБ
- то есть 900ГБ полезного пространства (по формуле -1 диск под четность)
- Ты забиваешь все эти 900ГБ данными
- Выпадает один диск и..? У тебя уже 3*300ГБ, и надо еще один под четность отдать, в результате уже только 600ГБ!
300ГБ данных просто могут исчезнуть и в разном порядке, т.к. контроллеру пофиг что тереть. В реале будет еще хуже, так как может статься так, что часть документа (затерли блоки) уничтожена и документ не восстановить и тут уже не 300ГБ потерь будет, а больше.спасибо, поржал. Давно не встречал чтобы такую отборную чуть столь уверенно несли в массы.
...
Рейтинг: 0 / 0
25.08.2015, 17:30
    #39035862
rahzer
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
авторбред... На то он и RAID5, что при вылете одного диска вы не теряете свои данные...
В теории - да. Но есть еще всякие особенности, типа ну оно может, но вот в такой ситуации нет, например вроде как массив уровня 10 может выдержать одновременное падение 2-х дисков, но смотря где отвалилось.
А еще есть практика, где производитель скажет, ну что-то пошло не так..)
В любом случае, риски при невосстановлении массива есть и любой производитель не даст вам 100% гарантию на успешное восстановление массива(особенно сложных), сразу скажут вероятность большая, но нужны бэкапы)
автордисковый пул евы и десктопный рэйд5...
А кто сказал, что десктопный - написано же сервер HP Proliant
Кстати, та же Ева 6400 это Лефтхэнд, где два контроллера СХД выполнены в отдельных физических сервах НР и связанных софтом, вот там если сглючит, то серьезно, это не как на обычном сервере, там по серьезному проблемы надо решать. Хотя сейчас уже это обычная практика, но все же более распространенная архитектура в одном корпусе и и через внутреннюю шину, а не через iSCSI, мне больше нравится)
авторИли явный глюк прошивки, или умерло более одного накопителя и их частично подняли руками в онлайн, при этом промахнулись и подняли в онлайн диск который отпал не последним, вот и привет "лапша" вместо данных. Возможно была повреждена инфа на дисках кто какой номер в массиве и тоже "привет".
Могу точно сказать, что вручную никто диски в он-лайн не переводил, диск умер в пятницу, контроллер стал ребилдить, контора работает круглосуточно,но в более щадящем режиме, начались проблемы, то один косяк, то другой, в понедельник, когда пришли массив перестроился и мы поняли всю прелесть переписанных блоков при почти 100% заполненности массива.
Хорошо, что это на выходных было, мало данных потеряли,с пятницы восстановились.
авторА все потому, что в некоторых дешевых контроллерах новый диск надо ставить сразу после извлечения умершего, в противном случае живые диски могут сдвинуться и тогда абзац... Что и случилось в вашем случае...
Это как так? ID диска даже через утилиту конфигурации то не так легко поменять...
Там же к номеру порта привязано, к которому через шлейф подключен винт (схд не трогаем и сложные эспандеры на 24 диска))
...
Рейтинг: 0 / 0
25.08.2015, 19:05
    #39035920
S.G.
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
МимопроходящийHello, S G.!
You wrote on 25 августа 2015 г. 15:25:16:

S G.> Сильно подозреваю, что Raid5 на D на самом деле тоже был raid0.
на 4-х дисках?У меня дома есть рейд-0 на трех двухтерабайтных дисках, собранный временно ;) для перелива данных .. и который уже четвертый год работает. Ну данных которые на нем - не особо жалко.
...
Рейтинг: 0 / 0
25.08.2015, 22:23
    #39035984
Sergey Orlov
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
rahzerМогу точно сказать, что вручную никто диски в он-лайн не переводил, диск умер в пятницу, контроллер стал ребилдить, контора работает круглосуточно,но в более щадящем режиме, начались проблемы, то один косяк, то другой, в понедельник, когда пришли массив перестроился и мы поняли всю прелесть переписанных блоков при почти 100% заполненности массива.
Хорошо, что это на выходных было, мало данных потеряли,с пятницы восстановились.

если диск умер, то контроллер не ребилдит массив, он просто тупо помечает умерший диск сбойным и логически не задействует его в работе, после чего включает свою математику, чтобы утрирую, из 2-х данных и контрольной суммы пересчитать выходные данные, при этом действительно скорость работы массива понижается и довольно резко. Даже если диск оживает, все равно он остается помечен как сбойный, причем перезагрузка сервака на это не влияет ... В вашем случае у кого ручки были шаловливые...
Вы не могли бы огласить, что у вас это был за интеловский сервак...
...
Рейтинг: 0 / 0
26.08.2015, 08:08
    #39036071
Ivan_Pisarevsky
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
rahzerТам же к номеру порта привязано, к которому через шлейф подключен винтНичего там ни к какому номеру не привязано. У нормального контроллера можно изъять все диски но холодную, перетасовать, воткнуть обратно в корзину в произвольные гнезда и массив поднимется.

rahzerМогу точно сказать, что вручную никто диски в он-лайн не переводил, диск умер в пятницу, контроллер стал ребилдить, контора работает круглосуточно,но в более щадящем режиме, начались проблемы, то один косяк, то другой, в понедельник, когда пришли массив перестроился и мы поняли всю прелесть переписанных блоков при почти 100% заполненности массива.Опять какая-то мешанина, куда контроллер будет ребилдить, если нет хотспаре диска?
...
Рейтинг: 0 / 0
26.08.2015, 09:07
    #39036091
leguo
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
Глюк прошивки не исключен.
У меня была ситуация когда в корзине все диски горели красным.
Там был RAID10. Ну в общем программой для управления RAID'ом
поднимал диски в онлайн, причем каждый четный ребилдился.
Вот так...
...
Рейтинг: 0 / 0
26.08.2015, 09:55
    #39036136
alexeyvg
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
rahzerавторТрижды прочитал, нихрена не понял. Амбисни дураку как может такое быть? контроллеру глубоко пох на ФС массива и заполненность оного данными, оно оперирует блоками, лежит оно уровнем ниже. Каким боком тут заполненность?
Ну смотри, например, у тебя:
- массив 5-го уровня из 4-х дисков по 300ГБ
- то есть 900ГБ полезного пространства (по формуле -1 диск под четность)
- Ты забиваешь все эти 900ГБ данными
- Выпадает один диск и..? У тебя уже 3*300ГБ, и надо еще один под четность отдать, в результате уже только 600ГБ!
300ГБ данных просто могут исчезнуть и в разном порядке, т.к. контроллеру пофиг что тереть. В реале будет еще хуже, так как может статься так, что часть документа (затерли блоки) уничтожена и документ не восстановить и тут уже не 300ГБ потерь будет, а больше.
Вот чтобы такого не происходило, в таких ситуациях контроллер стопорится и не производит ребилд, чтобы не пофигачить всю информацию массива.
Просто на обычных серверах это очень редко встречается, поэтому там как правило эта ситуация не встречается и описана только в серьезных технических документах.
А в СХД такая вероятность более вероятная, поэтому в документах к ним, тот же НР еще на свои Евы, говорил, чтобы следили за свободным местом в пулах.Вы это всё серьёзно написали??? :-)
Прочтите в какой нибуть популярной статье, что такое уровни RAID.

Заполненные диски для контроллера не отличаются от пустых. Контроллер оперирует секторами дисков, а не данными в файловой системе.

Для массива из 4 дисков делаются большие блоки (страйпы) из 4х маленьких блоков, по одному на каждый диск. 3 блока отдаются для полезной информации, а один - для восстановительного кода. При поломке одного из дисков данные страйпа читаются из оставшихся 3х блоков - этого достаточно. Данные - это просто байты из секторов; соверешнно неважно, хранит там что то ОС, или нет, контроллер этого не различает, и про "заполненность дисков" ничего узнать не может.

Ivan_PisarevskyЛибо массив без избыточности, либо сдохло более одного диска. Все три пункта не могут быть одновременно, какой-то из них врет.Да кривые эти контроллеры, кривой софт, обычное дело. Диск сдох, а контроллер на это дело забил, и все данные потерял, рейд развалил, ничего теперь нет.

Нужно поискать в форумах по модели сервера/контроллера, восстановление более чем вероятно. Рейд просто развалился, но сектора на дисках целы, и можно рейд пересобрать. И действуйте акуратно.
Разве что отказали сразу 2 диска - но это не подтвержадется сообщениями контроллера.
...
Рейтинг: 0 / 0
26.08.2015, 10:34
    #39036167
S.G.
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
alexeyvgДа кривые эти контроллеры, кривой софт, обычное дело. HP proliant ?
...
Рейтинг: 0 / 0
26.08.2015, 12:19
    #39036252
Ivan_Pisarevsky
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Развалился raid5
S.G.alexeyvgДа кривые эти контроллеры, кривой софт, обычное дело. HP proliant ?Пока не исключен вариант, что вставного самртэррея там нет, все может быть собрано и на хострейде (а оно по определению "недорейд"), а то и вовсе средствами ОСи (тоже, кстати не указанной, разве косвенно это винда неизвестного происхождения)
...
Рейтинг: 0 / 0
Форумы / Hardware [игнор отключен] [закрыт для гостей] / Развалился raid5 / 25 сообщений из 26, страница 1 из 2
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]