ReSQL.ru
     
powered by simpleCommunicator - 2.0.59     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Быстрый хеш ?
25 сообщений из 56, страница 2 из 3
  2  все
Быстрый хеш ?
    #37645003
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Ваш капитан очевидностьА потом - поменять местами планки, и еще раз прогнать. Объяснять зачем менять?
проще мемсет тогда запускать, чо
...
Рейтинг: 0 / 0
03.02.2012, 01:22
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37645011
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
AklinВаш капитан очевидностьА потом - поменять местами планки, и еще раз прогнать. Объяснять зачем менять?
проще мемсет тогда запускать, чо

Ну ну.
...
Рейтинг: 0 / 0
03.02.2012, 01:42
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37645562
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
root@sandbox-abc:~/migr/crot/tmp# cat log1 | uniq -c
      1 Fri Feb  3 00:54:43 UTC 2012
   1178 4cc4f0515468c56e96ef3d7c0aa57c57e013920f  debian-6.0.3-amd64-DVD-1.iso
root@sandbox-abc:~/migr/crot/tmp# cat log5 | uniq -c
      1 Fri Feb  3 00:54:43 UTC 2012
   1179 231ef6d946ac3864a61c36ab631f6405  debian-6.0.3-amd64-DVD-1.iso
root@sandbox-abc:~/migr/crot/tmp#

еще варианты ?
...
Рейтинг: 0 / 0
03.02.2012, 12:55
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37646039
Мутаген
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Мутаген
Гость
размер битых участков странно совпадает с длиной условной дорожки винчестера на писюке (63 сектора по 512 байт), я бы сюда посмотрел.

ну и для сравнения файлов есть встроенная команда cmp, нет нужды писать чего-то особое.
...
Рейтинг: 0 / 0
03.02.2012, 15:54
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37646610
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
Мутагенразмер битых участков странно совпадает с длиной условной дорожки винчестера на писюке (63 сектора по 512 байт), я бы сюда посмотрел.

Куда сюда? Все винчестеры имеют встроенную проверку CRC, она считается при считывании блоков с диска и сверяется с записанной ранее.
...
Рейтинг: 0 / 0
03.02.2012, 22:43
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37646616
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
Aklin
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
root@sandbox-abc:~/migr/crot/tmp# cat log1 | uniq -c
      1 Fri Feb  3 00:54:43 UTC 2012
   1178 4cc4f0515468c56e96ef3d7c0aa57c57e013920f  debian-6.0.3-amd64-DVD-1.iso
root@sandbox-abc:~/migr/crot/tmp# cat log5 | uniq -c
      1 Fri Feb  3 00:54:43 UTC 2012
   1179 231ef6d946ac3864a61c36ab631f6405  debian-6.0.3-amd64-DVD-1.iso
root@sandbox-abc:~/migr/crot/tmp#

еще варианты ?

выдай
mount|grep tmp
cat /proc/meminfo
...
Рейтинг: 0 / 0
03.02.2012, 22:47
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37646995
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Мутагенну и для сравнения файлов есть встроенная команда cmp, нет нужды писать чего-то особое.

файлы бинарные и интересно было в первую очередь - несовпадающие "блоки" - поскольку когда я первый раз запустил - заметил что несовпадения идут подряд. это первое. а второе - исправлять пусть даже десяток блоков в файле по 32к - быстрее чем копировать весь много-гб файл целиком...

да и програмулька то... проста...
...
Рейтинг: 0 / 0
04.02.2012, 15:00
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37646996
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Ваш капитан очевидностьвыдай
mount|grep tmp
cat /proc/meminfo

пока запустил мемтест вчера на ночь

при дефолтных настройках - 10 проходов, ошибок нет :-/

попробуйю сейчас повторить тест с tmpfs :-/
...
Рейтинг: 0 / 0
04.02.2012, 15:01
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647005
Мутаген
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Мутаген
Гость
Ваш капитан очевидность..винчестеры имеют встроенную проверку CRC

Думай, прапор, думай!
Что там ещё есть между файлами и винчестерами? Какой софт?
...
Рейтинг: 0 / 0
04.02.2012, 15:21
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647032
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
МутагенВаш капитан очевидность..винчестеры имеют встроенную проверку CRC

Думай, прапор, думай!
Что там ещё есть между файлами и винчестерами? Какой софт?

Софт? Там лишь дыбьян, который наш лунтик поставил как рабочую систему (ему видать про rhel/centos тоже, никто еще не рассказал).
...
Рейтинг: 0 / 0
04.02.2012, 15:48
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647039
Мутаген
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Мутаген
Гость
Думай ещё, прапор, думай!
Где в redhate есть CRC, а в Debian - нет?
...
Рейтинг: 0 / 0
04.02.2012, 15:56
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647046
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
МутагенКакой софт?

железо, софт и диски описаны здесь --> Подкиньте идей: часть вторая, логическая
...
Рейтинг: 0 / 0
04.02.2012, 16:07
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647048
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Ваш капитан очевидностьему видать про rhel/centos тоже, никто еще не рассказал

рассказывали, но было немного поздновато

а сейчас желания нет переносить все :-/
...
Рейтинг: 0 / 0
04.02.2012, 16:09
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647082
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
в догонку
...
Рейтинг: 0 / 0
04.02.2012, 16:43
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647100
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Ваш капитан очевидностьвыдай
mount|grep tmp
cat /proc/meminfo
Ваш капитан очевидностьAklin
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
root@sandbox-abc:~/migr/crot/tmp# cat log1 | uniq -c
      1 Fri Feb  3 00:54:43 UTC 2012
   1178 4cc4f0515468c56e96ef3d7c0aa57c57e013920f  debian-6.0.3-amd64-DVD-1.iso
root@sandbox-abc:~/migr/crot/tmp# cat log5 | uniq -c
      1 Fri Feb  3 00:54:43 UTC 2012
   1179 231ef6d946ac3864a61c36ab631f6405  debian-6.0.3-amd64-DVD-1.iso
root@sandbox-abc:~/migr/crot/tmp#
еще варианты ?

выдай
mount|grep tmp
cat /proc/meminfo
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.
49.
root@sandbox-abc:~/migr/crot/tmp# mount | grep tmp
none on /dev type devtmpfs (rw,mode=0755)
none on /dev/shm type tmpfs (rw,nosuid,nodev)
none on /var/run type tmpfs (rw,nosuid,mode=0755)
none on /var/lock type tmpfs (rw,noexec,nosuid,nodev)
none on /lib/init/rw type tmpfs (rw,nosuid,mode=0755)
tmpfs on /root/migr/crot/tmp type tmpfs (rw,size=5G)
root@sandboxcl-abc:~/migr/crot/tmp# cat /proc/meminfo 
MemTotal:        8194548 kB
MemFree:           81908 kB
Buffers:          127092 kB
Cached:          7360596 kB
SwapCached:            0 kB
Active:          4839840 kB
Inactive:        2700840 kB
Active(anon):    4626572 kB
Inactive(anon):      516 kB
Active(file):     213268 kB
Inactive(file):  2700324 kB
Unevictable:           0 kB
Mlocked:               0 kB
SwapTotal:             0 kB
SwapFree:              0 kB
Dirty:                 4 kB
Writeback:             0 kB
AnonPages:         52992 kB
Mapped:            20568 kB
Shmem:           4574096 kB
Slab:              87248 kB
SReclaimable:      37616 kB
SUnreclaim:        49632 kB
KernelStack:        1920 kB
PageTables:         7012 kB
NFS_Unstable:          0 kB
Bounce:                0 kB
WritebackTmp:          0 kB
CommitLimit:     4097272 kB
Committed_AS:    4801252 kB
VmallocTotal:   34359738367 kB
VmallocUsed:      325216 kB
VmallocChunk:   34359405240 kB
HardwareCorrupted:     0 kB
HugePages_Total:       0
HugePages_Free:        0
HugePages_Rsvd:        0
HugePages_Surp:        0
Hugepagesize:       2048 kB
DirectMap4k:        7680 kB
DirectMap2M:     8380416 kB
root@sandbox-abc:~/migr/crot/tmp#

частота - по мойму на автомате (либо на 800мгц должна стоять на память)
тайминги - на мемтест скриншоте есть
...
Рейтинг: 0 / 0
04.02.2012, 17:07
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647130
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
повторный tmpfs-тест
Код: plaintext
1.
2.
3.
4.
root@sandbox-abc:~/migr/crot/tmp# cat log? | uniq -c
      1 Sat Feb  4 17:07:15 UTC 2012
    100 4f12c9d33123ef16358953f475fc03ca5473601f  debian-6.0.3-amd64-DVD-2.iso
      1 Sat Feb  4 17:07:15 UTC 2012
    100 bcf236e8f7124be61953877654a4e04b  debian-6.0.3-amd64-DVD-2.iso
...
Рейтинг: 0 / 0
04.02.2012, 18:08
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647131
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
заметил что в целом догадка про блоки 512 верна - все (или почти все) расхождения в блоках - кратны 512...
...
Рейтинг: 0 / 0
04.02.2012, 18:09
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647195
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
МутагенДумай ещё, прапор, думай!
Где в redhate есть CRC, а в Debian - нет?

Куй его знает, я дыбьяном не пользуюсь.
...
Рейтинг: 0 / 0
04.02.2012, 20:07
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647196
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
Aklinповторный tmpfs-тест
Код: plaintext
1.
2.
3.
4.
root@sandbox-abc:~/migr/crot/tmp# cat log? | uniq -c
      1 Sat Feb  4 17:07:15 UTC 2012
    100 4f12c9d33123ef16358953f475fc03ca5473601f  debian-6.0.3-amd64-DVD-2.iso
      1 Sat Feb  4 17:07:15 UTC 2012
    100 bcf236e8f7124be61953877654a4e04b  debian-6.0.3-amd64-DVD-2.iso


У тебя tmpfs не на всю память. Кого ты обмануть собрался?
...
Рейтинг: 0 / 0
04.02.2012, 20:08
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647198
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
AklinМутагенКакой софт?

железо, софт и диски описаны здесь --> Подкиньте идей: часть вторая, логическая

Да, чувак, данные о твоем кулере - это конечно круто.
Ты бы еще модель тумбочки опубликовал, на которой у тебя стоит эта куча дешевого говножелеза.


Дыбьян, raid6 такой raid... аклин такой аклин.

Типичное мышление неудачника в действии.
...
Рейтинг: 0 / 0
04.02.2012, 20:11
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647201
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Ваш капитан очевидностьУ тебя tmpfs не на всю память. Кого ты обмануть собрался?
Ваш капитан очевидностьAklinповторный tmpfs-тест
Код: plaintext
1.
2.
3.
4.
root@sandbox-abc:~/migr/crot/tmp# cat log? | uniq -c
      1 Sat Feb  4 17:07:15 UTC 2012
    100 4f12c9d33123ef16358953f475fc03ca5473601f  debian-6.0.3-amd64-DVD-2.iso
      1 Sat Feb  4 17:07:15 UTC 2012
    100 bcf236e8f7124be61953877654a4e04b  debian-6.0.3-amd64-DVD-2.iso


У тебя tmpfs не на всю память. Кого ты обмануть собрался?

мемтест проходит
...
Рейтинг: 0 / 0
04.02.2012, 20:15
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37647205
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
Ваш капитан очевидностьДыбьян, raid6 такой raid... аклин такой аклин.

Типичное мышление неудачника в действии.

типичное мышление неудачника в действии - это быть профи (понимать больше остальных) и при этом не знать. а неудачником - потому что я так или иначе найду решение пусть даже потерей данных, а ты - как знающий - облажаешься.

так что думай товарещ

а рейд6 - он и в африке рейд6
у меня уже есть как минимум одно неоспоримое преимущество над железякой - я могу перезаписать конфиг рейда поверх "битого" рейда (данные на дисках целы) и поднять данные. на железке такое не пройдет.
...
Рейтинг: 0 / 0
04.02.2012, 20:18
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37649199
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
питание от БП на

на запуске:
11.75-12.05
5.02-5.08

после запуска
12.02-12.05
5.02-5.08
...
Рейтинг: 0 / 0
06.02.2012, 18:59
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37649309
Ваш капитан очевидность
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ваш капитан очевидность
Гость
AklinВаш капитан очевидностьДыбьян, raid6 такой raid... аклин такой аклин.

Типичное мышление неудачника в действии.

типичное мышление неудачника в действии - это быть профи (понимать больше остальных) и при этом не знать. а неудачником - потому что я так или иначе найду решение пусть даже потерей данных, а ты - как знающий - облажаешься.
Да, только одна пичалька. У меня данные не сыпятся, а у тебя - полная жопа.

Aklinтак что думай товарещ
Думать тут не над чем. Неудачник - это судьба.

Aklinа рейд6 - он и в африке рейд6
Вообще-то существуют только два вида рейдов. RAID1 и RAID10. С контроллером на батарейке.
Но ты это опять видать не понял, как и про rhel/centos

Aklinу меня уже есть как минимум одно неоспоримое преимущество над железякой - я могу перезаписать конфиг рейда поверх "битого" рейда (данные на дисках целы) и поднять данные. на железке такое не пройдет.

Ага. Вера - это вещь такая... иррациональная. Как раз тебе в самый раз.
...
Рейтинг: 0 / 0
06.02.2012, 20:52
| Ответить | Цитировать | Написать  
Быстрый хеш ?
    #37649385
Фотография Aklin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Aklin
Участник
итак, новые результаты

за последнее время рейд не ребилдился (ни основной ни резервный). ФС не менялась. в общем ничего не делалось.

с резервного рейда на основной был скопирован (второй копией) 3.2тб блок (все тот же блок) файлов. заново. и просчитаны его хеш-файлы. потом мне на 50к примерно надоело и я остановил. почему?

потому что и так стало понятно, что эксперимент удался (в плохом смысле). были найдены расхождения как минимум десяти файлов.
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
diff from  1195868672 to  1195897344 size     28672
diff from  1196392960 to  1196421632 size     28672[/FIXED

что печально вообще говоря :-(
и дело похоже не в резервном рейде (ибо его хеши совпадают с вторым резервным рейдом и со старыми хешами). что-то творится с основным рейдов, а что я не могу понять. 

пока попробую заменить один возможно проблемный диск, дальше посмотрю что будет :-/
...
Рейтинг: 0 / 0
06.02.2012, 22:17
| Ответить | Цитировать | Написать  
25 сообщений из 56, страница 2 из 3
  2  все
Форумы / Unix-системы [игнор отключен] [закрыт для гостей] / Быстрый хеш ?
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]