Этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
Политика конфиденциальности
|
|
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
Vladimir BaskakovавторНо программа-обработчик работает только с физическими файлами (это я говорил в первом посте). всеми сразу? может ей пакет ссыпать из базы, обработать и назад всосать? это раз. Сколько стоит ее замена. Что такого суперуникального она делает?Если это все распарсено и лежит грудой в удобной базе? и Guest_otorvaInterSky, а как именно программа работает с файлами? Если имя файла передается ей в качестве параметра в командной строке, то несложно написать оболочку, которая будет извлекать данные из СУБД, формировать файл и подсовывать вашей программе. Если программа открывает файл через GUI, можно опять-таки извлекать из СУБД необходимый набор файлов и подсовывать его программе. Аналогичные действия можно выполнять при создании таких файлов, т.е. после создания файла программой с помощью оболочки записывать его в СУБД. Ребята, ну я же уже 3 раза писал об этом выше... Создание/удаление файлов дико тяжолая операция с точки зрения операционной системы. Жутко не выгодно создавать ту область файлов которая нужна программе. Я вначале должен придумать что программа запросит, создать это, а потом войти и запросить в ней тоже самое. А из результатов хочу перейти в анализ по одному параметру, и опять заходишь в свою программу и делаешь чтобы программа несколько минут создавала файлы нужные файлы. Это не говоря о том что тогда надо изучить какие файлы использует программа для анализа, какие для контроля целостности информации... Да - Можно купить новый SSD под каждую машину где стоит такая программа... Да - Можно нанаять программистов которые изучат как работает программа и создадут аналог который работает с MySQL. А можно просто найти сжимающиеся контейнеры (если они есть под линуксом, то и под виндой должны быть), просто я понимаю из тех кто принял участие в дискуссии никто с такими не работал (хотя я упомянул о STACKER под MS DOS, и о .ISZ от UltraISO) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 18:01 |
|
||
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
InterSkyДа - Можно купить новый SSD под каждую машину где стоит такая программа... А купить один SSD на файловый сервер? Программа может стоять где угодно, файлы не обязаны быть рядом с ней. Posted via ActualForum NNTP Server 1.5 ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 18:05 |
|
||
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
Мишган-кабанчикА чем, автора не устраивает vhd-диск положенный на ntfs-том с сжатием? 2008, Win7 такое умеют - гугл знает. О, похоже я уже реализовал и описал выше твою идею, взяв ImDisk Virtual Disk Driver и указав виндоусу что контейнер должен сжиматься. Хотя почитав в википедии про vhd-диск я не встретил упоминание о ImDisk (которая работает и на ХР). ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 18:13 |
|
||
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
InterSkyпочитав в википедии про vhd-диск я не встретил упоминание о ImDiskЛогично, они друг к другу никакого отношения не имеют. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 18:24 |
|
||
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
Dimitry SibiryakovInterSkyДа - Можно купить новый SSD под каждую машину где стоит такая программа... А купить один SSD на файловый сервер? Программа может стоять где угодно, файлы не обязаны быть рядом с ней. И опять упираемся в железо... Каждому клиенту покупаем по файловому серверу или проводим им интернет чтобы они могли соединиться с главным файловым сервером... Зачем траты когда наверняка всё решается простенькой програмкой... Что самое интересное - когда несколько лет назад в разделе "Hardware" задавал вопрос - "Какой SSD диск взять чтобы ускорить работу программы?", то народ наоборот придумывал 1000 аргументов дескать нафиг железом ускорять когда можно программами. А в этом разделе наоборот. Загадочные люди... :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 18:28 |
|
||
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
miksoftInterSkyНачну с того что в поисках контейнеров я наткнулся на ImDisk Virtual Disk Driver.На оригинальном сайте (на который там есть ссылочка) лежит версия посвежее. Кстати, там рядом рекламируется DAEMON Tools Lite. Он много форматов образов поддерживает. Из них ничего не подойдет? Я тоже думал какую ссылку тут дать оригинальную (где мне ничего не понятно) или на русский сайт где в двух предложениях объясняется что это за продукт и что он делает. Всё же чувствуется что это не коммерческое ПО - они не стараются заинтересовать своей программой тех кто заходит им на сайт... А про DAEMON Tools - он у меня стоит. Но он не создаёт контейнеры, а лишь работает с ними. Тоесть заранее надо знать что именно может дать тебе то что (это я уже наверно третий раз говорю о формате "сжатого .ISO" под расширением .ISZ) Буду пытаться, искать, перебирать... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 18:36 |
|
||
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
InterSkyнаоборот придумывал 1000 аргументов дескать нафиг железом ускорять когда можно программами. Очевидно, ты там забыл упомянуть, что ты не программист, и исходников программы нет. Posted via ActualForum NNTP Server 1.5 ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 18:41 |
|
||
|
Как хранить миллионы файлов размером меньше 40-90 байт?
|
|||
|---|---|---|---|
|
#18+
InterSkyПочему увеличение файлов в 2 раза привело к УМЕНЬШЕНИЮ занимаемого пространства - я не полнялПроцитирую себя, любимого и выделю ключевые слова:Из этих "менее девяти" - два мегабайта на подросшие индексы Если индекс смог вырасти, то почему бы ему не смочь уменьшиться? Вы точно все числа сравнили? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.07.2013, 19:44 |
|
||
|
|

start [/forum/topic.php?fid=26&msg=38336165&tid=1495432]: |
0ms |
get settings: |
6ms |
get forum list: |
15ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
23ms |
get topic data: |
7ms |
get forum data: |
2ms |
get page messages: |
37ms |
get tp. blocked users: |
1ms |
| others: | 237ms |
| total: | 334ms |

| 0 / 0 |
