powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Форумы / Проектирование БД [игнор отключен] [закрыт для гостей] / Многокритериальный поиск в очень-очень большой базе
25 сообщений из 309, страница 7 из 13
Многокритериальный поиск в очень-очень большой базе
    #33957116
Фотография Anton Demidov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
ВыбегаллоА если кластер заведомо проигрышней SMP на OLTP типа нагрузке, то зачем бенчмарки гонять, зачем результаты выставлять и позориться, а ? Ключевое слово - масштабируемость . SMP можно расширять до какого-то предела как средство №1, потом можно еще один узел добавить, когда уже некуда процессора и память втыкать. Подход IBM - выкиньте старое SMP железо и купите (конечно же у них) более мощное.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957136
Yo.!!
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Anton DemidovСел в лужу IBM - это у него попугаев получилось меньше в ТРС-С, вот и шифруется теперь.
да, я тоже не понял понял почему sap parrallel c лотус нотес на железе из другой эпохи не сравнить, там тоже какие-то попугаи, а че тоже 2 буквы в названии тестов совпадает
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957167
Выбегалло
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Yo.!! Anton DemidovСел в лужу IBM - это у него попугаев получилось меньше в ТРС-С, вот и шифруется теперь.
да, я тоже не понял понял почему sap parrallel c лотус нотес на железе из другой эпохи не сравнить, там тоже какие-то попугаи, а че тоже 2 буквы в названии тестов совпадает

че сказать-то хотели ? И как насчет разницы в результатах TPC-C - есть достоверное объяснение, почему так слабо и почему никто, включая Оракла, давно не выкладывает новых ?
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957170
Выбегалло
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Yo.!! Anton DemidovСел в лужу IBM - это у него попугаев получилось меньше в ТРС-С, вот и шифруется теперь.
да, я тоже не понял понял почему sap parrallel c лотус нотес на железе из другой эпохи не сравнить, там тоже какие-то попугаи, а че тоже 2 буквы в названии тестов совпадает

че сказать-то хотели ? И как насчет разницы в результатах TPC-C - есть достоверное объяснение, почему так слабо и почему никто, включая Оракла, давно не выкладывает новых ?
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957174
Выбегалло
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Anton Demidov ВыбегаллоА если кластер заведомо проигрышней SMP на OLTP типа нагрузке, то зачем бенчмарки гонять, зачем результаты выставлять и позориться, а ? Ключевое слово - масштабируемость . SMP можно расширять до какого-то предела как средство №1, потом можно еще один узел добавить, когда уже некуда процессора и память втыкать. Подход IBM - выкиньте старое SMP железо и купите (конечно же у них) более мощное.

Месье теоретик ?
Вот товарищ от сохи рассказывает :
/topic/210788&pg=2
------
Тот же тривиальный SUN B1000 можно проапгрейдить заменой CPU на двухядерный
А еще можно шасси взять и позже платами добивать
Да много вариантов.
У меня на старой работе заменили стариный RS/6000 - просто вернули местному IBM и доплатили. Получили новый. Вариантов куча.
------

А при постановке новых узлов - ваши 8 дешевых нодов будут работать как 5. Так что слухи о дешевизне RAC сильно преувеличены.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957175
guest_20040621
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Ба, никак дба мухосранский прорезался. ;) Ну что, дружище, рассказали своему CIO о резервировании? Слюнявчик от моего имени пообещали? Хм... огорчу, передумал. Нефиг всем подряд в красявых слюнявчиках в цветочек щеголять. ;)

> как стервятник на падаль

Спасибо, дружище.

> разговаривать по теме опасается

По какой теме, дружище? ;) Полагаете, я должен объяснить всем дебилам на свете, почему именно 100 Тб оперативных данных не бывает? Хм... а зачем? Если человеку нравится топорщить пальцы, рассуждая о VLDB - пусть топорщит, мне это ничуть не мешает.

Дружище, я уже говорил, что dba - это исключительно тупая работа. Не нужно вот так буквально стараться соответствовать моим тезисам.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957186
Выбегалло
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
guest_20040621Ба, никак дба мухосранский прорезался. ;) Ну что, дружище, рассказали своему CIO о резервировании? Слюнявчик от моего имени пообещали? Хм... огорчу, передумал. Нефиг всем подряд в красявых слюнявчиках в цветочек щеголять. ;)

> как стервятник на падаль

Спасибо, дружище.

> разговаривать по теме опасается

По какой теме, дружище? ;) Полагаете, я должен объяснить всем дебилам на свете, почему именно 100 Тб оперативных данных не бывает? Хм... а зачем? Если человеку нравится топорщить пальцы, рассуждая о VLDB - пусть топорщит, мне это ничуть не мешает.

Дружище, я уже говорил, что dba - это исключительно тупая работа. Не нужно вот так буквально стараться соответствовать моим тезисам.

А вы у нас, стало быть, столичная штучка. Правда, ничего слаще Firebird-а вы не видели, к 100Т хранилищам и близко не подходили, а земля, по-вашему, безусловно плоская.
Кстати, все забываю спросить - так что вам ваш знакомый с будущим "пикобайтным" хранилищем сказал по поводу бэкапа на ленты ? Покрутил у виска ? Или, как я подозреваю, нет никакого знакомого ?
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957452
ggv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ggv
Гость
есть такой продукт (ну или семейство продуктов) - Product Center.
Предназначен для хранения инфы по всевозможным категориям товаров со всевозможным кол-вом аттрибутов (как пример - пластиковая бутылка воды в торг сети описывается около 50 атрибутами), позволяет моделировать всевозможнейшие иерархии, и выгружать необходимые срезы
В основном предназнаен для работы в пакетном режиме - когда предприятия/департамент выгружает нужную ему иерархию товаров и с ней работают, но может работать и в режиме хаба, отвечая на запросы.
Создан продукт так как была потребность предприятий в едином взгляде на товары/услуги с разных сторон - бухгалтер смотрит, например, с одной стороны на номенклатуру товаров, а технолог совсем с другой. Предприятие производитель имеет свои взгляды на производимую им бутилированную воду, а вот магазин имеет свои, совсем другие взгляды.
Та же "разреженная таблица с переменным супер-пупер динамическим" кол-вом аттрибутов.
Только ее никто таблицей не называет. И используют по назначению, под имеющиеся задачи. И справляется с очень охрененными кол-вами данных. Ведь не редкость, что предприятие имеет дело с тысячами товаров, с сотнями поставщиков, и с тысячами аттрибутов. Их произведение - охрененная величина.
Была реальная потребность - сделали решение.
IBM продает и внедряет.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957498
casmith
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Кстати, что-то подобное на схожую тему я читал в PCWeek. Там в самом начале есть коротенькие заметки об американской военщине. Много сообщений о попытках и проектах анализа и работы с разреженными массивами данных.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957581
Фотография Last_Alien
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
sysprg
Автор читал Кнута??? Ну тогда можно общаться дальше :-)
Как Вы относитесь к оптимальным бинарным деревьям поиска и построению системы на их основе?
Для примера пересечения 2млн.записей с атрибутом 1 и 10тыс.записей с атрибутом 2 и их пересечением в 100 записей, можно реализовать систему, поднимающую с диска максимум 122 записи при условии хранения значений атрибутов в самих записях. Увеличение кол-ва записей с атрибутами при том же их пересечении в 100 раз приведет к росту необходимой выборки до 138 записей. (формулы здесь рисовать вломы).
Если Вам это не интересно, можете продолжать общаться с флудерами.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957759
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Random_Goodman
И последнее: вы меня тока не бейте, но у меня почему-то очень сильное
подозрение, что если взять идею дорогого аффтора, стереть нафиг его
проектирование, почесать репу и сделать свое, то в результате получится
не миллион, а сто и не кластер а комп а может и вообще на WinXp Home
Edition+ mySQL запашет прекрасно...

Боюсь это ясно уже почти всем кроме самого аффтара. Он загипнотизировал
себя словами "переменное количество столбцов" и "очень разряженные данные".
На практике это "переменное количество" на счет "раз" сворачивается в
фиксированное, а данные уплотняются. Ну и дальше, как и сказал Последний
Алиен, в ход идут оптимальные деревья и битовые маски.
Posted via ActualForum NNTP Server 1.3
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957839
Фотография Last_Alien
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Dimitry Sibiryakov
Боюсь это ясно уже почти всем кроме самого аффтара. Он загипнотизировал
себя словами "переменное количество столбцов" и "очень разряженные данные".
На практике это "переменное количество" на счет "раз" сворачивается в
фиксированное, а данные уплотняются. Ну и дальше, как и сказал Последний
Алиен, в ход идут оптимальные деревья и битовые маски.
Posted via ActualForum NNTP Server 1.3

Не цитируй меня, не зная моей идеи. Ты мыслишь в рамках существующих СУБД. Для решения поставленной задачи нужна система, заточенная под разреженные таблицы большой размерности.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957857
antand
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Читаю, читаю этот топик.... устал.
Опять пошли разговоры не по теме и т.п.

К автору.
Пожалуйста, ну очень Вас прошу, приведите хотя бы краткую постановку задачи с примерами и подайте ее людям для обсуждения. Ну, если не хотите ваших страшных тайн открывать, на которых Вы деньги будете зарабатывать на миллионах пользователей, приведите пример из другой области.

В противном случае, все обсуждение ничего не даст, Вы и сами это видите.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33957874
Фотография Last_Alien
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
antandЧитаю, читаю этот топик.... устал.
Опять пошли разговоры не по теме и т.п.

К автору.
Пожалуйста, ну очень Вас прошу, приведите хотя бы краткую постановку задачи с примерами и подайте ее людям для обсуждения. Ну, если не хотите ваших страшных тайн открывать, на которых Вы деньги будете зарабатывать на миллионах пользователей, приведите пример из другой области.

В противном случае, все обсуждение ничего не даст, Вы и сами это видите.

Читай топик полностью и не ленись :-) Автор уже раз пять задачу ставил.
Обсуждение кое-что дает. Если бы не мешали личности уровня db admin/prog, было бы проще. Задача должна решаться на уровне алгоритмов и sys prog.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958034
Мимопроходящий
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Привет, Last_Alien!
Ты пишешь:

Last_AlienLA> Читай топик полностью и не ленись :-)
LA> Автор уже раз пять задачу ставил.а она всё не стоит и не стоит...
интеллектуальная импотенция, не иначе!

--
With best regards, Мимопроходящий.

Posted via ActualForum NNTP Server 1.3
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958057
Фотография Last_Alien
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Мимопроходящий

Если тебе нечего сказать, то лучше промолчи (будешь казаться умнее).
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958133
Мимопроходящий
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Привет, Last_Alien!
Ты пишешь:

Last_AlienLA> Если тебе нечего сказать, то лучше промолчи (будешь казаться умнее).
иди с дичком воюй, обиженный.
если ты считаешь тот нефильтрованный поток сознания,
который выплеснул в форум автор, постановкой задачи ,
то вам двоим действительно есть о чём поговорить...

--
With best regards, Мимопроходящий.

Posted via ActualForum NNTP Server 1.3
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958150
Фотография Last_Alien
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Мимопроходящий
Привет, Last_Alien!
иди с дичком воюй, обиженный.
если ты считаешь тот нефильтрованный поток сознания,
который выплеснул в форум автор, постановкой задачи ,
то вам двоим действительно есть о чём поговорить...

--
With best regards, Мимопроходящий.

Posted via ActualForum NNTP Server 1.3

Так мы с ним и общаемся. А ты только и делаешь, что вставляешь свои абсолютно бессмысленные коментарии. Читай другие ветки, где тебе постановка задач нравится. В чем проблема-то?
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958163
Мимопроходящий
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Привет, Last_Alien!
Ты пишешь:

Last_AlienLA> Так мы с ним и общаемся. А ты только и делаешь, что вставляешь
LA> свои абсолютно бессмысленные коментарии. Читай другие ветки,
LA> где тебе постановка задач нравится. В чем проблема-то?в ЕКБ, наверное...

--
With best regards, Мимопроходящий.

Posted via ActualForum NNTP Server 1.3
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958178
Фотография Last_Alien
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Мимопроходящий
в ЕКБ , наверное...


расшифруй
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958321
Dimitry Sibiryakov
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Last_Alien
Не цитируй меня, не зная моей идеи. Ты мыслишь в рамках существующих
СУБД.

Так изложите ее, о великий. Я вижу Вы таки считаете необходимым под его
типовую задачу разрабатывать специализированную СУБД...
Posted via ActualForum NNTP Server 1.3
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958355
Фотография Last_Alien
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Dimitry Sibiryakov
Так изложите ее, о великий. Я вижу Вы таки считаете необходимым под его
типовую задачу разрабатывать специализированную СУБД...
Posted via ActualForum NNTP Server 1.3

Зачем бесплатно отдавать то, на чем можно сделать деньги? Чтобы их сделали другие?:-)))
Виртуальный гипермаркет планетарного масштаба для Вас типовая задача????
Из какой галактики Вы к нам прилетели, уважаемый?:-)))
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958368
_nicht_schissen_
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Армейская исследовательская лаборатория США заказала у фирмы Linux Networx (www.linuxnetworx.com) кластер из 4096 процессоров Intel Xeon 5100 / 3 ГГц с суммарной производительностью около 50 Тфлопс. ОЗУ комплекса составит 8,5 Тб, объём жестких дисков — 260 Тб.

Специалисты Linux Networx в данный момент развертывают в лаборатории ещё один специализированный кластер LS Visual Supersystem, предназначенный для визуализации больших объёмов данных. В ходе опытной эксплуатации на этом кластере пакета распределенного рендеринга сложных трёхмерных сцен EnSight DR 8 (www.ensight.com) был достигнут мировой рекорд скорости рендеринга — 1,5 млрд. полигонов/с (почти в три раза выше предыдущего). При этом система показывает линейный рост производительности при наращивании числа процессоров. Пока в ней задействуется 128 двухъядерных процессоров AMD Opteron Model 280 с общим ОЗУ 1024 Мб. Кластер работает под управлением RedHat Enterprise Linux.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958412
guest_20040621
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
> А вы у нас, стало быть, столичная штучка.

Комплексуете? Бросьте. Зато, видимо, Вы первый, кому социальные службы по работе с умственно отсталыми нашли работу dba.

> "пикобайтным" хранилищем

Дружище, "пико" - это 10^-12. Оптимисты работают в этой социальной службе. И работодатель Ваш - оптимист.
...
Рейтинг: 0 / 0
Многокритериальный поиск в очень-очень большой базе
    #33958446
Мимопроходящий
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Привет, Last_Alien!
Ты пишешь:

Last_AlienLA> Зачем бесплатно отдавать то, на чем можно сделать деньги?
LA> Чтобы их сделали другие?:-)))
LA> Виртуальный гипермаркет планетарного масштаба для Вас типовая задача????
      Когда я был маленький, злой дебил,
      За моей спиной стоял огромный мир.
      Казался тенью от моих волос,
      И дышал мне в темя, как теплый пес.
      Но пришел черед и для моих работ...


/*Алексей Кортнев.*/

начинающие всегда уверены, что их первая программа перевернёт мир...
с возрастом это проходит. обычно.

--
With best regards, Мимопроходящий.

Posted via ActualForum NNTP Server 1.3
...
Рейтинг: 0 / 0
25 сообщений из 309, страница 7 из 13
Форумы / Проектирование БД [игнор отключен] [закрыт для гостей] / Многокритериальный поиск в очень-очень большой базе
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]