Подскажите правильно ли я мыслю / Проектирование БД

ReSQL.ru

Мобильная версия Контакт Правила FAQ Помощь

Гость

Войти | Регистрация | Профиль | Очистить

Новые сообщения | Избранное

Форумы | Пользователи | Статистика | Мод. лог | Поиск

Цитировать

Написать

Автор*:

Ввести пароль для входа

Тема*:

Сообщение

Данное сообщение тематическое

Сообщение содержит картинки или видео 18+

Автор:

ВНИМАНИЕ! На данном подфоруме действуют строгие правила. Удостоверьтесь, что ваше сообщение соответствует им!

Форум или тема закрыты для гостей. Необходима авторизация!

Загрузить последнюю сохраненную версию

Вложение:

Вставить как галерею

Максимальный размер вложений: 4,0 МБ, аудио/видео: 8,0 МБ. Картинки большего размера ужимаются, если возможно.

Введите код, изображенный на картинке. Если код нечитаемый, кликните картинку, чтобы загрузить другой вариант.

Отправляя сообщение, я выражаю свое согласие с правилами форума и принимаю пользовательское соглашение.

Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр

Форумы / Проектирование БД [игнор отключен] [закрыт для гостей] / Подскажите правильно ли я мыслю

12 сообщений из 37, страница 2 из 2

все

Подскажите правильно ли я мыслю

#35882703

Bely

Участник

Откуда: Москва

Сообщения: 1 650

Рейтинг: 0 / 0

vazhneckiуточняю для вторых танкистов :)
select * from .... where id in(N1,N2...N500)
где все N случайны
В таблице записей не 10 штук, а 10 миллионов, так, что даже половина не умещяется в кеше.

Так подет?

Код: plaintext

1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.

C:\Documents and Settings\bely>sqlplus /nolog

SQL*Plus: Release  11 . 1 . 0 . 6 . 0  - Production on Fri Mar  20   18 : 22 : 23   2009 

Copyright (c)  1982 ,  2007 , Oracle.  All rights reserved.

SQL>
SQL> SELECT count(*), min(lg.id), max(lg.id) FROM act_oper_activ_log lg;

  COUNT(*) MIN(LG.ID) MAX(LG.ID)
---------- ---------- ----------
   23144511            1     74871623 

SQL>
SQL> set timing on
SQL> set autotrace on
SQL>
SQL> SELECT count(*), min(lg.id), max(lg.id) FROM act_oper_activ_log lg
   2   WHERE lg.id in (SELECT level* 100  from dual connect by level <  700 );

  COUNT(*) MIN(LG.ID) MAX(LG.ID)
---------- ---------- ----------
        588          100        69900 

Elapsed:  00 : 00 : 00 . 20

...

Рейтинг:

0 / 0

20.03.2009, 18:27

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882753

vazhnecki

Гость

какой размер одной записи в act_oper_activ_log ?

вот так с запасом:
SELECT count(*), min(lg.id), max(lg.id) FROM act_oper_activ_log lg
WHERE lg.id in (SELECT level*10000 from dual connect by level < 700);
предварительно сбросив дисковый кеш и сделав этот запрос только 1 раз без "предварительных тестов" которые заполнят кеш :)

...

Рейтинг:

0 / 0

20.03.2009, 18:49

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882762

vazhnecki

Гость

хотя даже так будет нереально. потому что записи будут читаться относительно последовательно с диска а значит с меньшей задержкой, но для теста пойдёт :)

...

Рейтинг:

0 / 0

20.03.2009, 18:54

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882812

Гость совсем Гость

Гость

vazhnecki,

ну вот заставил таки
в таблице 29 с небольшим млн записей

запрос select * from table where code in
(здесь 520 значений)

------ Performance info ------
Prepare time = 125ms
Execute time = 141ms
-----------------------------

справедлитвости ради должен сказать что
1. значения не совсем случайные
2. они "охватывают" только часть диапазона возможных значений поля code

однако это не мешает мне по прежнему утверждать, что проблем у мну с этим нет

...

Рейтинг:

0 / 0

20.03.2009, 19:26

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882847

WildSery

Участник

Откуда: да, оттуда.

Сообщения: 19 151

Рейтинг: 0 / 0

vazhneckiпотому что записи будут читаться относительно последовательно с диска
Какие глубокие познания СУБД и особенностей хранения на диске вылазят. Ужоснах.

...

Рейтинг:

0 / 0

20.03.2009, 20:12

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882918

vazhnecki

Гость

Видимо у меня медленный HDD, но меньше секунды не получалось, так или иначе:

Prepare time = 125ms
Execute time = 141ms

=0.266 секунды

а это в 3 раза медленнее чем мне надо, максимум 0.1 секунда должна быть, для 10 запросов в секунду.

WildSeryvazhneckiпотому что записи будут читаться относительно последовательно с диска
Какие глубокие познания СУБД и особенностей хранения на диске вылазят. Ужоснах.
для вас я вижу секрет что данные отсортированы по ID, вот это действительно детский сад.

правда это моё предположение неверно потому что выборка из случайного списка ID всё равно сортируется по ID движком субд.

...

Рейтинг:

0 / 0

20.03.2009, 21:13

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882919

vazhnecki

Гость

[quot vazhnecki]Видимо у меня медленный HDD, но меньше секунды не получалось, так или иначе:

Prepare time = 125ms
Execute time = 141ms

=0.266 секунды

а это в 3 раза медленнее чем мне надо, максимум 0.1 секунда должна быть, для 10 запросов в секунду.

...

Рейтинг:

0 / 0

20.03.2009, 21:14

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882922

vazhnecki

Гость

тьфу. чёт я проглючил, конечно не последовательно.
но это не меняет сути, данные разбросаны по разным сегментам диска и скорость получения инфы ограничена скоростью доступа к дорожке диска

...

Рейтинг:

0 / 0

20.03.2009, 21:16

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882937

Гость совсем Гость

Гость

vazhnecki[quot vazhnecki]Видимо у меня медленный HDD, но меньше секунды не получалось, так или иначе:

Prepare time = 125ms
Execute time = 141ms

=0.266 секунды

а это в 3 раза медленнее чем мне надо, максимум 0.1 секунда должна быть, для 10 запросов в секунду.

Не знаю что там у тебя, а мну в качестве "сервера" обыкновенная десктопная машинка, не первой свежести

Prepare time - время подготовки запроса
Execute time - время его выполнения

если я воткну эти 5000 (5 тысяч) значений в таблицу, и сделаю соответствующую выборку
select t.* from table_data t,table_where w
where t.code=w.code

ну или последовательно 10 раз выполню запрос
select t.* from table_data t,table_where w
where t.code=w.code and w.nw = :nw

мне записи вернет я думаю за приемлемое время.

НЕ могу сейчас проверить, да и лень честно говоря

ЗЫ. Все-же еще раз советую обратиться в форум соответствующий твоей СУБД. Там больше пользы будет.

...

Рейтинг:

0 / 0

20.03.2009, 21:35

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35882943

Senya_L

Участник

Откуда: Москва

Сообщения: 5 471

Рейтинг: 0 / 0

Гость совсем ГостьЗЫ. Все-же еще раз советую обратиться в форум соответствующий твоей СУБД. Там больше пользы будет.Разве это образумит вошедшего во вкус флудераста?

...

Рейтинг:

0 / 0

20.03.2009, 21:42

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35883012

vazhnecki

Гость

всё, нашел решение для моего случая,
редко вызываемые ID будут периодически выноситься в отдельную таблицу, что уменьшит основную таблицу значительно.

...

Рейтинг:

0 / 0

20.03.2009, 23:05

| Ответить | Цитировать | Написать

Подскажите правильно ли я мыслю

#35883201

Bely

Участник

Откуда: Москва

Сообщения: 1 650

Рейтинг: 0 / 0

vazhneckiдля вас я вижу секрет что данные отсортированы по ID, вот это действительно детский сад.
Это если повезет.
Реально - нет.

...

Рейтинг:

0 / 0

21.03.2009, 10:49

| Ответить | Цитировать | Написать

12 сообщений из 37, страница 2 из 2

все

Форумы / Проектирование БД [игнор отключен] [закрыт для гостей] / Подскажите правильно ли я мыслю

Читали тему (0):

Читали форум (0):

Пользователи онлайн (0):

start [/forum/topic.php?fid=32&msg=35882847&tid=1543365]:	0ms
get settings:	10ms
get forum list:	20ms
check forum access:	4ms
check topic access:	4ms
track hit:	60ms
get topic data:	13ms
get forum data:	4ms
get page messages:	69ms
get tp. blocked users:	2ms
others:	240ms

total:	426ms

	Необходимые cookie
	Cookie для сбора статистики
	Cookie для маркетинга и рекламы