ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Насколько опасен или бесполезен limit n,1
9 сообщений из 9, страница 1 из 1
Насколько опасен или бесполезен limit n,1
    #38682360
Фотография Lumix
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Lumix
Участник
Допустим у нас есть база на 2 млн записей.
Мы делаем сортированный запрос с условиями, которых бывает от трех до восьми + пару из них регулярники.
Мы хотим достать запись, но не по айдишнику, а по порядковому номеру в выдаче, например, выдача дала 9000 записей и мы хотим взять 5425-ую, а какой у неё айдишник это будет по-барабану.

Метод решения задачи:

Код: plsql
1.
select * from t where (... and x regex '...' and ...) order by (..., ...) limit 5425,1;



Вопрос:

насколько доставание всего одной записи в этом случае дорого с точки зрения подкапотной работы?
Есть ли вообще хоть какой-то смысл в этом limit x,1?
...
Рейтинг: 0 / 0
27.06.2014, 21:28:58
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38682687
chabapok
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
chabapok
Участник
Lumix,

такие запросы обрабатываются так:
выбираются 5425 записей, и выбирается одна.

т.е. по нагрузке на базу это почти как limit 5426, только с той разницей, что на клиента меньше данных передается.
...
Рейтинг: 0 / 0
28.06.2014, 18:32:34
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38683029
Фотография Lumix
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Lumix
Участник
chabapokLumix,

такие запросы обрабатываются так:
выбираются 5425 записей, и выбирается одна.

т.е. по нагрузке на базу это почти как limit 5426, только с той разницей, что на клиента меньше данных передается.

да... печалька.. :-(

А какие есть принципиально дешевые варианты получения i-ой позиции в запросе?
Только индексированная вьюха что-ли??...
...
Рейтинг: 0 / 0
29.06.2014, 15:12:33
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38684207
chabapok
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
chabapok
Участник
Lumix,

нужно выделить условие, которое прописать во where. Причем, запрос должен идти только по индексированным полям.
а у вас там regex...

не представляю как это можно сделать.

возможно, если набор регулярок ограничен, то может их на этапе вставки выполнить и писать колонку соответствущую
...
Рейтинг: 0 / 0
30.06.2014, 22:46:43
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38685104
Фотография Lumix
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Lumix
Участник
chabapokвозможно, если набор регулярок ограничен, то может их на этапе вставки выполнить и писать колонку соответствущую

Короче, кому интересно, в итоге вчера решили и сдали эту задачу так:

делается запрос
из него все айдишники складываются в обычный файл с паддингом 10, т. е. вот так

Код: sql
1.
2.
3.
4.
5.
6.
0000000001
0000000012
0000000751
0000003521
0050030005
...



Потом перед каждым запросом айдишник записи в базе достается из файла вот так так:
1. открываем файл
2. seek'аем до i * 10 позиции
3. читаем 10 байт
4. как файл перестал быть нужен (как все воркеры отработали) убиваем файл
profit!
...
Рейтинг: 0 / 0
01.07.2014, 20:09:56
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38685304
tanglir
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
tanglir
Участник
Lumix,

ааа... эээ... не проще ли было сделать временную таблицу {ид,порядковый номер} и работать с ней?
...
Рейтинг: 0 / 0
02.07.2014, 04:59:38
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38685629
alex564657498765453
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alex564657498765453
Участник
Lumixchabapokвозможно, если набор регулярок ограничен, то может их на этапе вставки выполнить и писать колонку соответствущую

Короче, кому интересно, в итоге вчера решили и сдали эту задачу так:

делается запрос
из него все айдишники складываются в обычный файл с паддингом 10, т. е. вот так

Код: sql
1.
2.
3.
4.
5.
6.
0000000001
0000000012
0000000751
0000003521
0050030005
...



Потом перед каждым запросом айдишник записи в базе достается из файла вот так так:
1. открываем файл
2. seek'аем до i * 10 позиции
3. читаем 10 байт
4. как файл перестал быть нужен (как все воркеры отработали) убиваем файл
profit!

как верно заметили, чем єто отличаеться от временой таблицы?
а если у неё размер будет всегда меленький ,то можно и в памяти разместить.

если уже и в файл пошли, то зачем ересь делать???
айдишник у вас скажем 4 байтное число, так и пишите в файл 4байтные цисла а не фиговобайтные строки (function pack() | unpack())

незная детали задачи трудно сказать, но работать с шдд бегая по файлу на х8 байт и читать по 8 байт это сексуальное насилие над винчестером. но опять же если задача не вилика, то временая таблица и вперёд

ЗЫ
у меня есть временные таблицы мемори, используються для работы на дереве. вместо того чтобы помнить списки айдишников, ну или читать их из файлов временых.

ЗЫЗЫ
кстате, а как разруливаеться задача, чтобы два последние воркера не решили оба что удалит файл - другой воркер???
...
Рейтинг: 0 / 0
02.07.2014, 12:32:47
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38686340
chabapok
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
chabapok
Участник
Значит, у вас решение - специфическое для задачи. Такое тут бы никто не предложил.

О каких айдишниках может идти речь, если у вас там регэкспы?

И еще непонятно, как вы вытягиваете "все айдишники" из запроса. Если селектом в отдельной транзакции - это неправильно, и в много клиентской схеме обязательно даст глюки - рано или поздно будут подмешаны чужие айдишники. А если через last_insert_id() - то это правильно, но тогда почему "айдишники", а не "айдишник"?
...
Рейтинг: 0 / 0
03.07.2014, 02:00:27
| Ответить | Цитировать | Написать  
Насколько опасен или бесполезен limit n,1
    #38686805
Фотография MasterZiv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
MasterZiv
Участник
LumixА какие есть принципиально дешевые варианты получения i-ой позиции в запросе?
Только индексированная вьюха что-ли??...

Никаких нет.
...
Рейтинг: 0 / 0
03.07.2014, 13:50:16
| Ответить | Цитировать | Написать  
9 сообщений из 9, страница 1 из 1
Форумы / MySQL [игнор отключен] [закрыт для гостей] / Насколько опасен или бесполезен limit n,1
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=47&msg=38685304&tid=1834566]:
 0ms
get settings:
 9ms
get forum list:
 18ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 140ms
get topic data:
 12ms
get forum data:
 3ms
get page messages:
 64ms
get tp. blocked users:
 2ms
others: 237ms
total:  493ms
созд. / загр.: 493ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]