|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Иван FXS Эта задачка всплыла у меня в связи с идеей пощупать "корреляционную матрицу" (читай "регрессионную") для... Ёжики кололись но упорно лезли на кактус? ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 11:34 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
vikkiv Полностью реализованную на SQL? Иван FXS В принципе, формулируя вопрос, я интуитивно предполагал, что это невозможно. И хотел получить подтверждение этому. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 11:45 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Иван FXS .. и написал (линейную) регрессию на VBA. оптимизации под расшиенные инструкции архитектуры современных процессоров? ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 12:26 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
vikkiv как-же многоядерность/параллельность, оптимизации под расшиенные инструкции архитектуры современных процессоров? ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 12:30 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Dima T Иван FXS пощупать "корреляционную матрицу" (читай "регрессионную") для американского рынка акций -- если вдруг кому-нибудь эта тема интересна... Сомневаюсь что нынешний рынок акций поддается хоть какому-то тех.анализу. Туда идет огромный поток свеженапечатанных баксов, поэтому его колбасит то от твитов Маска, то от троллинга с реддита и т.д. и т.п. Полностью поддерживаю. Добавлю что в независимости от выбора алгоритмов - нам всегда будет не хватать исходных данных которые оказывают влияние на цену акций. Например таже политическая ситуация с выборами в США или флешмоб в Reddit тоже оказывают сильное влияние (причем первичное) на цену акций. И если мы будем искать корреляции между ценами акций то мы ничего интересного не найдем. Проще сразу брать биржевой индекс. Благо он публикуется регулярно. Тоесть как научно-познавательная задача - это интересно и я поддерживаю. И поддерживаю с программистской солидарности. Но как практический интерес - я думаю что она бесполезна. Вряд-ли на этом можно что-то заработать в долгосрочном смысле. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 12:53 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton исходных данных которые оказывают влияние на цену акций mayton искать корреляции между ценами акций то мы ничего интересного не найдем. Проще сразу брать биржевой индекс Просто представьте совершенно надуманную ситуацию, что некоторая акция Б повторяет на следующий день то движение, которое в предыдущий день сделала некоторая акция А. И что от этой зависимости останется, если мы из них построим биржевой индекс (типа (А+Б)/2 )? ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 13:45 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton ... И если мы будем искать корреляции между ценами акций то мы ничего интересного не найдем. ... Как я понимаю, существует такой род деятельности как "арбитраж" Т.е. если между акциями похожих компаний в "реальном секторе" ( TM ) экономики существует четкая коррелиция ))), и вдруг одна из акций начинает резко двигаться из-за флешмоба ))), то вполне вероятно, что можно заняться арбитражом между данной акцией и связанных с нею. Например неудачный флешмоб на рынке серебра. Очень быстро сошел на нет. Подозреваю, как раз из-за такого арбитража от части игроков. Т.к. пытаться флешмобить одну акцию/товар - это одно, а подвинуть весь мировой рынок серебра и связанных с ним продуктов - совершенно другое. IMHO p.s. как я понимаю на Российском рынке так же есть хорошо коррелируемые пары. Например цена на золото и акции золотодобывающих компаний (Полюс). С нефтянкой наверное все сложнее, т.к. там больше политики. Но у нас вообще вся страна (курса рубля) и цен на нефть тоже неплохо коррелирует. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 13:53 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Есть разница между случайными значениями и значениями случайного процесса: Хабр ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 13:55 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Иван FXS, я даже не буду с вами спорить. Пожалуйста. Стройте и корреляции и Фурье анализ. Яж говорю. Из технического инфантильного любопытсвта я вас поддержу. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 14:05 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Basil A. Sidorov, Ну корреляции они такие ))). Например "ядерные взрывы спасают от землетрясений" https://scinquisitor.livejournal.com/70395.html note: в конце картинка показывающая корреляцию между кол-во людей утонувших в бассейне и кол-вом фильмов в которых снялся Николас Гейдж ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 14:13 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton, да, от споров практической пользы нет. Разве что --"прокачка" (собственного) понятийного аппарата... Типа, вот, сказали вы "проще сразу брать биржевой индекс" -- мне понадобилось не очень много секунд, чтобы понять и сформулировать, что это мимо. Ну, разминка. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 14:14 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Иван FXS mayton, да, от споров практической пользы нет. Разве что --"прокачка" (собственного) понятийного аппарата... Типа, вот, сказали вы "проще сразу брать биржевой индекс" -- мне понадобилось не очень много секунд, чтобы понять и сформулировать, что это мимо. Ну, разминка. Разминка. А как насчет корреляционного анализа индексов? Между странами например. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 18:50 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton А как насчет корреляционного анализа индексов? Между странами например. Только вот услышали ли вы, что я имею в виду корреляцию (регрессию, на самом деле) лаговых приростов -- в смысле гротескного примера: Иван FXS представьте совершенно надуманную ситуацию, что некоторая акция Б повторяет на следующий день то движение, которое в предыдущий день сделала некоторая акция А ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 19:24 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Услышал. Именно поэтому я и упомянул про анализ Фурье. Ну давай уже скорее макет. Не терпится глянуть кто там самый главный. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 19:27 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton, хорошо. Просто следом легло смешное Leonid Kudryavtsev note: в конце картинка показывающая корреляцию между кол-во людей утонувших в бассейне и кол-вом фильмов в которых снялся Николас Гейдж Анализ Фурье я не вижу, при чём тут -- в моей картинке его нет: по каким гармоникам (по гармоникам чего )? Ну и там дело не в том, "кто там самый главный". Как использовать эту регрессионную матрицу ( матрицу регрессионных коэффициентов) -- отдельный (и намного более деликатный) разговор. ... впрочем, чего там, могу и разболтать, язык без костей: строим, конечно, регрессионные прогнозы (прогнозы на основании регрессии) на завтра, и смотрим, насколько будет сладко, если выбирать из них самые сладкие. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 19:37 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Матрица (МРК) может выступить капитаном-очевидностью и сообщить нам корреляции которые мы и так знаем. Одна ценная бумага зависит от цены на золото с лагом. И кроме того МРК может сообщить к нашему сожалению что прочие влияния равны нулю и этих прочих данных в матрице будет много. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 19:43 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
по subj: насколько я помню корреляцию по лагам критерий по Дурбину-Ватсону неплохо ловит. на счёт остального - может не стоит привязываться к конкретной области, а то начнут тут мерятся у кого длиннее не разбираясь в вопросе.. чисто математический контекст, алгоритм, скрипты решения, максимум примеры уже можно из какой-то конкретной области притянуть.. а то всё больше напоминает падение в сторону алкоголиков: о политике, спорте, других вселенных, в общем о всём к чему нет никакого отношения и на что нет никакого влияния/контроля ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 19:44 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton, вы же ведь просто по инерции продолжаете употреблять слово "корреляция"? Потому что регрессия это не корреляция, и даже не совокупность (вектор) корреляций -- ибо Иксы не ортогональны! "Влияния равны нулю" -- типа совсем нулю равны коэффициенты регрессии? Это же невероятный исход. Они могут быть невелики... Кстати, "невеликий" -- это сколько, по-вашему, для коэффициента регрессии (по модулю, конечно) на нормализованных величинах: 0.1, 0.01 или 0.001 (при том, что свободных переменных ~100)? Но, в самом деле, в итоге может и не получиться ... каменный цветок. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 19:52 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Иван FXS (при том, что свободных переменных ~100) ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 20:08 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
А из какого data-provider ты тянешь данные по NASDAQ-100? ... |
|||
:
Нравится:
Не нравится:
|
|||
17.02.2021, 23:52 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
stooq. com/ db/ h/ ... |
|||
:
Нравится:
Не нравится:
|
|||
18.02.2021, 00:04 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton Не терпится глянуть кто там самый главный. ... |
|||
:
Нравится:
Не нравится:
|
|||
18.02.2021, 13:57 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Ну типа тово. Можно пятничный топик поднять. Только переформатировать вопрос. С абстрактной регрессии до вполне себе узкой задачи. Чтоб были понятны inputs/outputs. Если ты не против. ... |
|||
:
Нравится:
Не нравится:
|
|||
18.02.2021, 14:34 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
mayton, я не против, просто не понимаю, что это такое. Но посмотрю, конечно. ... |
|||
:
Нравится:
Не нравится:
|
|||
18.02.2021, 14:44 |
|
Можно ли на SQL реализовать линейную регрессию?
|
|||
---|---|---|---|
#18+
Ну... пятничный топик - это что-то не-продуктовое. Я-бы сказал развлекательно-познавательное. Но без тебя всё равно правильную формулировку не придумаю. У меня есть в этом свой интерес. Хочу Apache Spark попробовать в анализе данных. Вот ищу подходящую постановку "на подумать". ... |
|||
:
Нравится:
Не нравится:
|
|||
18.02.2021, 14:49 |
|
|
start [/forum/topic.php?fid=16&msg=40046131&tid=1339673]: |
0ms |
get settings: |
8ms |
get forum list: |
11ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
185ms |
get topic data: |
11ms |
get forum data: |
3ms |
get page messages: |
63ms |
get tp. blocked users: |
1ms |
others: | 14ms |
total: | 302ms |
0 / 0 |