|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
DB::Exception: Type mismatch for column id. Column has type UInt64, got type UInt16. Правильно ли я понимаю, что перед вставкой каждое значение нужно оборачивать функцией ToUInt64 ? ... |
|||
:
Нравится:
Не нравится:
|
|||
26.10.2016, 18:54 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
мигель1, Боже! Кликхаус это супер система, его чуть допилить и будет бомба )) Пользователи в шоке от скорости )) ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 12:08 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
мигель1мигель1, Боже! Кликхаус это супер система, его чуть допилить и будет бомба )) Пользователи в шоке от скорости )) Ещё б удалять данные научилась :D ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 13:10 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Кто какие тулы использует (планирует) для построения отчётности (регламентная, аналитическая) из кликхауса? З.Ы. сокращение "клик" закрепилось за qlikview, clickhouse остаётся "хаус"? ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 13:19 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
ДедушкаКто какие тулы использует (планирует) для построения отчётности (регламентная, аналитическая) из кликхауса? Можно прикрутить Excel к любой DB , были бы руки и спонсор ) ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 13:32 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Alexey TominЕщё б удалять данные научилась :D BigTable тоже без удаления живет себе (вполне) ) - создавайте новый таблицы, меняйте витрину - view , в конце периода процессьте новую историческую таблицу. старые таблицы дропайте . ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 13:36 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
essbase.ruAlexey TominЕщё б удалять данные научилась :D BigTable тоже без удаления живет себе (вполне) ) - создавайте новый таблицы, меняйте витрину - view , в конце периода процессьте новую историческую таблицу. старые таблицы дропайте . Данных- сотни миллионов строк каждый день. Отчёты строятся по последним месяцу-двум. Каждый день надо залить новые сотни строк, а старые надо вынести. Как это сделать лучше всего? ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 15:50 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Alexey TominКак это сделать лучше всего? грануляция таблиц по изменяемым периодам старые drop новые create ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 16:49 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Alexey TominКак это сделать лучше всего? https://telegram.me/clickhouse_ru ... |
|||
:
Нравится:
Не нравится:
|
|||
16.11.2016, 17:25 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
удаление обещали сделать. а как жить без циклов, процедур и временных таблиц (в рамках сессии)? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.11.2016, 23:57 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
essbase.ruAlexey TominКак это сделать лучше всего? https://telegram.me/clickhouse_ru а для тех у кого нет "телеграма", можно продублировать? ... |
|||
:
Нравится:
Не нравится:
|
|||
25.11.2016, 11:27 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Дедушкаessbase.ruпропущено... https://telegram.me/clickhouse_ru а для тех у кого нет "телеграма", можно продублировать? Не нашли ответа, по сути. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.11.2016, 12:08 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Alexey TominДедушкапропущено... а для тех у кого нет "телеграма", можно продублировать? Не нашли ответа, по сути. sim2 что то писал о truncate таблиц и проблема решается двумя таблицами и VIEw над ними - исторические данные - текущие Текущую таблицу очищайте после того как есть свежие данные . ... |
|||
:
Нравится:
Не нравится:
|
|||
25.11.2016, 12:58 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
er77Alexey Tominпропущено... Не нашли ответа, по сути. sim2 что то писал о truncate таблиц и проблема решается двумя таблицами и VIEw над ними - исторические данные - текущие Текущую таблицу очищайте после того как есть свежие данные . Данные заливаются ежедневно. Историчность- 60 дней. Т.е. надо 60 таблиц и вью над ними? Нафиг. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.11.2016, 19:56 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Alexey Tominer77пропущено... sim2 что то писал о truncate таблиц и проблема решается двумя таблицами и VIEw над ними - исторические данные - текущие Текущую таблицу очищайте после того как есть свежие данные . Данные заливаются ежедневно. Историчность- 60 дней. Т.е. надо 60 таблиц и вью над ними? Нафиг. двумя же, написано же https://en.wikipedia.org/wiki/Slowly_changing_dimension#Type_4:_add_history_table ... |
|||
:
Нравится:
Не нравится:
|
|||
26.11.2016, 01:03 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Alexey TominНафиг. А Вы все таки попробуйте "ТыкДом" . Это тяжелые наркотики . После него все остальное кажется детским садом) И ради 3Gb/s на одном хосте , можно потерпеть небольшие неудобства. ... |
|||
:
Нравится:
Не нравится:
|
|||
26.11.2016, 10:31 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
У меня ETL pentaho и для вертики и для кликхауса ... |
|||
:
Нравится:
Не нравится:
|
|||
14.12.2016, 12:24 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Есть приложение на asp.net Подскажите пожалуйста, как лучше подключиться к clickhouse? ... |
|||
:
Нравится:
Не нравится:
|
|||
16.12.2016, 21:31 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
мигель1, Попробуйте написать в чатик КХ в Телеграме https://telegram.me/clickhouse_ru Все кто более-менее в теме, там активно общаются. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.12.2016, 14:15 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Летом сделают поддержку ODBC драйвера и перепишут синтаксис, чтобы не мучиться с join ... |
|||
:
Нравится:
Не нравится:
|
|||
02.03.2017, 09:27 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
А как в это инфо по монеткам криптовалютным заливать? Что такое колонки? Монетка - это таблица? Или торговая пара? А колонки что такое? А строк нету? Я на жопа скрипт прогу пишу. Или таблица - это биржа???? Бирж 10 штук примерно. Монеток 500. ... |
|||
:
Нравится:
Не нравится:
|
|||
16.08.2017, 19:31 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Я правильно понял, что в базе такие сущности: База Таблица Столбец ? А кроме этого, что еще есть? ... |
|||
:
Нравится:
Не нравится:
|
|||
17.08.2017, 20:53 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Ну вообще на русском есть https://clickhouse.yandex/docs/ru/single/ Там база по умолчанию default. А под каждые данные создается таблица Выполните следующие запросы к ClickHouse: CREATE TABLE rankings_tiny ( pageURL String, pageRank UInt32, avgDuration UInt32 ) ENGINE = Log; CREATE TABLE uservisits_tiny ( sourceIP String, destinationURL String, visitDate Date, adRevenue Float32, UserAgent String, cCode FixedString(3), lCode FixedString(6), searchWord String, duration UInt32 ) ENGINE = MergeTree(visitDate, visitDate, 8192); CREATE TABLE rankings_1node ( pageURL String, pageRank UInt32, avgDuration UInt32 ) ENGINE = Log; Чего то это какая то муть. Мне то что делать? У меня данные вот: trades Метод возвращает информацию о последних сделках указанных пар. GET-параметр limit задаёт глубину для вывода (по умолчанию 150, максимум 2000). Пример запроса: https://yobit.net/api/3/trades/ltc_btc Пример ответа: { "ltc_btc":[ { "type":"ask", "price":104.2, "amount":0.101, "tid":41234426, "timestamp":1418654531 }, { "type":"bid", "price":103.53, "amount":1.51414, "tid":41234422, "timestamp":1418654530 }, ... ] ... } type: ask - продажа, bid - покупка price: цена покупки/продажи amount: количество tid: идентификатор сделки timestamp: unix time сделки depth Метод возвращает информацию о списках активных ордеров указанных пар. GET-параметр limit задаёт глубину для вывода (по умолчанию 150, максимум 2000). Пример запроса: https://yobit.net/api/3/depth/ltc_btc Пример ответа: { "ltc_btc":{ "asks":[ [104.67,0.01], [104.75,11], [104.80,0.523], ... ], "bids":[ [104.3,5.368783], [104.212,2.57357], [103.62,0.43663336], [103.61,0.7255672], ... ] } ... } asks: ордера на продажу bids: ордера на покупку КАК МНЕ ЭТО В БАЗУ ТО ЗАСОВЫВАТЬ ??? Я уже поставил модули кликхаус для ноды JS Вот пример запроса к базе const ClickHouseClient = require('clickhouse_client'); let clickhouseClient = new ClickHouseClient({ host: "localhost", port: 8123, dbname: "default" }); //SELECT * FROM table_name LIMIT 10 clickhouseClient.find(' SELECT 1 ', (err, data) => { if (err) { return console.log(err); } console.log({data}); }); И как я такими запросами как то должен инфо с биржи в базу засовывать??? ... |
|||
:
Нравится:
Не нравится:
|
|||
17.08.2017, 21:40 |
|
ClickHouse from yandex
|
|||
---|---|---|---|
#18+
Блин, ну опытным же людям, сразу видно как лучше организовывать. Ну что не подсказать что ли ????? Пример данных же я показал выше!!! Ну не шарю я что такое все эти таблицы, колонки. Это что то из школы? Я думал в компе 0 1 и файлы на диске. А что такое база вообще ??? Я знаю, что должен использовать для своей задачи базу, ну так принято потому что. Но зачем, почему и КАК, ну НЕ ЗНАЮ я пока !!!! Откуда мне это знать то ???? Вот опытным людям СРАЗУ понятно, что и как. ... |
|||
:
Нравится:
Не нравится:
|
|||
17.08.2017, 22:01 |
|
|
start [/forum/topic.php?fid=48&msg=39369237&tid=1856669]: |
0ms |
get settings: |
8ms |
get forum list: |
13ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
30ms |
get topic data: |
9ms |
get forum data: |
2ms |
get page messages: |
51ms |
get tp. blocked users: |
1ms |
others: | 12ms |
total: | 132ms |
0 / 0 |