iv_an_ruЕсли что не находится из-за несоответствия типов, то пусть хозяин мусора решает --- то ли статически мусор нормализовать раз и навсегда, то ли в запросы втыкать приведения типов.

Как нормализовать номера 003 и 333?

iv_an_ru,

Было бы здорово добавить текст ошибочной записи к сообщению
"You have attempted to upload invalid data. You can only upload RDF, Turtle, N3 serializations of RDF Data to the RDF Data Store.
". А то делением на 2 файла на 8 мегафактов искать очень уж муторно.

iv_an_ru,

Я ее все же убил... Умерла виртуоза на странице
http://localhost:8890/conductor/rdf_import.vspx

В dmesg:

Тестовая машинка (нетбук):


Тестовый файл чуть меньше 300 Мб и чуть маньше 10 мегафактов.

Теперь веб-интерфейс пароля не узнает, а в консоли наоборот - перестал запрашивать пароль dba для команды DB.DBA.RDF_GLOBAL_RESET().

И даже удалось угадать пароль - теперь он "dba". До крэша был другой.

iv_an_ruMBG,

Может вы тогда всё же успешно снесли файлы сервера, просто не остановили его перед этим, и он успешно крутился в памяти до тех пор, пока не полез на диск за чем-то исчезнувшим?

Возможно. Я как-то привык, что aptitude purge пакет сносит вместе с конфигами и, разумеется, останавливает всех демонов. Почему после такого удаления при повторной установке пароль не запросило - загадка, что-то в скриптах деб-пакета не так. Тем паче, самостоятельное появление другого пароля дело неправильное.

iv_an_ruКстати, NumberOfBuffers сколько стоит?
http://www.openlinksw.com/dataspace/dav/wiki/Main/VirtConfigScale

Совершенно ничего не трогаю, мучаю установку по умолчанию. Имхо оно может быть непроизводительно, но обязано быть стабильно.

iv_an_ruMBG,

Obey Arthur Lee сделал самый первый package нормально, потому что один, а потом ему явно стали "помогать". В итоге проще и надёжней из сорцов поставить :)

Это бывает... Только из сырцов не ставим-с, опакечиваем и в свой репозиторий кладем, ибо нефиг ;) Но класть туда виртуозу я пока морально не готов :) Может, вы ее в своем репозитории держите?

iv_an_ruЛично я ничего не инсталлирую :) На данный момент на моей личной машине 14 разных деревьев закрытых версий плюс 11 открытых. Я использую их прямо из деревьев, я не могу себе позволить тратить время ещё и на переустановки.

Да, верю :) А что у вас по умолчанию делается при совпадении идентификаторов - новый факт игнорируется, добавляется повторно, перезаписывается или выдается ошибка? Особенно это интересно в плане распределенной работы.

iv_an_ru,

Логично. Если удастся придумать уникальные идентификаторы каждому факту. А расширения виртуозы делают случаем не для того, чтобы substr и проч. функции получить (оказывается, стандарт sparql пока страдает отсутствием многого необходимого)?

iv_an_ru2. SPARQL 1.1 существенно толще SPARQL 1.0, необходимое будет отсутствовать менее заметно ;) SPARQL 1.0 предустматривает доступность XPATH/XQuery Function Library, там сколько-то функций всё же есть. Другое дело, что их никто не просил, поэтому я добавил в SPARQL их поддержку только на прошлой неделе, и она ещё не доползла до Virtuoso Open Source.

Обойтись можно, но раз добавили, будет существенно более user-friendly. Я вот себе набросал отчетик по поисковым запросам по логу вебсервера, так хотелось бы сразу увидеть не URL с параметрами, а только сам текст запроса (для меня-то и так сойдет, а вот если кому показывать).

Из консоли кстати 10М фактов загрузились нормально, выборки шустрые. Ну да я еще проверю, сколько можно на нетбуке фактов хранить/обрабатывать - такой стресс-тест, а для дела интересует работа в облаке на множестве ядер - открытая версия умеет распараллеливать запрос по всем ядрам?

iv_an_ru,

А я пока для замены скриптов разных рассматриваю, мне много запросов не надо :) Вот как разберусь получше, там видно будет.

Огромное вам спасибо за море информации и подсказок, узнал много нового и теперь могу комфортно решить некоторые задачки по анализу разнородных данных, до которых руки не доходили или выковыривал нужное пачкой скриптов.

iv_an_ruЕсли утрясут ТЗ, то будет версия для мобильников, вот в ней, как ни забавно, будет распараллеливание одиночного запроса по ядрам. У мобилы юзер один, а ядер даже сейчас бывает два, будет и больше :)

На всех смартфонах есть эскулайт, не хотите использовать в качестве хранилища? Потом можно будет и на яваскрипт портировать, в браузерах современных тоже есть эскулайт.