Гость
Форумы / Разработка информационных систем [игнор отключен] [закрыт для гостей] / ANN для классификации большого справочника товаров / 2 сообщений из 2, страница 1 из 1
29.08.2016, 14:42
    #39299619
sobolev
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ANN для классификации большого справочника товаров
Как обещал здесь

Начали экспериментировать.
Цель - раскидать плохо классифицированные товары по группам и брендам.
Справочник - более 2500000 наименований (штрихкодов чуть больше, ибо некоторые позиции имеют более одного кода).
Откровенно не классифицированных по группам ~900000, остальные позиции с некоторой вероятностью находятся не в тех группах, что надо.
Всего групп ~2500 (многие лишние).

Нейронная сеть:
-- трехслойная
-- на вход подаются слова из наименования (распарсенные и сваленные в словарь), часть лидирующих символов штрихкодов (только если валидные ean13, ean8, upc-a, upc-e) и, если есть, бренд.
-- на выходе по одной соске на группу
-- хидден-слой имеет размерность кратно больше, чем выход.

Главные проблемы:
-- даже такая дохлая сетка имеет очень большую размерность по синапсам - пришлось резать как можно
-- невероятный тормоз при обучении (собственно, на процессе обучения пока и застряли) - едва 40000 наименований в час.

Если не считать приведенных выше проблем, предварительные результаты внушают некоторый оптимизм - работает и как правило дает адекватную классификацию (анализировали предварительный выход перед подачей обучающего значения в процессе обучения).
...
Рейтинг: 0 / 0
01.09.2016, 08:51
    #39301641
Sergey_rb
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ANN для классификации большого справочника товаров
У меня в справочнике номенклатуры сейчас 5 млн. записей и около 6 млн баркодов.
Обычная двухзвенка на Оракле.

Проблем не наблюдаю.
...
Рейтинг: 0 / 0
Форумы / Разработка информационных систем [игнор отключен] [закрыт для гостей] / ANN для классификации большого справочника товаров / 2 сообщений из 2, страница 1 из 1
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]