|
|
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Доброый день! Стала задача определения настроения текста. На входе имею сам текст и язык этого текста. Подскажите пожалуйста куда смотреть по поводу самообучающихся систем, реализующих данную задачу? Спасибо. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 26.07.2011, 11:42 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Дополнение На выходе желательно получать: позитивно, нейтрально или негативно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 26.07.2011, 11:44 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Хм... Огласите критерии разбивки на группы... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 26.07.2011, 12:00 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
просто размышления вслух... 1. написать анализатор соответствия текста словарю, например, на выходе такой анализатор должен получить % соответствия текста к словарю (оценок может быть гораздо больше, зависит от вашей фантазии и знаний в области статистики) 2. написать генератор словарей, согласно оценке позитивно/нейтрально/негативно - это может быть 2 (позитивный/негативный) или 3 словаря (или даже 4 - по одному для каждого типа и один вне типовой), по желанию ... Словари можно будет генерировать по текстам с соответствующим содержанием, но для этого будет нужен эксперт, который отнесет тот или иной текст к соответствующему словарю (в процессе обучения)... Вероятно, что часть лексем попадет сразу в несколько словарей... по желанию можно оптимизировать словари оставив только (уникальные) не пересекающиеся лексемы (процесс обучения здесь - это самый творческий процесс)... - в качестве лексем (необходим эксперимент) могут быть выбраны не только слова, но и словосочетания (да и вообще любой набор символов специфической длины)... 3. Описать (вероятностную) систему оценки для текста. Например на выходе хочется получить: позитивно, нейтрально или негативно, тогда как анализатор соответствия текста словарю даст нам например 3% соответствия позитивному словарю, 70 % нейтральному, 1% негативному (остальное не соответствует...) - из этого нужно как-то :) сделать вывод о том, что текст например, позитивный... можно фантазировать дальше, так как плотность распределения критериев по тексту будет неравномерной... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 26.07.2011, 12:37 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
dmitriyche, Давно читал детскую книжку, где как раз рассматривалась данная задача. Начинали с ранжирования слов, закончили ранжированием слогов и букв. Потом приводили пример, что таком образом можно оценить слова которые не известные системе. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 26.07.2011, 12:53 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Можно поробовать применить Байесовские фильтры текста по аналогии со спам-фильтрацией. Другое дело что совсем уж самообучающиеся системы построить на таком критерии трудно. Всё равно нужно участие человека. И постановка немного расплывчата. Если текст содержит два обзаца, первый из который ну уж очень позитивный, а второй открыто-негативный (почему-бы нет? - Диалог двух персонажей или просто литературный приём, на резкую смену настроения) то как выносить общую оценку - непонятно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 26.07.2011, 19:24 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
dmitriycheДополнение На выходе желательно получать: позитивно, нейтрально или негативно.Позитивно или негативно для кого? Возьмите практически любую новость с новостного сайта - почти наверняка она окажется для кого-то позитивной, для кого-то - негативной. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 26.07.2011, 19:31 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Это про смысл - кому то хорошо, кому то - нет. А ТС про настроение толкует. Эта задача же относится к классу DataMining. Вот его методы и используйте. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.07.2011, 08:19 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Сентимент-анализ , типа :) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.07.2011, 08:23 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
YarmakINЭто про смысл - кому то хорошо, кому то - нет. А ТС про настроение толкует. Эта задача же относится к классу DataMining. Вот его методы и используйте. Хм... Иногда грустная музыка вызывает улыбку и поднимает настроение, но обычно наводит тоску, депрессию... ИМХО с текстам бывает так же... Настроение - это нечеткая логика, потому я и поинтересовался у ТС каковы критерии... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.07.2011, 08:25 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
dmitriycheДоброый день! Стала задача определения настроения текста. На входе имею сам текст и язык этого текста. Подскажите пожалуйста куда смотреть по поводу самообучающихся систем, реализующих данную задачу? Спасибо. СПлавить текст озучке в гугл переводчике и по интонации озвучки понять какое настроение) http://sport.iisci.ru/negative.php Попытался реализоовать самый простой саморазвивающийся анализатор текста. Правда из за неравномерности начальных данных гдето меньше 75% это хороший текст, более 75% негативный) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 27.07.2011, 15:34 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Нашёл вот такой вариант http://www.uclassify.com/browse/prfekt/Mood ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 01.08.2011, 14:06 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Нет повести печальнее на свете ... ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 01.08.2011, 15:00 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
dmitriycheДополнение На выходе желательно получать: позитивно, нейтрально или негативно. боюсь будет трудно научить, что-бы сарказм и иронию понимал. а то некоторых людей, до сих пор этому не научили. да, да, я про хабр. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 01.08.2011, 15:17 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Может не в тему, но вот более сложный анализ. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 01.08.2011, 18:24 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
Найден ещё один вариант - http://alias-i.com/lingpipe/demos/tutorial/sentiment/read-me.html ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 08.08.2011, 15:45 |
|
||
|
Определение настроения текста.
|
|||
|---|---|---|---|
|
#18+
dmitriycheДополнение На выходе желательно получать: позитивно, нейтрально или негативно.копай в сторону частотности использования букв и слогов. есть буквы и слоги позитивные есть негативные. восприятие в первую очередь от них идёт. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 12.08.2011, 12:27 |
|
||
|
|

start [/forum/topic.php?fid=16&gotonew=1&tid=1342787]: |
0ms |
get settings: |
10ms |
get forum list: |
16ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
190ms |
get topic data: |
11ms |
get first new msg: |
6ms |
get forum data: |
2ms |
get page messages: |
73ms |
get tp. blocked users: |
1ms |
| others: | 240ms |
| total: | 557ms |

| 0 / 0 |
