Новая программа почти всегда отличает новостные заметки от рассказов

Ученые разработали алгоритм, который позволяет компьютеру отличать новостные сообщения от рассказов. Алгоритм, придуманный авторами научной работы, анализирует, сколько раз любое слово из текста встречается вместе с другими словами в рассказах и новостных сообщениях. Полученные данные впоследствии сравнивали.

Оказалось, что для двух данных типов текстов этот показатель заметно отличается. Исследователи проверили созданную ими методику при помощи 400 новостных заметок, случайным образом выбранных с новостного сайта, и 400 случайных рассказов из базы электронной библиотеки проекта "Гутенберг". Чтобы исключить влияние исторических особенностей языка, авторы выбирали для анализа произведения писателей XX века.

Для новостных заметок точность угадывания составила 69,1 процента с погрешностью 1,22 процента, а для рассказов - 73,8 процента с погрешностью 5,15 процента.

23.07.2010 15:22

Комментарии к статье

первые последние лучшие

Добавить свой комментарий


Ваше имя:*

Текст комментария:*

Предварительный просмотр:

Код подтверждения:

Включите картинки в браузере

Самые читаемые

25.06.2015 12:26|

Президент Грузии: Россия вмешивается в дела соседних стран.

Георгий Маргвелашвили РФ заявил, что Кремль использует в своих целях любые проблемы соседних стран. 

Украина| Комментарии (5016)

10.06.2010 15:05|

Пенсионный возраст в Украине будет повышаться

Постепенно, пенсионный возраст в Украине будет повышаться, сообщили в пресс-службе Министерства труда и социальной политики. 

Украина| Комментарии (1376)

7.06.2010 9:12|

ЕС не будет спешить с отменой визового режима с Украиной

Как пишет издание Экономического известия, реализация оптимистического сценария об отмене визового режима со странами Евросоюза для Украины откладывается. 

Украина| Комментарии (1231)

Cамые комментируемые

25.06.2015 12:26|

Президент Грузии: Россия вмешивается в дела соседних стран.

Георгий Маргвелашвили РФ заявил, что Кремль использует в своих целях любые проблемы соседних стран. 

Украина| Комментарии (5016)

3.06.2015 14:00|

Пригласят ли президента Путина на Саммит G7?

Некоторые политики ФРГ выдвинули предложение отправить Владимиру Путину приглашение на Саммит G7. 

Украина| Комментарии (1935)

20.08.2015 15:03|

Великая река Ганг.

Эта величайшая река очень почитаема индусами, которые проводят на её берегах религиозные ритуалы, искренне считая, что Ганг течет из видимой реальности в потусторонний мир. 

Общество| Комментарии (1901)