Программа по обнаружению идиом и слов-связок в тексте

[sparkster]

Существует ли в природе программа которая может проанализировать текст и выдать слова связки (например vice president, foregn affair и тд)?. То есть слова которые в сочетании друг с другом приобретают особый смысл.

[Maxteams]

Существует ли в природе программа которая может проанализировать текст и выдать слова связки (например vice president, foregn affair и тд)?. То есть слова которые в сочетании друг с другом приобретают особый смысл.

Да, существует. Такая программа называется "Homo sapiens"

[Антон_Б]

Существует ли в природе программа которая может проанализировать текст и выдать слова связки (например vice president, foregn affair и тд)?. То есть слова которые в сочетании друг с другом приобретают особый смысл.

Вы не поверите, но все слова в сочетании друг с другом приобретают особый смысл.

[L.B.]

приобретают особый смысл

... или теряют всякий

[Puddleglum]

Да, существуют. То, что вы имеете в виду, называется collocations (не знаю, как по-русски будет).

Вот код из примера к библиотеке NLTK для Python

Код: Выделить всё

from nltk.book import *
text4.collocations()


Разумеется, одиночный фразеологизм программа опознать не сможет, а сочетания типа vice president (в тексте, посвящённом политике) - легко.

[John Gower]

Любой сервис би- и триграмм Вам в помощь.