6) WordNet с NLTK

Что такое Wordnet?

Wordnet — это программа чтения корпусов NLTK, лексическая база данных для английского языка. С его помощью можно найти значение слов, синонимов или антонимов. Можно определить его как семантически ориентированный словарь английского языка. Он импортируется с помощью следующей команды:

from nltk.corpus import wordnet as guru

Статистика показывает, что в английском WordNet есть 155287 слов и 117659 наборов синонимов .

Различные методы, доступные в WordNet, можно найти, набрав dir (гуру)

[ ‘_LazyCorpusLoader__args’, ‘_LazyCorpusLoader__kwargs’, ‘_LazyCorpusLoader__load’, ‘_LazyCorpusLoader__name’, ‘_LazyCorpusLoader__reader_cls’, ‘__class__’, ‘__delattr__’, ‘__dict__’, ‘__dir__’, ‘__doc__’, ‘__eq__’, ‘__format__’, ‘ __ge__ ‘,’ __getattr__ ‘,’ __getattribute__ ‘,’ __gt__ ‘,’ __hash__ ‘,’ __init__ ‘,’ __le__ ‘,’ __lt__ ‘,’ __module__ ‘,’ __name__ ‘,’ __ne__ ‘,’ __ne__ce ‘,’ __new__ ‘,’ __newrece, ‘__newrece,’ __new__ce ‘, __newrece,’ __new__ce ‘, __new__ce,’ __new__ce ‘, __newrece,’ __new__ ‘,’ __new__ ‘,’ __newrece, ‘__new__’, ‘__new__’, ‘__new__’, ‘__new__’, ‘__new__’, ‘__new__ce, , ‘__reduce_ex__’, ‘__repr__’, ‘__setattr__’, ‘__sizeof__’, ‘__str__’, ‘__subclasshook__’, ‘__unicode__’, ‘__weakref__’, ‘_unload’, ‘subdir’, ‘unicode_pr

Давайте разберемся с некоторыми функциями, доступными в Wordnet:

Синсет : Он также называется набором синонимов или набором слов синонимов. Давайте проверим пример

from nltk.corpus import wordnet
syns = wordnet.synsets("dog")
print(syns)

Вывод:

[Synset('dog.n.01'), Synset('frump.n.01'), Synset('dog.n.03'), Synset('cad.n.01'), Synset('frank.n.02'), Synset('pawl.n.01'), Synset('andiron.n.01'), Synset('chase.v.01')]

Лексические отношения : это семантические отношения, которые взаимны. Если существует связь между {x1, x2, … xn} и {y1, y2, … yn}, то существует также связь между {y1, y2, … yn} и {x1, x2 ,. ..xn}. Например, синоним противоположен антониму или гипернимам, а гипоним — тип лексического понятия.

Давайте напишем программу, использующую python, чтобы найти синоним и антоним слова «active», используя Wordnet.

from nltk.corpus import wordnet
	synonyms = []
	antonyms = []

	for syn in wordnet.synsets("active"):
		for l in syn.lemmas():
			synonyms.append(l.name())
			if l.antonyms():
				 antonyms.append(l.antonyms()[0].name())

	print(set(synonyms))
	print(set(antonyms))

Вывод кода: