ИСПОЛЬЗОВАНИЕ МОДУЛЯ SPACY В ОБРАБОТКЕ ЕСТЕСТВЕННОГО ЯЗЫКА (NLP)

Элов Б. Б.
ПОЛНЫЙ ТЕКСТ:

Аннотация

В данной статье рассматриваются проблемы обработки естественного языка (NLP), являющейся одной из основных областей компьютерной лингвистики, c инструментами модуля spaCy, написанного на языке Python. Текст на естественном языке состоит из отдельных единиц (символов) и может быть разделен на несколько взаимосвязанных частей, принадлежащих разным уровням. Соответственно, существуют способы токенизации текста с помощью инструментов библиотеки spaCy и использования атрибутов lemma, POS, tag, dep, shape, alpha и stop, сгенерированных конвейерным процессом.

Ключевые слова:

Об авторах

Элов Б. Б.

доктор философии по техническим наукам (PhD), доцент, заведующий кафедрой «Компьютерная лингвистика и цифровые технологии» 

Ташкентский государственный университет узбекского языка и литературы имени Алишера Навои

Как цитировать

Элов B. (2022). ИСПОЛЬЗОВАНИЕ МОДУЛЯ SPACY В ОБРАБОТКЕ ЕСТЕСТВЕННОГО ЯЗЫКА (NLP). НАУКА И ИННОВАЦИОННОЕ РАЗВИТИЕ, 5(4), 41–54. извлечено от https://ilm-fan-journal.csti.uz/index.php/journal/article/view/313
Просмотров: 21