Справочник от Автор24
Найди эксперта для помощи в учебе
Найти эксперта
+2

Лемматизация

Предмет Языкознание и филология
Разместил 🤓 irinaakjtfro
👍 Проверено Автор24

приведение слова к начальной форме (лемме); обычно является частью процедуры автоматического морфологического анализа.

Научные статьи на тему «Лемматизация»

Методы распознавания текстовых категорий в русском языке на основе машинного обучения и статистических моделей

Лемматизация, то есть приведение всех словоформ к их базовым формам....
несут конкретного смысла, таких как предлоги, союзы, междометия), приведение текста к общей структуре (лемматизация

Статья от экспертов

Стемминг и лемматизация в lucene. Net

В данной статье рассмотрены механизмы стемминга и лемматизации. Под стеммингом понимают приближенный эвристический процесс, в ходе которого от слов отбрасываются окончания в расчете на то, что в большинстве случаев это себя оправдает. Стемминг основан на правилах морфологии языка и не требует хранения словаря всех слов. Под лемматизацией понимается преобразование слова в словарный вид или лемму. Данный метод используется в алгоритмах поисковиков при индексировании интернет-страниц. Процесс дает возможность хранения данных страницы набором слов в индексе для удобной схематизации файлов. Это позволяет ускорить индексацию и сформировать более четкий ответ на поисковый запрос, так как сокращенную форму слова поисковик анализирует быстрее. Выделена цель стемминга и лемматизации. Показано применение стемминга и лемматизации в библиотеке полнотекстового поиска Lucene.Net. Lucene.Net это перенесенный с платформы Java поисковый движок Lucene. Lucene это высокопроизводительная, масштабируемая...

Научный журнал

Методы обработки текстов и анализа данных в Natural Language Processing

Лемматизация представляет собой сведение слова к его начальной грамматической форме (лемме)....
Лемматизация помогает сократить вариации словоформ и упрощает автоматическое исследование текста.

Статья от экспертов

Построение частотных словарей на основе исходных текстов с применением лемматизации

Рассматривается вопрос снижения трудоемкости изучения информационно-терминологического базиса за счет уменьшения объема частотного словаря, на основе которого строится базис. Рассматривается вопрос построения частотных словарей на основе исходных текстов с применением лемматизации для последующего формирования информационно-терминологического базиса. Приводится алгоритм построения частотного словаря на основе исходных текстов с применением лемматизации, а также модификация данного алгоритма с использованием проверки терминов формируемого частотного словаря по специализированному словарю.

Научный журнал

Еще термины по предмету «Языкознание и филология»

Афоризм

(от греч. аphorismos – краткое изречение, определение, разграничение) – разновидность универсальных высказываний, содержащая стремящуюся к истине и полученную обобщением глубокую, законченную мысль о каком-либо явлении действительности.

🌟 Рекомендуем тебе

Корреля́т

член пары или ряда взаимно обусловленных, соотносительных языковых единиц.

🌟 Рекомендуем тебе
Смотреть больше терминов

Повышай знания с онлайн-тренажером от Автор24!

  1. Напиши термин
  2. Выбери определение из предложенных или загрузи свое
  3. Тренажер от Автор24 поможет тебе выучить термины с помощью удобных и приятных карточек
Все самое важное и интересное в Telegram

Все сервисы Справочника в твоем телефоне! Просто напиши Боту, что ты ищешь и он быстро найдет нужную статью, лекцию или пособие для тебя!

Перейти в Telegram Bot