List of publications on a keyword: «»
Филологические науки
Publication date: 30.07.2019
Evaluate the material Average score: 0 (Всего: 0)
Anastasiia A. Ardaeva
FSBEI of HE "East Siberia State University of Technology and Management" , Бурятия Респ
«Algoritm preprotsessornoi obrabotki EIa-teksta na Python»
В статье рассматривается препроцессорная обработка естественно-языкового текста, которая является важным этапом подготовки текста к решению различных задач: машинный перевод, автореферирование, понимание смысла текста и многих других. В работе рассмотрены основные этапы подготовки текста: токенизация, фильтрация и нормализация. Полученный результат может использоваться для построения векторной модели текста и в дальнейшем в разных алгоритмах машинного обучения.