1. Разработать собственный токенизатор, в котором для каждого токена будет присваиваться его тип: «слово», «имя собственное», «год», «дата» и пр. Допускается адаптация готовых реализаций. Например, в NLTK или Stanza. 2. Подобрать текст не менее 1800 символов, но не более 3600 символов на русском языке с вкраплениями латинизированных названий. В тексте должно быть не менее пяти различных видов токенов. 3. Оценить работу собственного токенизатора, описать ошибки и возможные решения. сформулировать цель, задачи, используемый инструментарий, описать материал и прикрепить результаты: код, вывод и свои комментарии (оценка работы, достоинства и недостатки, предложения по улучшению и пр. информация). 4. Оформить результаты работы в виде отчета.
Светлана
РАНХиГС при пр. РФ
Работа выполнена быстро, без каких либо замечаний. Большое спасибо, Жанна!
Александр
КемГУ
Отличный исполнитель, спасибо большое, экзамен сдан на 4+, выполняет шикарно задания!
Евгения
МЭСИ (Московский государственный университет экономики, статистики и информатики)
Спасибо огромное! Общительный, обязательный и очень быстрый исполнитель:)
Валентина
Московский институт психоанализа
Лариса, большое спасибо за оперативную работу!)) Надеюсь, теперь преподаватель будет доволен))