Создание частотного словаря
Реферат, 31 Марта 2015, автор: пользователь скрыл имя
Краткое описание
Законы Зипфа описывают закономерности частотного распределения слов в тексте на любом естественном языке. Их опубликовал в 1949 году американский лингвист Джордж Зипф. Законы эмпирические – они не имеют строго математического доказательства и основаны на статистическом анализе распределения слов в больших массивах текстов на разных языках. Тем не менее, статистически их вероятность не вызывает никаких сомнений.
Содержание
Законы Зипфа 3
Первый закон Зипфа "ранг - частота" 3
Второй закон Зипфа "количество - частота" 4
Частотные словари 7
Программа Tropes 10
Извлечение релевантной информации 10
Качественный анализ и категоризация 10
Хронологический анализ 10
Текстовые сокращения 10
Природный менеджер онтологии языка 10