 С помощью модифицированной математической функции ученые изучили английские произведения 1850-1950-х годов для того, чтобы обнаружить главные отличия в языке текстов разных временных отрезков. Результаты исследования приведены в статье, опубликованной в издании Physical Review X.
С помощью модифицированной математической функции ученые изучили английские произведения 1850-1950-х годов для того, чтобы обнаружить главные отличия в языке текстов разных временных отрезков. Результаты исследования приведены в статье, опубликованной в издании Physical Review X.
В ходе исследования ученые прибегли к данным сервиса Google Ngram, который анализирует книги из базы Google Books. Они применили модифицированную математическую функцию — расстояние Йенсена — Шеннона, которая используется для анализа сходства и различий наборов символов, в качестве которых в том числе могут выступать и слова.
Исследование обнаружило, что больше всего тексты разных лет отличаются редко используемыми словами, а не частотными. Применяемые ранее методы исследования выявить этого не могли. По мнению ученых, результаты их исследования могут быть применены не только к английскому, но и к русскому и испанскому языкам.
|
