5.2.1. Теорема Чебышева для среднего арифметического случайных величин.

Пусть даны попарно независимые СВ , имеющие конечные математические ожидания и конечные дисперсии, ограниченные одной и той же постоянной с, то как бы ни мало было постоянное положительное число ɛ, с вероятностью, сколь угодно близкой к единице можно утверждать, что отклонение средней арифметической этих n величин от средней арифметической их математических ожиданий не превосходит по абсолютной величине заданного числа ɛ, если число n достаточно велико.

Говорят, что среднее арифметическое СВ сходится по вероятности к среднему арифметическому их математических ожиданий:

Доказательство. Применяя к СВ неравенство Чебышева (принимаем без доказательства), получаем

Переходя к пределу при n→∞ и учитывая, что вероятность любого события не превышает 1, получаем

Следствие1. Если все независимы и одинаково распределены: , то для любого ɛ>0

Среднее арифметическое случайных величин сходится по вероятности к их математическому ожиданию а.

Следствие 1 обосновывает «принцип среднего арифметического СВ», который часто используется на практике. Пусть произведено n независимых измерений некоторой величины , истинное значение которой а неизвестно. Согласно следствию 1, в качестве приближённого значения величины а можно взять среднее арифметическое результатов измерений: . Равенство тем точнее, чем больше n.¹⁴

На описанных свойствах средней арифметической и относительной частоты основан широко применяющийся в лингво-статистике выборочный метод (по сравнительно небольшой случайной выборке текстов судят о целой разновидности языка). Сходимость средних арифметических частот, полученных по частичным выборкам, к математическим ожиданиям слов (или словосочетаний) при достаточном числе выборок позволяет рассматривать частотные словари в качестве моделей вероятностного распределения слов и словосочетаний в норме данного подъязыка или стиля.

Применённое ранее неравенство Чебышева справедливо для любых СВ, в частности для СВ Х = m, имеющих биномиальное распределение, где М(Х)=a=np и D(X)=npq. В этом случае оно имеет вид: .

Для СВ - частоте события А в n независимых испытаниях, неравенство Чебышева имеет вид:

(здесь ).

5.2.2. Теорема Бернулли (о которой говорили в лекции №2) является первой (1713 г) и наиболее простой формой закона больших чисел, является частным случаем теоремы Чебышева.

_{Теорема Бернулли теоретически обосновывает возможность приближённого вычисления вероятности события с помощью его относительной частоты.}

Пример. Установлено, что вероятность появления существительного в румынских текстах по радиоэлектронике равна 0,34, а допустимое абсолютное отклонение относительной частоты от вероятности р равно 0,03. Определим тот наименьший объём исследуемого текста, при котором заданные условия выполнялись бы с вероятностью 0,9545.

Здесь воспользуемся неравенством Чебышева для биномиально распределённой случайной величины X-«относительная частота появлений существительного в тексте»:

где p=0,34; =0,03;

=0, 9545. Отсюда n=5473.

Ответ: Необходимый текст для выполнения заданных условий с вероятностью 0,9545 должен содержать не меньше, чем 5473 словоупотреблений.

Использование ЗБЧ связано с обследованием слишком больших текстовых выборок, объёмы которых превосходят реальные возможности лингво-статистического исследования.

ЦПТ Ляпунова

Центральная предельная теорема ЦПТ решает проблему нахождения точности, надёжности оценки, доверительного интервала, используя при этом меньшее число испытаний, чем этого требует ЗБЧ, устанавливает условия, при которых закон распределения суммы большого числа случайных величин неограниченно приближается к нормальному.

Пусть СВ независимы и одинаково распределены, , Тогда функция распределения центрированной и нормированной суммы этих СВ стремится при n→∞ к функции распределения стандартной нормальной СВ.

Это означает, что приближённо распределена по нормальному закону: . Говорят, что при n→∞ СВ асимптотически нормальна.

(СВ называется центрированной и нормированной или стандартной, если М(Х)=0, D(X)=1)

Для того, чтобы теорема Ляпунова выполнялась (утверждение о нормальном распределении для средних имело место) достаточно выполнение условий, смысл которых заключается в том, что

ни одна из СВ, образующих среднюю, не была в ней преобладающей. В противном случае распределение средней определяется законом распределения этих преобладающих СВ.

Пример этого явления в лингвистике – поведение ключевых (или доминантных) слов и словосочетаний текста, т.е. таких слов, которые передают основные понятия, рассматривающиеся в данном сообщении. Преобладающим фактором, влияющим на статистику доминантных единиц текста, является ситуация, отражаемая в содержании текста. Лингвистические, индивидуально стилевые и прочие факторы подавляются ситуацией. Так как появление тех или иных ситуаций не подчиняется нормальному закону, то этому закону не подчиняется и распределение доминантных слов. Напротив, служебные слова, многие грамматические формы, фонемы и буквы, поведение которых определяется суммой большого числа случайных воздействий без преобладания в них семантики текста, распределены по закону, близкому к нормальному. Выделение в тексте слов, распределение которых не является нормальным, лежит в основе эффекта статистического опознания терминологических единиц.

Лекция №6 Элементы математической статистики