- •Практикум по теории вероятностей и математической статистике
- •Содержание
- •1. Теория вероятностей и математическая статистика
- •1. Краткие сведения из комбинаторики
- •2. Классическое определение вероятности события
- •3. Геометрические вероятности события
- •4. Основные теоремы теории вероятностей
- •5. Формула полной вероятности
- •6. Формулы Бейеса
- •7. Повторение испытаний
- •Основные формулы
- •8. Случайные величины: дискретные и непрерывные
- •Основные формулы для вычисления числовых характеристик
- •I. Примеры некоторых распределений дискретных случайных величин
- •II. Примеры некоторых распределений непрерывных случайных величин
- •9. Элементы математической статистики. Методы статистического описания результатов наблюдений
- •9.1. Основные задачи математической статистики
- •9.2. Выборка, способы её представления.
- •9.3. Функция распределения.
- •9.4. Гистограмма и полигон.
- •9.6. Числовые характеристики выборочного распределения.
- •9.7. Выборочные коэффициенты асимметрии, эксцесса. Квантиль.
- •9.8. Двумерный случайный вектор, его статистическое описание
- •9.9. Корреляционная таблица
- •10 .Статистическое оценивание характеристик распределения генеральной совокупности по выборке
- •10.1. Точечные оценки и их свойства. Метод подстановки.
- •10.2. Метод максимального правдоподобия
- •10.3. Метод моментов
- •10.4. Распределения χ2, Стьюдента и Фишера.
- •11. Интервальные оценки
- •11.1. Доверительные интервалы и доверительная вероятность.
- •11.2. Доверительные интервалы для вероятности успеха в схеме Бернулли
- •11.3. Доверительные интервалы для коэффициента корреляции ρ.
- •11.4. Примеры доверительных интервалов.
- •12. Проверка статистических гипотез
- •12.1. Основные понятия. Проверка гипотез о параметрах
- •12.2. Ошибки первого и второго рода
- •12.3. Критерии значимости для проверки гипотез
- •12.4. Проверка гипотез о параметре р биномиального распределения
- •12.6. Определение наилучшей критической области для проверки простых гипотез.
- •12.7. Критерий χ2 и его применение
- •12.8. Методика вычисления теоретических частот нормального распределения
- •12.9. Модель применения критериев
- •13. Рекомендации представления результатов статистической обработки для различных критериев и методов анализа «Метода проверки гипотез или статистических критериев»
- •14. Элементы теории корреляции
- •15. Дополнительные задачи по математической статистике
- •II. Задания для типовых расчетов
- •2.1. Элементы теории вероятностей
- •2.2. Элементы математической статистики и теории корреляции
- •Варианты: 2.1. -2.5.
- •Варианты: 2.6. -2.10.
- •Варианты: 2.11. -2.15.
- •Варианты: 2.16. -2.20.
- •Варианты: 2.21. -2.25.
- •Варианты: 2.26. -2.30.
12.6. Определение наилучшей критической области для проверки простых гипотез.
Следует заметить, что на множестве значений статистики критерия можно выбрать сколько угодно критических областей VK для заданного уровня значимости α, однако соответствующие им критерии будут иметь различные вероятности ошибок второго рода.
Наилучшей критической областью (НКО) называют критическую область, которая при заданном уровне значимости α обеспечивает минимальную вероятность ошибки второго рода. Критерий, использующий НКО, имеет максимальную мощность.
При
проверке простой гипотезы Н0
против простой альтернативы Н1
НКО определяется леммой
Неймана -
Пирсона: НКО
критерия заданного уровня значимости
α состоит из точек, выборочного
пространства (выборок объема п), для
которых удовлетворяется неравенство
,
где сα
- константа,
зависящая от заданного уровня значимости,
-элементы
выборки, а
-функция правдоподобия, вычисленная
при условии, что верна гипотеза Нi
,i
= 0,1.
Для рассмотренных выше критериев значимости, НКО размещаются на «хвостах» распределений статистик критериев.
Пример 57. Пусть случайная величинах имеет нормальное распределение N(m, σ) с известной дисперсией σ2.
а) Найти НКО для проверки гипотезы Н0:т = т0 против простой альтернативной гипотезы Н1:m = m1, где т1 > т0.
б) Найти функцию мощности критерия и вычислить ее значение при значениях т1 =1 и т1 = 5, если т0 = 0, объем выборки п = 25 , дисперсия генеральной совокупности σ2 = 25 . Принять уровень значимости α = 0,05 .
Решение. а) Запишем отношение функций правдоподобия:
,
где
,
.
По лемме Неймана - Пирсона НКО содержит
только те точки выборочного пространства,
для которых удовлетворяется неравенство
:
,
причем
по условию задачи т1
- т0
> 0. Так как
отношение правдоподобия является
убывающей функцией аргумента
,
условие
леммы удовлетворяется при
,
где граница критической области хк
находится
по заданному уровню значимости α
из соотношения
.
При
условии, что справедлива гипотеза Н0,
имеет
нормальное распределение
,
следовательно,
.
Отсюда следует, что:
.
Таким
образом, граница хк
критической области равна
,
а НКО VK
имеет вид
.
б) Найдем функцию мощности полученного критерия:
.
При значениях т1 = 1 , т0 = 0 , α = 0,05 , n = 25 , σ2 = 25 мощность критерия
.
Если т1 = 5, то мощность критерия
.
12.7. Критерий χ2 и его применение
а) Проверка гипотезы о виде распределения генеральной совокупности.
Пусть х1,х2,...,хn - выборка наблюдений случайной величины X. Проверяется гипотеза Н0, утверждающая, что χ2 имеет функцию распределения Fx(x).
Проверка гипотезы Н0 при помощи критерия χ2 осуществляется по следующей схеме: по выборке наблюдений находят оценки неизвестных параметров предполагаемого закона распределения случайной величины X. Далее, область возможных значений случайной величины X разбивается на r множеств Δ1, Δ2,…, Δn, например, r интервалов в случае, когда Х- непрерывная случайная величина, или r групп, состоящих из отдельных значений, для дискретной случайной величины X.
Пусть
nk
- число элементов выборки, принадлежащих
множеству Δk,
k
= 1,2,...,r
. Тогда
.
Используя предполагаемый закон
распределения случайной величины X,
находят вероятности рk
того, что
значение X
принадлежит
множеству Δk,
т.е.
рk
= Р[Х
Δk],
k
= 1,2,...,r
. Очевидно,
что
.
Полученные результаты можно представить
в виде следующей таблицы:
|
Число наблюдений |
Всего |
|||
|
Δ1 |
Δ2 |
… |
Δr |
|
Наблюдаемое |
n1 |
n2 |
… |
nr |
п |
Ожидаемое |
np1 |
np2 |
… |
npr |
п |
Выборочное
значение статистики критерия χ2
вычисляется
по формуле
.
Гипотеза Н0 согласуется с результатами наблюдений на уровне значимости α, если
,
где
квантиль
порядка 1-
α распределения
χ2
с r-l-1
степенями
свободы, а l
- число неизвестных параметров
распределения, оцениваемых по выборке;
если же
,
то гипотеза Н0
отклоняется.
Замечание.
Критерий χ2
использует
тот факт, что случайная величина
,
k
=1,2,...,r,
имеет распределение, близкое к нормальному
N(0,1).
Чтобы это
утверждение было достаточно точным,
необходимо, чтобы для всех интервалов
выполнялось условие прк
≥ 5. Если в
некоторых интервалах это условие не
выполняется, то их следует объединить
с соседними.
Пример 58. В первых - двух столбцах таблицы 9 приведены данные об отказах аппаратуры за 10000 часов работы. Общее число обследованных экземпляров аппаратуры n=757, при этом наблюдался отказ:
0·427+ 1·235+ 2·72 + 3·21+ 4·1+ 5·1 = 451
Таблица 9
Число отказов, k |
Количество случаев, в которых наблюдалось k отказов, пk |
|
Ожидаемое число случаев с k отказами, прk |
0 |
427 |
0,54881 |
416 |
1 |
235 |
0,32929 |
249 |
2 |
72 |
0,09879 |
75 |
3 |
21 |
0,01976 |
15 |
4 |
1 |
0,00296 |
2 |
5 |
1 |
0,00036 |
0 |
≥6 |
0 |
0,00004 |
0 |
Сумма |
757 |
- |
- |
Проверить гипотезу о том, что число отказов имеет распределение Пуассона:
,
k=0,
1, …, при α=0,01.
Решение.
Оценка
параметра λ равна среднему числу
отказов:
.
По таблице приложений (П3) с λ = 0,6 находим
вероятности рk
и ожидаемое
число случаев с k
отказами
(третий и четвертый столбцы таблицы
10).
Для k = 4,5 и 6 значения прk < 5, поэтому объединяем эти строки со строкой для k= 3 . Итак, получаем значения, приведенные в таблице 9.
Таблица 10
k |
пk |
прk |
|
0 |
427 |
416 |
0,291 |
1 |
235 |
249 |
0,787 |
2 |
72 |
75 |
0,120 |
≥3 |
23 |
17 |
2,118 |
- |
- |
- |
|
Так как по выборке оценивался один параметр λ, то l = 1, число степеней свободы равно 4-1-1 = 2. По таблице приложений (П5) находим χ20,99(2) = 9,21, гипотеза о распределении числа отказов по закону Пуассона принимается.
Пример 59. Проверить гипотезу о нормальном распределении выборки из примера 51. Принять α = 0,1.
Решение. Объем выборки п = 55. Для проверки гипотезы о нормальном распределении нужно найти оценки математического ожидания и дисперсии. Имеем
,
.
Воспользуемся результатами группировки выборки примера 50, расширив первый и последний интервалы. Результаты группировки приведены во втором и третьем столбцах таблицы 11.
Таблица 11
Номер интервала k |
Границы интервала Δk |
Наблюдаемая частота nk |
Вероятность попадания в интервал Δk, pk |
Ожидаемая частота, npk |
npk |
nk - npk |
|
|
- ∞ - |
|
|
|
|
|
|
1 |
12 |
2 |
0 0228 |
|
5,274 |
|
|
2 |
12-14 |
4 |
0,0731 |
0,725 |
0,010 |
||
3 |
14-16 |
8 |
0,1686 |
9,273 |
9,273 |
-1,273 |
0,175 |
4 |
16-18 |
12 |
0,2576 |
14,168 |
14,168 |
-2,168 |
0,332 |
5 |
18-20 |
16 |
0,2484 |
13,662 |
13,662 |
-2,338 |
0,400 |
6 |
20-22 |
10 |
0,1519 |
|
12,633 |
|
|
7 |
22- |
3 |
0,0778 |
0,366 |
0,011 |
||
|
+ ∞ |
|
|
|
|
|
|
|
Сумма |
55 |
1,0001 |
55 |
55 |
- |
0,928 |
В четвертом столбце таблицы 11 приведены вероятности рk, вычисляемые по формуле:
,
где ак и bк - соответственно нижняя и верхняя границы интервалов, а значения функции Ф(х) берутся из таблицы приложений (П1). В пятом столбце приводятся ожидаемые частоты прk, а в шестом - значения прk после объединения первых двух и последних двух интервалов.
Так как после объединения осталось r = 5 интервалов, а по выборке определены оценки двух параметров, т.е. l = 2 , то число степеней свободы равно 5-2-1 = 2.
По таблице приложений (П5) находим χ20,90(2) = 4,61. Выборочное значение статистики критерия равно χ2B= 0,928, следовательно, гипотеза о нормальном распределении выборки принимается.
б) Проверка гипотезы о независимости двух случайных величин.
Пусть проведено п экспериментов, результаты которых являются значениями дискретных случайных величин X и Y, которые принимают соответственно значения x1,x2,...,xk и у1,у2,...,уl.
Обозначим пij число экспериментов, в которых X = хi и Y =yj, i= 1,2,...,k; j = 1,2,...,l. Если Х и Y- непрерывные случайные величины, то область значений каждой из них разбивается на конечное число интервалов. В этом случае пij - число экспериментов, в которых случайная величина X попала в i -й интервал, а случайная величина Y-в j-й интервал. Результаты п экспериментов можно представить в виде таблицы сопряженности признаков размера k x l (таблица 12).
Проверяется гипотеза Н0, утверждающая, что случайные величины X и Y независимы. Если гипотеза Н0 верна, то по определению:
.
Пусть
и
-оценки вероятностей рi
и qj.
Если
гипотеза Н0
верна, то ожидаемое число экспериментов
,
в которых случайная величина X
попала в i-й
интервал, а случайная величина Y-
в j-й
интервал, равно
.
Для
проверки гипотезы Н0
по критерию χ2
используют следующую статистику:
.
При условии, что гипотеза Н0 верна, а все ожидаемые частоты ≥4, i = 1,2,...,k; j = 1,2,...,l, указанная статистика имеет распределение χ2 с (k_1)(l-1) степенями свободы.
Гипотеза Н0 о независимости случайных величин X и Y принимается на уровне значимости α, если выборочное значение этой статистики меньше квантили χ21-α((k-1)(l-1)), т.е. если χ2В< χ21-α((k-1)(l-1)).
Если χ2В≥ χ21-α((k-1)(l-1)) гипотеза Н0 отклоняется. Для вычисления выборочного значения статистики критерия удобно использовать формулу
.
Замечания. 1. Если ожидаемые частоты nij для некоторых клеток таблицы 12 не удовлетворяют условию ≥ 4, то соответствующие строки и столбцы должны быть объединены с соседними строками и столбцами.
Таблица 12
Y X |
y1 |
y2 |
… |
yl |
|
x1 |
n11 |
n12 |
… |
n1l |
n1 |
x2 |
n21 |
n22 |
… |
n2l |
n2 |
… |
… |
… |
… |
… |
… |
xk |
nk1 |
nk2 |
… |
nkl |
nk |
|
n1 |
n2 |
… |
nl |
n••=n |
2. Если (k-1)(l-1)≥8 и n≥40, то минимальное допустимое значение ожидаемых частот может быть равным единице.
Случайные величины X и Y можно рассматривать как два признака, по которым классифицируется выборка объема п; независимость X и Y соответствует независимости этих признаков.
Во многих случаях требуется проверить гипотезу об однородности нескольких выборок или, другими словами, гипотезу о том, что эти выборки получены из одной генеральной совокупности. Если проверяется однородность k различных выборок с объемами п1,п2,...,пk и эти выборки могут быть записаны в виде таблицы сопряженности признаков размера k х l (см. табл. 12), то для проверки используется тот же критерий, что и для проверки независимости двух признаков.
Пример 60. Комплектующие изделия одного наименования поступают с трех предприятий А, В и С. Результаты проверки изделий следующие:
Результаты проверки |
Поставщики |
Всего |
||
А |
В |
С |
||
Годные |
29 |
38 |
53 |
120 |
Негодные |
1 |
2 |
7 |
10 |
Всего |
30 |
40 |
60 |
130 |
Можно ли считать, что качество изделий не зависит от поставщика? Принять α = 0,10.
Решение. Проверим гипотезу о независимости двух признаков: качества изделия и места его изготовления. Находим
;
число степеней свободы (2 —1)(3 — 4) = 2. Так как по таблице приложений (П5) χ20,90(2) = 4,605, то это означает, что качество изделий не зависит от поставщика.
Заметим, что утверждение о том, что качество изделий не зависит от поставщика, можно трактовать как проверку гипотезы об однородности трех выборок изделий объемом 30, 40 и 60, полученных соответственно от поставщиков А, В и С.
