Последовательный анализ вальда. Статистические игры и принятие решений в условиях неопределенности. Критерий минимаксного риска

В предыдущих разделах данной главы предполагалось, что объем выборки, на основе которой выносится решение, фиксирован. В § 5.3 уже отмечалось, что значение риска, связанного с принятием решений, уменьшается при увеличении числа наблюдений. Вообще механизм вынесения решений может быть «выбран таким образом, чтобы» кроме основных решений, он позволял определять и необходимый объем выборки. Можно ожидать, что в этом случае удалось бы сократить время от начала наблюдения до принятия решения при том же самом значении было бы построено правило выбора решения, которое следовало бы признать лучше правила, основанного на выборке фиксированного объема. В данном параграфе будут изучены два таких последовательных правила (выбора решения для простого бинарного случая. Одно из них называется байесовским, а другое - последовательным правилом Вальда .

Напомним, что при проверке гипотез по выборке фиксированного объема отношение правдоподобия сравнивается с порогом . При последовательном анализе используются два порога и , которые могут изменяться с изменением числа наблюдений . Если на -м шаге отношение правдоподобия больше порога , то принимается гипотеза . Если оно меньше, чем , то принимается гипотеза . Если же значение отношения правдоподобия лежит между этими порогами, то необходимо произвести очередное наблюдение.

Отношение правдоподобия

где - совместная плотность вероятности выборки при гипотезе , (полученной за первые шагов. Для вычисления порога непоследовательного правила выбора решения необходимо знать априорные вероятности гипотез и . Аналогично для определения порогов последовательного правила на -м шаге необходимо знать априорные вероятности и этих гипотез перед -м шагом. Эти априорные вероятности можно рассматривать как апостериорные, вычисляемые после первых шагов. Их можно определить из соотношений:

Поделив обе части последнего выражения на соответствующие части предыдущего, получим простое выражение для отношения априорных вероятностей на -м шаге

. (5.109)

В качестве начального значения в этом соотношении следует выбрать отношение , которое использовалось бы при построении непоследовательного правила. На каждом шаге отношение априорных вероятностей подстраивается путем умножения на отношение правдоподобия :

. (5.110)

зависящее только от результатов наблюдений на предшествующих шагах. Если элементы выборки независимы, то отношение правдоподобия для «всей выборки можно записать как произведение отношений правдоподобия для наблюдений на разных шагах:

то рекуррентное соотношение (5.109) можно записать в следующей полезной форме:

. (5.113)

Определить среднее значение потерь при наличии решений о продолжении наблюдений (что необходимо при рассмотрении байесовского последовательного правила) довольно трудно. Поэтому обратимся к более простому подходу, предложенному Вальдом . Это правило, называемое обычно последовательным правилом Вальда, является модификацией непоследовательного правила Неймана-Пирсона.

Покажем, что пороги и последовательного правила Вальда связаны простыми соотношениями с вероятностями ложной тревоги и пропуска сигнала. Предположим, что при отношение правдоподобия оказалось равным порогу .

Следовательно, на этом шаге принимается гипотеза и

. (5.114)

Умножая обе части последнего равенства на величину и интегрируя в области принятия гипотезы получим

Это равенство можно записать следующим образом:

Если отношение правдоподобия равно значению порога , то принимается гипотеза . Поскольку при этом

, (5.117)

то нетрудно установить равенство, аналогичное равенству (5.116)

Из равенств (5.116) и (5.118) следует, что для обеспечения заданных значений вероятностей ложной тревоги и пропуска сигнала следует выбрать следующие значения порогов:

(5.119)

Из этих выражений, в частности, следует, что значения порогов последовательного правила Вальда не зависят от номера наблюдения , если вероятности и не зависят от .

При использовании последовательного правила объем выборки, при котором принимается одна из рассмотренных гипотез, оказывается случайным (можно показать, что одна из гипотез всегда принимается в результате конечного числа шагов). Поэтому желательно определить хотя бы среднее значение необходимого числа наблюдений. Предположим, что пересечение порогов невозможно Тогда существуют всего две возможности при завершении проверки: достигается либо порог , либо порог . Поскольку при этом может быть справедливой либо гипотеза , либо гипотеза , то возможны следующие четыре комбинации при окончании проверки на -м шаге:

(5.120)

Среднее значение отношения правдоподобия при окончании наблюдений (при объеме выборки )

(5.121)

Вычислим теперь отношение правдоподобия для , предположив для простоты, что элементы выборки независимы и одинаково распределены. В этом случае справедливо представление (5.111) при . Поэтому можно записать

Правую часть этого равенства можно рассматривать как произведение двух независимых случайных величин. Вычисляя натуральный логарифм от обеих частей этого равенства, получим

Найдем теперь математические ожидания обеих частей полученного равенства:

Здесь предполагается, что математическое ожидание не зависит от номера наблюдения . Равенство (5.124) записано с учетом того, что

Формулу (5.121) можно записать в несколько ином виде:

Учитывая теперь равенство (5.125), для математического ожидания объема выборки получаем

(5.127)

Интересно сравнить последовательное правило с аналогичным правилом, использующим выборку фиксированного объема. Такое сравнение для задачи с нормальными случайными величинами, дисперсии которых известны и одинаковы при рассматриваемых гипотезах, проведено в примере 5.5. Результаты сравнения для случая непрерывного времени будут приведены позже.

Пример 5.5 . Снова рассмотрим простую задачу различения двух гипотез:

где положительный параметр известен, т.е. гипотеза о среднем значении нормальной случайной величины с известной дисперсией проверяется против простой альтернативы. Как уже отмечалось ранее, при отыскании правила различения гипотез можно использовать различные подходы. Найдем теперь последовательное правило выбора решения. Ради простоты будем предполагать, что элементы выборки независимы (иногда в таком случае говорят, что шум измерения белый)

Согласно ф-ле (5.106) отношение правдоподобия

Значения порогов последовательного правила можно вычислить по ф-ле (5.119), если задать и считать постоянными вероятности ложной тревоги и пропуска сигнала, так что

Таким образом, последовательное правило выбора решения можно записать следующим образом если

,

то принимается гипотеза , если

,

то следует провести еще одно наблюдение, если

,

то принимается гипотеза .

Как и при выборке фиксированного объема, функцию от выборки можно рассматривать как достаточную статистику Пороги построенного таким образом последовательного правила изменяются с ростом номера наблюдения, (см рис.5.9). Разница между значениями порогов постоянна и равна

.

Рис.5.9 Пороги как функции числа наблюдений, тангенс угла наклона соответствующих прямых равен

Так как , то

Средний объем выборки, необходимой для принятия одной из рассматриваемых гипотез, можно вычислить по ф-ле (5.127) В результате получаем

Сравним теперь средний объем выборки, требуемый для принятия окончательного решения с помощью последовательного правила, с объемом выборки, который необходим для достижения тех же значений вероятностей ложной тревоги и пропуска сигнала при применении непоследовательного правила В примере 5.2 уже было показано, что для рассмотренного там непоследовательного правила выбора решения можно записать

;

,

где порог при использовании достаточной статистики определяется соотношением , а - порог этого правила. Зададим теперь некоторые значения вероятностей ложной тревоги и пропуска сигнала для этого непоследовательного правила Неймана-Пирсона и найдем требуемый объем выборки. Из трех предыдущих равенств получаем

Отсюда объем выборки, необходимый для обеспечения заданных вероятностей ошибок при использовании правила Неймана-Пирсона,

.

Это выражение получено из двух предыдущих равенств путем исключения переменной . Таким образом, для обоих рассматриваемых правил необходимое число наблюдений растет с увеличением дисперсии и уменьшается с ростом .

Интересно отметить, что объем выборки явно не зависит от порога правила , как это следовало бы ожидать, поскольку порог должен выбираться так, чтобы обеспечить заданные значения вероятностей и . Особенно важным является отношение . Значение этого отношения при заданных вероятностях и зависит от того, какая из гипотез справедлива. На рис 5.10 приведены графики изменения этого отношения при гипотезе .

Рис.5.10 Отношение объема выборки непоследовательного правила к среднему объему выборки последовательного правила при вероятностях ложной тревоги и пропуска сигнала, одинаковых для обоих правил, справедлива гипотеза

Оказывается что при использован и последовательного правила требуется в среднем меньший объем выборки, чем для непоследовательного. И эта экономия среднего числа наблюдений становится существенной при малых значениях вероятностей и .

Пример 5.6. Рассмотрим теперь задачу предыдущего примера, предположив, однако, что число отсчетов значений наблюдаемого процесса на конечном интервале времени может быть неограниченно увеличено. Это позволит построить последовательное правило выбора решения при непрерывном времени. Рассматриваемые гипотезы можно описать следующим образом:

где значение параметра известно, a - стационарный белый нормальный шум, среднее значение которого равно нулю, а ковариационная функция

Начнем с отсчетов непрерывного наблюдаемого процесса в дискретные моменты времени и примем, что

т.е. при любом элементы выборки предполагаются независимыми. Для этого частного случая отношение правдоподобия, рассматривавшееся в предыдущем примере, примет вид

Полученные в этом разделе соотношения можно легко модифицировать с тем, чтобы охватить задачи проверки сложных гипотез с помощью последовательных правил. Последовательность рассуждений при этом полностью совпадает с той, которая подробно описана в § 5.4.

Здесь следует использовать отношение правдоподобия

,
которое при наличии случайного параметра можно записать следующим образом:

. (5.128)

Последовательное правило проверки сложных гипотез после этого строится, как последовательное правило проверки соответствующих простых гипотез.

Вероятности ложной тревоги и пропуска сигнала в этом случае зависят от значения параметра, таr как

, (5.133)

в котором оценки максимального правдоподобия неизвестного параметра отыскиваются путем максимизации соответствующих условных плотностей вероятности но допустимым областям значений при фиксированной выборке .

Можно рассмотреть также задачу проверки нескольких гипотез с помощью последовательного правила. При этом необходимо ввести вероятности нескольких ошибок, которые служат аналогами вероятностей ложного обнаружения и пропуска сигнала. Соотношения, получающиеся при решении этой задачи, полностью аналогичны тем, которые были получены для бинарного случая.

Поскольку объем выборки, используемой для вынесения окончательного решения с помощью последовательного правила, является случайной величиной с математическим ожиданием то может оказаться необходимым ограничить максимально допустимое число наблюдений или время наблюдения. То есть, если после получения наблюдений окончательное решение с помощью последовательного правила не принято, то для выбора одной из рассматривающихся гипотез используется другое правило:

Вальд указал границы для вероятностей ложной тревоги и пропуска сигнала подобных усеченных последовательных правил.

В примерах данного раздела были рассмотрены простые задачи последовательного анализа для нормальных случайных величин. Теперь перейдем к анализу более полезного варианта этой задачи, который будет играть очень важную роль при изложении в гл. 7 результатов, полученных Калманом при решении задач фильтрации.

Рассмотрим последовательную процедуру проверки гипотез. Все предыдущие правила проверки двух гипотез были основаны на фиксированном числе испытаний, то есть сначала проводится измерений, строится отношение правдоподобия и затем оно сравнивается с порогом. С точки зрения минимального значения среднего числа испытаний (для ускорения процесса записи выборки), А. Вальд предложил и обосновал последовательный анализ измеряемых значений, т.е. обработка данных проводится по мере поступления новых измерений.

После каждого испытания
строится отношение правдоподобия
, которое сравнивается с двумя порогамии, то есть проверяется условие

(4.23)

При выполнении условия

и
(4.24)

принимается решение о верности гипотезы
(гипотеза
отклоняется). А при выполнении условия

и
(4.25)

принимается решение о верности гипотезы
(гипотезаотклоняется).

Как видно множество разбивается на три части: подмножествопринятия гипотезы
, подмножествопринятия гипотезыи область неопределённости, где нельзя отдать предпочтение той или иной гипотезе (в этом случае измерения должны быть продолжены). Из правил проверки гипотез (4.24) и (4.25) в данном случае следует, что объём выборки
не фиксирован и зависит от конкретного значения выборки
, то есть объём выборки естьслучайная величина .

В качестве критерия разумно выбрать минимальную среднюю стоимость эксперимента . Если “цена” одного эксперимента не меняется с увеличением
, то этот критерий переходит в критерий минимума среднего числа испытаний, необходимых для принятия решенияили.

А.Вальд доказал, что среди всех правил принятия решений (последовательных и непоследовательных), для которых условные вероятности ошибок не превосходят
ипоследовательное правило принятия решения, состоящее в сравнении отношения правдоподобия
с двумя порогамии, приводит к наименьшему значению среднего числа испытаний при верности
или. При независимости выборок имеем

В случае последовательного критерия отношения правдоподобия процедура проверки строится следующим образом:

Выбираются пороги и, как функции значений
и, и проверяется неравенство (4.23) на каждом шаге испытаний
.

Если
, то в качестве пороговиможно принять величины

,
. (4.26)

Вместо сравнения
с порогамииобычно логарифмируют обе части неравенства (4.23) и при независимых испытаниях проводят проверку по правилу

. (4.27)

На рисунке 4.1 показан пример изменения значений суммы случайного числа случайных величин до принятия решения при увеличении числа испытаний. Нужно иметь в виду, что в процедуре проверки гипотез по Вальду размер выборки - величина случайная. Из теории вероятностей известно, если независимы, распределены одинаково и их дисперсия ограничена, то

.

Откуда получим математическое ожидание числа испытаний

В применении к последовательному анализу получим математическое ожидание числа испытаний при различных состояниях источника:

,
(4.28)

Математические ожидания
и
зависят от проверяемой гипотезы и границ принятия решений. Пренебрегая перескоком границ
и
значениями сумм в момент принятия решения об остановке процедуры проверки гипотез (4.27), запишем соответствующие математические ожидания сумм

, (4.29)

. (4.30)

Математические ожидания логарифма отношения правдоподобия

при состоянии источников
и
определяются как

,
,

где
- плотность распределения вероятности выборкиy при состоянии источника
, – область, на которой определена плотность распределения вероятности
.

В случае дискретного распределения выборочных значений имеем

,
,

где m – количество значений y , которое может принимать случайная величина при однократном измерении,
.

Преимуществом последовательного анализа перед всеми остальными процедурами проверки гипотез заключается в том, что последовательный анализ Вальда даёт приблизительно 48% выигрыша в числе испытаний при проведении серии процедур проверки гипотез.

Во всех правилах принятия решения, кроме минимаксного правила, используется отношение правдоподобия и решение принимается при нарушении неравенств
, гдеС – порог, зависящий от выбранного критерия. Но само отношение правдоподобия – случайная величина, имеющая плотность распределения вероятности
, зависящей от состояния источника. Запишем вероятности ошибок и вероятности правильного принятия решений, используя плотность распределения вероятности отношения правдоподобия

, (4.33)

, (4.35)

Приведённые равенства показывают, что вероятности ошибок
и, а также вероятности правильных решений
и
, можно вычислять как по многомерным областями, так и по одномерной области, определяемой плотностями вероятностей
и
, что облегчает вычисления. Сведём в одну таблицу рассмотренные критерии.

Таблица правил принятия решений

Для каждого из описанных ниже критериев будем предполагать, что необходимо выбрать одно из действий при выборе "природой" одного из состояний , в результате чего достигается выигрыш

Критерий Вальда или максиминный критерий . В соответствии с этим критерием каждое действие оценивается по наихудшему для него состоянию, и оптимальным является действие, приводящее к наилучшему из наихудших состояний, то есть действие , для которого достигается

,

Можно установить, что согласно максиминному критерию складывающаяся ситуация рассматривается как матричная игра и максиминная стратегия представляет собой наилучший выбор против минимаксной стратегии "природы", то есть против наименее благоприятного априорного распределения вероятностей состояний "природы". С этой точки зрения максиминный критерий является чрезвычайно консервативным, так как "природа" не представляет собой сколько-нибудь разумного игрока. Однако применение этого критерия может быть целесообразным, если по условиям обстановки подобный консерватизм имеет смысл.

Критерий минимаксного риска

Минимаксный критерий (критерий потерь или минимаксного риска ). В соответствии с этим критерием оптимальным считается действие, для которого величина потерь (риска) принимает наименьшее значение при самой неблагоприятной обстановке, то есть действие , для которого достигается

,

где определяется как величина, которую нужно прибавить к , чтобы получить максимальный выигрыш, состоящий в -м столбце.

Для определения оптимального действия согласно минимаксному критерию на основании первоначальной матрицы выигрышей составляется вторая матрица , показывающая потери от ошибок ( матрица потерь). Покажем составление матрицы потерь на конкретном примере.

Пусть матрица выигрышей задана таблицей на рисунке 12.a . Из рисунка 12.a видно, что если применяется действие , а состояние "природы" , то по отношению к действию достигается наибольший выигрыш, равный 98 единицам, и, следовательно, игрок не несет никаких потерь. Поэтому показатель потерь на пересечении строки и столбца равен нулю. Этот показатель и записывается как элемент матрицы потерь. (См. рисунок 12.b) Если же игрок применяет действие против стратегии , то он получает только две единицы, тогда как максимально возможный выигрыш равен 98. Следовательно, показатель потерь в этом случае будет равен ; он записывается в таблицу на рисунке 12.b на пересечении строки и столбца Остальные элементы матрицы потерь находятся аналогичным образом.

Критерий Гурвица

Критерий пессимизма-оптимизма . В соответствии с этим критерием оптимальным считается действие , для которого достигается

где

Из приведенного условия видно, что критерий Гурвица является взвешенной средней из наименьших и наибольших выигрышей для принятого коэффициента В частности, при критерий Гурвица соответствует критерию Вальда. Заметим, что минимальный критерий учитывает только наибольший выигрыш, получаемый в результате применения любой стратегии, и безразличен к любым другим вариантам.

Критерий Лапласа

В соответствии с этим критерием оптимальным считается действие, которому соответствует

Следовательно, критерий Байеса (Лапласа) исходит из того, что раз совершенно неизвестно, какое из состояний имеет место , то нужно поступить так, как будто они равновероятны.

Последовательный анализ

Для построения математических (описательных и нормативных) моделей , как правило, бывает необходимо предварительно определить характеристики тех или иных случайных величин или вероятностей элементарных событий . Обычным путем определения подобных величин является обработка результатов наблюдений и измерений. Обработка таких результатов осуществляется методами математической статистики.

Особое значение для применения методов математической статистики имеет вопрос о числе наблюдений, полученных для оценки того или иного параметра. Классические методы статистики исходят из наличия, в крайнем случае, достаточного числа наблюдений. Однако в силу целого ряда причин не всегда возможно набрать необходимое число наблюдений. Достаточно указать, что увеличение числа наблюдений, как правило, ведет к увеличению затрат материальных средств и времени на проведение соответствующих испытаний. В подобных случаях число наблюдений целесообразно заранее не определять, а решение об окончании эксперимента принимать последовательно на каждом его этапе в зависимости от результатов предыдущих наблюдений, - иными словами, каждый последующий

Критерии основаны на анализе матрицы возможных состояний окружающей среды и альтернатив решений.

Матрица, приведенная в таблице 1, содержит: Аj - альтернативы, т.е. варианты действий, один из которых необходимо выбрать; Si - возможные варианты состояний окружающей среды; aij - элемент матрицы, обозначающий значение стоимости капитала, принимаемое альтернативой j при состоянии окружающей среды i.

Таблица 1 - Матрица решений

Для выбора оптимальной стратегии в ситуации неопределённости используются различные правила и критерии, приведенные ниже.

Правило максимин (критерий Ваальда). В соответствии с этим правилом из альтернатив aj выбирают ту, которая при самом неблагоприятном состоянии внешней среды, имеет наибольшее значение показателя. С этой целью в каждой строчке матрицы фиксируют альтернативы с минимальным значением показателя и из отмеченных минимальных выбирают максимальное. Альтернативе а* с максимальным значением из всех минимальных даётся приоритет.

Принимающий решение в этом случае минимально готов к риску, предполагая максимум негативного развития состояния внешней среды и учитывая наименее благоприятное развитие для каждой альтернативы.

По критерию Ваальда лица, принимающие решения, выбирают стратегию, гарантирующую максимальное значение наихудшего выигрыша (критерия максимина).

Правило максимакс. В соответствии с этим правилом выбирается альтернатива с наивысшим достижимым значением оцениваемого показателя. При этом лицо, принимающее решение (ЛПР) не учитывает риска от неблагоприятного изменения окружающей среды. Альтернатива находится по формуле:

(а* = {аjmaxj maxi Пij}) (1)

Используя это правило, определяют максимальное значение для каждой строки и выбирают наибольшее из них.

Большой недостаток правил максимакса и максимина - использование только одного варианта развития ситуации для каждой альтернативы при принятии решения.

Правило минимакс (критерий Севиджа). В отличие от максимина, минимакс ориентирован на минимизацию не столько потерь, сколько сожалений по поводу упущенной прибыли. Правило допускает разумный риск ради получения дополнительной прибыли. Критерий Севиджа рассчитывается по формуле:

(min max П = mini ) (2),

где mini, maxj - поиск максимума перебором соответствующих столбцов и строк.

Расчёт минимакса состоит их четырёх этапов:

• 1. Находится лучший результат каждой графы в отдельности, то есть максимум Xij (реакции рынка).
• 2. Определяется отклонение от лучшего результата каждой отдельной графы, то есть maxi Xij - Xij. Полученные результаты образуют матрицу отклонений (сожалений), так как её элементы - это недополученная прибыль от неудачно принятых решений, допущенных из-за ошибочной оценки возможности реакции рынка.
• 3. Для каждой сточки сожалений находим максимальное значение.
• 4. Выбираем решение, при котором максимальное сожаление будет меньше других.
• 20. Критерии Лапласа и Гурвица при принятии решения в условиях неопределенности

Правило Гурвица. В соответствии с этим правилом правила максимакс и максимин сочетаются связыванием максимума минимальных значений альтернатив. Это правило называют ещё правилом оптимизма - пессимизма. Оптимальную альтернативу можно рассчитать по формуле:

(а* = maxi [(1-?) minj Пji+ ? maxj Пji]) (3),

где? - коэффициент оптимизма, ? =1…0 при? =1 альтернатива выбирается по правилу максимакс, при? =0 - по правилу максимин. Учитывая боязнь риска, целесообразно задавать? =0,3. Наибольшее значение целевой величины и определяет необходимую альтернативу.

Правило Гурвица применяют, учитывая более существенную информацию, чем при использовании правил максимин и максимакс.

Таким образом, при принятии управленческого решения в общем случае необходимо:

• · спрогнозировать будущие условия, например, уровни спроса;
• · разработать список возможных альтернатив
• · оценить окупаемость всех альтернатив;
• · определить вероятность каждого условия;
• · оценить альтернативы по выбранному критерию решения.

Критерий Байеса-Лапласа в отличие от критерия Вальда, учитывает каждое из возможных следствий всех вариантов решений:

Соответствующее правило выбора можно интерпретировать следующим образом: матрица решений дополняется еще одним столбцом, содержащим математическое ожидание значений каждой из строк. Выбирается тот вариант, в строках которого стоит наибольшее значение Wir этого столбца.

Критерий Байеса-Лапласа предъявляет к ситуации, в которой принимается решение, следующие требования:

вероятность появления состояния Vj известна и не зависит от времени;

принятое решение теоретически допускает бесконечно большое

количество реализаций;

допускается некоторый риск при малых числах реализаций.

Краткая теория

Любую хозяйственную деятельность человека можно рассматривать как игру с природой. В широком смысле под природой будем понимать совокупность неопределенных факторов, влияющих на эффективность принимаемых решений.

Управление любым объектом осуществляется путем принятия последовательности управленческих решений. Для принятия решения необходима информация (совокупность сведений о состоянии объекта управления и условиях его работы). В тех случаях когда отсутствует достаточно полная информация, возникает неопределенность в принятии решения. Причины этого могут быть различны: требующаяся для полного обоснования решения информация принципиально не может быть получена (неустранимая неопределенность); информация не может быть получена своевременно, к моменту принятия решения; затраты, связанные с получением информации, слишком высоки. По мере совершенствования средств сбора, передачи и обработки информации неопределенность управленческих решении будет уменьшаться. К этому нужно стремиться. Существование неустранимой неопределенности связано со случайным характером многих явлений. Например, в торговле, случайный характер изменения спроса делает невозможным его точное прогнозирование, a, следовательно, и формирование идеально точного заказа на поставку товара. Принятие решения в этом случае связано с риском. Приемка партии товара на основании выборочного контроля также связана с риском принятия решения в условиях неопределенности. Неопределенность может быть снята путем полного контроля всей партии, однако это может оказаться слишком дорогостоящим мероприятием. В сельском хозяйстве, например, с целью получения урожая человек предпринимает ряд действии (пашет землю, вносит удобрения, борется с сорняками и т. п.). Окончательный результат (урожай) зависит от действий не только человека, но и природы (дождь, засуха, вечер и т. п.). Из приведенных примеров видно, что полностью исключить неопределенность в управлении экономической системой нельзя, хотя, повторим, к этому нужно стремиться. В каждом конкретном случае следует принимать во внимание степень риска при принятии управленческих решений, по возможности максимально учитывать имеющуюся информацию с целью уменьшения неблагоприятных последствий, которые могут возникнуть из-за ошибочных решений.

Две стороны, участвующие в игре, будем называть игрок I и игрок II. Каждый из игроков располагает конечным набором действий (чистых стратегий), которые он может применять в процессе игры. Игра имеет повторяющийся, циклический характер. о каждом цикле игроки выбирают одну из своих стратегии, что однозначно определяет платеж . Интересы игроков противоположны. Игрок I старается вести игру так, чтобы платежи были как можно большими. Для игрока II желательны как можно меньшие значения платежей (с учетом знака). Причем в каждом цикле выигрыш одного из игроков в точности совпадает с проигрышем другого. Игры такого типа называются играми с нулевой суммой.

Решить игру - значит определить оптимальное поведение игроков. Решение игр является предметом теории игр. Оптимальное поведение игрока инвариантно относительно изменения всех элементов платежной матрицы на некоторую величину.

В общем случае определение оптимального поведения игроков связано с решением двойственной пары задач линейного программирования. В отдельных случаях могут быть использованы более простые методы. Часто платежную матрицу удается упростить путем удаления из нее строк и столбцов, соответствующих доминируемым стратегиям игроков, доминируемой называется стратегия, все платежи которой не лучше соответствующих платежей некоторой другой стратегии и хотя бы один из платежей хуже соответствующего платежа этой другой стратегии, называемой доминирующей.

В обычной стратегической игре принимают участие «разумные и антагонистические» противники (противоборствующие стороны). В таких играх каждая из сторон предпринимает именно те действия, которые наиболее выгодны ей и менее выгодны противнику. Однако очень часто неопределенность, сопровождающая некоторую операцию, не связана с сознательным противодействием противника, а зависит от некой, не известной игроку I объективной действительности (природы). Такого рода ситуации принято называть играми с природой. Игрок II - природа - в теории статистических игр не является разумным игроком, так как рассматривается как некая незаинтересованная инстанция, которая не выбирает для себя оптимальных стратегий. Возможные состояния природы (ее стратегии) реализуются случайным образом. В исследовании операций оперирующую сторону (игрока I) часто называют статистиком, а сами операции - играми статистика с природой или статистическими играми.

Рассмотрим игровую постановку задачи принятия решения в условиях неопределенности. Пусть оперирующей стороне необходимо выполнить операцию в недостаточно известной обстановке относительно состояний которой можно сделать предположений. Эти предположения будем рассматривать как стратегии природы. Оперирующая сторона в своем распоряжении имеет возможных стратегий - . Выигрыши игрока I при каждой паре стратегий и - предполагаются известными и заданы платежной матрицей .

Задача заключается в определении такой стратегии (чистой или смешанной), которая лри ее применении обеспечила бы оперирующей стороне наибольший выигрыш.

Выше уже говорилось, что хозяйственная деятельность человека может рассматриваться как игра с природой. Основной особенностью природы как игрока является ее не заинтересованность в выигрыше.

Анализ матрицы выигрышей игры с природой начинается с выявления и отбрасывания дублирующих и заведомо невыгодных стратегий лица, играющего с природой. Что касается стратегий природы, то ни одну из них отбросить нельзя, так как каждое из состояний природы может наступить случайным образом, независимо от действий игрока I. Ввиду того что природа не противодействует игроку I, может показаться, что игра с природой проще стратегической игры. На самом деле это не так. Противоположность интересов игроков в стратегической игре в некотором смысле как бы снимает неопределенность, чего нельзя сказать о статистической игре. Оперирующей стороне в игре с природой легче в том отношении, что она скорее.всего выиграет больше, чем в игре против сознательного противника. Однако ей труднее принять обоснованное решение, так как в игре с природой неопределенность ситуации сказывается в гораздо более сильной степени.

После упрощения платежной матрицы игры с природой целесообразно не только оценить выигрыш при той или иной игровой ситуации, но и определить разность между максимально возможным выигрышем при данном состоянии природы и выигрышем, который будет получен при применении стратегии в тех же условиях. Эта разность в теории игр называется риском.

Природа меняет состояние стихийно, совершенно не заботясь о результате игры. В антагонистической игре мы предполагали, что игроки пользуются оптимальными (в определенном выше смысле) смешанными стратегиями. Можно предположить, что природа применяет наверняка не оптимальную стратегию. Тогда какую? Если бы существовал ответ на этот вопрос, то принятие решения лицом, принимающим решения (ЛПР) сводилось бы к детерминированной задаче.

Если вероятности состояний природы известны, то пользуются критерием Байеса, в соответствии с которым оптимальной считается чистая стратегия , при которой максимизируется средний выигрыш:

Критерий Байеса предполагает, что нам хотя и неизвестны условиях выполнения операций (состояния природы) , но известны их вероятности .

С помощью такого приема задача о выборе решения в условиях неопределенности превращается в задачу о выборе решения в условиях определенности, только принятое решение является оптимальным не в каждом отдельном случае, а в среднем.

Если игроку представляются в равной мере правдоподобными все состояния природы, то иногда полагают и, учитывая, «принцип недостаточного основания» Лапласа, оптимальной считают чистую стратегию , обеспечивающую:

Если же смешанная стратегия природы неизвестна, то в зависимости от гипотезы о поведении природы можно предложить ряд подходов для обоснования выбора решения ЛПР. Свою оценку характера поведения природы будем характеризовать числом , которое можно связывать со степенью активного «противодействия» природы как игрока Значение соответствует наиболее пессимистичному отношению ЛПР в смысле «содействия» природы в достижении им наилучших хозяйственных результатов. Значение соответствует наибольшему оптимизму ЛПР. Как известно, в хозяйственной деятельности указанные крайности опасны. Скорее всего, целесообразно исходить из некоторого промежуточного значения . В этом случае используется критерий Гурвица, согласно которому наилучшим решением ЛПР является чистая стратегия , соответствующая условию:

Критерий Гурвица (критерий «оптимизма-пессимизма») позволяет руководствоваться при выборе рискового решения в условиях неопределенности некоторым средним результатом эффективности, находящимся в поле между значениями по критериям «максимакса» и «максимина» (поле между этими значениями связано посредством выпуклой линейной функции).

В случае крайнего пессимизма ЛПР указанный критерий называется критерием Вальда. Согласно этому критерию, наилучшей считается максиминная стратегия. Это критерий крайнего пессимизма. По этому критерию ЛПР выбирает ту стратегию, которая гарантирует в наихудших условиях максимальный выигрыш:

Такой выбор соответствует наиболее робкому поведению ЛПР, когда он предполагает наиболее, неблагоприятное поведение природы, боится больших потерь. Можно предположить, что он не получит больших выигрышей. Согласно критерию Сэвиджа, следует выбирать чистую стратегию соответствующую условию:

где риск .

Критерий Сэвиджа (критерий потерь от «минимакса») предполагает, что из всех возможных вариантов «матрицы решений» выбирается та альтернатива, которая минимизирует размеры максимальных потерь по каждому из возможных решений. При использовании этого критерия «матрица решения» преобразуется в «матрицу риска», в которой вместо значений эффективности проставляются размеры потерь при различных вариантах развития событий.

Недостатком критериев Вальда, Сэвиджа и Гурвица является субъективная оценка поведения природы. Хотя указанные критерии и дают некоторую логическую схему принятия решений, резонно все же задать вопрос: «А почему сразу не выбрать субъективное решение, вместо того чтобы иметь дело с разными критериями?» Несомненно, определение решения по различным критериям помогает ЛПР оценить принимаемое решение с различных позиций и избежать грубых ошибок в хозяйственной деятельности.

Пример решения задачи

Условие задачи

После нескольких лет эксплуатации оборудование может оказаться в одном из трех состояний:

1. требуется профилактический ремонт;
2. требуется замена отдельных деталей и узлов;
3. требуется капитальный ремонт.

В зависимости от ситуации руководство предприятия может принять следующие решения:

Требуется найти оптимальное решение данной проблемы по критерию минимизации затрат с учетом следующих предположений:

Решение задачи

Если возникли сложности с решением задач, то сайт сайт оказывает онлайн помощь студентам по методам оптимальных решений с контрольными или экзаменами.

Игра парная, статистическая. В игре участвуют 2 игрока: руководство предприятия и природа.

Под природой в данном случае понимаем совокупность внешних факторов, которые определяют состояние оборудования.

Стратегия руководства:

Отремонтировать оборудование своими силами

Вызвать бригаду специалистов

Заменить оборудование новым

Стратегия природы - 3 возможных состояния оборудования.

Требуется профилактический ремонт;

Следует заменить отдельные детали и узлы;

Требуется капитальный ремонт.

Расчет платежной матрицы и матрицы рисков

Поскольку элементы матрицы - затраты, то будем считать их выигрышными но со знаком минус. Платежная матрица:

Составляем матрицу рисков:

Критерий Байеса

Определяем средние выигрыши:

По критерию Байеса оптимальной является стратегия - вызвать бригаду специалистов

Критерий Лапласа

Определим средние выигрыши:

По критерию Лапласа оптимальной является стратегия - вызвать бригаду специалистов

Критерий Вальда

По критерию Вальда оптимальной является стратегия - вызвать бригаду специалистов

Критерий Сэвиджа

По критерию Сэвиджа оптимальной является стратегия - заменить оборудование новым

Критерий Гурвица

По критерию Гурвица оптимальной является стратегия - вызвать бригаду специалистов

Ответ

По всем критериям, за исключением критерия Сэвиджа, оптимальной является стратегия «Вызвать бригаду специалистов». По критерию Сэвиджа, который минимизирует риски, оптимальной является стратегия «Заменить оборудование новым».

Многоканальная СМО с неограниченной очередью
Приведены необходимые теоретические сведения и образец решения задачи по теме "Многоканальная система массового обслуживания с неограниченной очередью", подробно рассмотрены показатели многоканальной системы массового обслуживания (СМО) с ожиданием обслуживания - среднее число каналов, занятых обслуживанием заявки, длина очереди, вероятность образования очереди, вероятность свободного состояния системы, среднее время ожидания в очереди.

Критический путь, критическое время и другие параметры сетевого графика работ
На примере решения задачи рассмотрены вопросы построения сетевого графика работ, нахождение критического пути и критического времени. Также показано вычисление параметров и резервов событий и работ - ранних и поздних сроков, общих (полных) и частных резервов.