Оценки в случае дискретного времени
Пусть Т= {0, 1, 2, …}, zt — однородный марковский процесс с пространством состояний Z. Обозначим через θQ(z) индикатор множества Q:
θQ(z) = 0, если z не принадлежит Q;
θQ(z) = 1, если z∈Q; (1)
Как уже отмечалось, момент μQ первого выхода из Q является марковским для процесса zt. Пусть u ≥ 0 — некоторое фиксированное число. Тогда и μ = θQ
Теорема 1. Пусть существует функция V(z), z∈Z, удовлетворяющая условиям:
1) V∈DA(Q),
2) V(z) ≤ 1 — θQ(z), z∈Z;
3) AV(z) ≥ λ, z∈Q, где λ — некоторая постоянная. Тогда
Pz{θQ ≥ t} ≤ V(z) + Δt. (6)
Доказательство. Легко видеть, что величина λ в условии теоремы 1 может быть лишь неотрицательной. Следовательно. λ ≥ 0. Теперь доказательство следует из формулы (4).
Теорема 2. Пусть существует функция V(z), z∈Z, удовлетворяющая условиям:
1) V∈DA(Q),
2) V(z) ≤ 1 — θQ(z), z∈Z;
3) AV(z) ≤ aV{z) при некотором a > 0, z∈Q. Тогда
Pz{θQ ≥ t) ≤ V(z) (1 +a)t.
Теорема 3. Пусть существует функция V(z), z∈Z, удовлетворяющая условиям:
1) -∞< V— ≤ inf V(z) ≤ supV(z) ≤ V+ < 1,
2) V(z) = 1 при z не принадлежит Q,
3) AV(z) = Δ = const npu z∈Q.
Тогда справедлива двусторонняя оценка. Теорема 4. В условиях теоремы справедливо равенство
MzθQ = (1 — V(z))/Δ
Теорема 5. Пусть существует функция V(z), z∈Z, удовлетворяющая условиям 1) и 2) теоремы 3 и для которой
0 < Δ— ≤ AV(z) ≤ Δ+ < ∞, z∈Q. (13)
Теорема 6. Пусть существует функция V, удовлетворяющая условиям:
1) max V(z) = 1,
2) V(z) ≥ 1 — χQ(z), z∈Z,
3) AV(z) ≤ R[ 1 — V(z)], z∈Q. (16)
Pz{θQ ≤ t} ≤ 1 — (1 — R)t[1 — V(z)]. (17)
Доказательство. Легко показать (аналогичное рассуждение см. в доказательстве теоремы 1), что R ≥ 0. Покажем теперь, что без ограничения общности можно считать, что R ≤ 1. В самом деле, пусть условие (16) выполняется при R > 1. Тогда для тех точек z∈Q, В которых V(z) = 1, оно выполнено для любого числа, в том числе и меньшего. Предположим теперь, что не существует такого числа R0 ≤ 1, для которого выполнено условие (16) в множестве {z∈Q, V(z) < 1}. Тогда существует точка z0∈Q, V(z0) < 1, такая, что (1+R)/2 [1 - V (z0)] < AV (z0),
где R > 1. Следовательно, с одной стороны, в силу условия 1) данной теоремы, Mz0V ≤ 1, с другой же стороны,
Mz0 = V (z0) + AV (z0) > 1.
Из полученного противоречия следует, что можно положить R ≤ 1.
Утверждение теоремы доказывается по индукции совершенно аналогично теореме 2.
Приведенные теоремы дают различные оценки распределения момента первого выхода. Одним из возможных путей их улучшения может быть их комбинированное применение.
Эти оценки могут использоваться в различных ситуациях. Рассмотрим случай, когда у анализируемого процесса существует стационарный режим. Иначе говоря, существует вероятностное распределение Р0(•), удовлетворяющее соотношению
Р0(•) = ∫Р0(dz)P(z; •)• (18)
Задачей является оценка функции распределения момента первого выхода траектории процесса из множества Q в стационарном режиме. Именно, пусть
K=Р0(Q). (19)
Теорема 7. Пусть Р0 — стационарное распределение процесса zt, и пусть существует функция V, удовлетворяющая условиям:
1) V(z)∈DA(Q),
2) V(z) = 1 при z не принадлежит Q,
3) AV(z) = Δ при z∈Q, Δ > 0,
4) ∫|V(z)|Р0 (dz) < ∞.
Тогда
|P*{θQ ≤ t} — 1 + (1 — Δ)t| ≤ 2/K|V(z)|Р0(dz). (21)
Эта теорема может эффективно использоваться в ситуациях, когда стационарное распределение процесса «концентрируется» около нулевых значений пробной функции V. Для ее применения необходимо знать по крайней мере оценки распределения Р0.
Отметим некоторые существенные особенности полученных оценок. Они справедливы при всех значениях аргумента t у функции распределения Pz{θQ ≤ t}. При этом, в отличие, скажем, от «типичных» результатов асимптотического анализа, оценивается распределение ненормированных величин. Никаких предположений о характере режима работ системы (высоконадежная система, система с малой загрузкой, система с быстрым восстановлением и т. п.) не делалось. С другой стороны, в ряде случаев (или при некоторых режимах) полученные оценки могут быть грубыми. Поэтому одной из важных задач является анализ точности предлагаемых оценок. Если оценки двусторонние, то естественной мерой точности является расхождение между верхней и нижней границами. Однако не всегда удается построить достаточно точные двусторонние оценки. Иногда приходится довольствоваться односторонними оценками. При этом косвенным признаком точности оценки может служить ее согласие с асимптотическим распределением в тех случаях, когда такое распределение известно. Для того чтобы можно было пользоваться таким способом, необходимо полученные оценки привести к виду, «типичному» для асимптотической теории, что может также позволить в ряде случаев получать предельные теоремы. Опишем соответствующую конструкцию. Пусть задано параметрическое семейство случайных процессов zt(α) со значениями из одного множества Z, т. е. каждому значению а соответствует свой процесс, который является однородным марковским. Для простоты изложения предположим, что α — числовой параметр, α > 0. Это предположение часто выполнено в конкретных примерах и несущественно для дальнейшего1). Будем рассматривать поведение этого семейства при значениях α, близких к 0. Все величины, относящиеся к процессу zt(α), будем снабжать индексом α. Пусть θQα— время первого выхода процесса zt(α) из множества Q. Рассмотрим часто встречающуюся ситуацию, когда при любых фиксированных t и z∈Q
lim Pz{θQα ≤ t} =0.
Такой случай имеет место, например, при анализе высоконадежных систем, когда изучается, скажем, резервированная система с восстановлением, α — параметр, характеризующий ненадежность системы (величина, обратная числу резервных элементов, или среднему времени безотказной работы каждого элемента, и т. п.), а zt(α)—процесс, описывающий систему с параметром α. Предположим, что для каждого а из некоторой окрестности нуля построены одно- или двусторонние оценки.
Под этим здесь подразумевается, что для каждого процесса zt(α) построена пробная функция Vα(z), z∈Z, удовлетворяющая какой-либо из вышеприведенных теорем, и с помощью оценок вида (6) —(8), (14), (17), (21) построены оценки вида (24). При этом нижняя и верхняя оценки m и m* зависят фактически и от вида пробной функции Vα.