Постановка задачи оценки распределения момента первого достижения
Многие важные задачи анализа систем могут быть сформулированы в терминах момента первого достижения. Поэтому различные оценки распределения этого момента важны в первую очередь с практической точки зрения.
Сформулируем задачу, которая будет решаться в данной главе.
Пусть Q⊂Z — фиксированное подмножество пространства состояний процесса zt. Будем рассматривать как процесс с дискретным временем, так и кусочно-линейный процесс. Обозначим через μQ момент первого выхода из множества Q:
μQ = inf{t : zt не принадлежит Q}.
В дальнейшем всюду будем считать множество Q открытым. Тогда, поскольку траектории zt непрерывны по t справа, то zQ не принадлежит Q. Если процесс zt имеет конечное время жизни (обрывающийся процесс), то, вообще говоря, возможна ситуация, что момент обрыва наступит раньше, чем процесс покинет множество Q. Поэтому будем предполагать регулярность рассматриваемых процессов. На самом же деле достаточно предположить, что рассматриваются процессы, у которых время жизни больше величины μQ. Это предположение выполнено, например, в случае, когда Q ограничено, т. е. найдется n > О, при котором Q из {||z|| < п), поскольку мы предполагаем, что все подпроцессы zt,n, полученные из исходного процесса остановкой в множестве {||z|| ≤ n}, регулярны. Предположение о регулярности также излишне в случае дискретного времени, так как процесс с дискретным временем автоматически регулярен.
В этих предположениях величина μQ является марковским моментом для процесса zt (марковский момент по определению должен не превышать времени жизни процесса). Однако в общем случае μQ может принимать с положительной вероятностью бесконечные значения. Это соответствует ситуации, когда процесс с положительной вероятностью не покидает множества Q за конечное время. Тривиальным примером такой ситуации является случай, когда Q — множество поглощающих состояний.
Нашей задачей в этой главе будет получение одно- и двусторонних оценок функции распределения Pz{μQ ≤ x}. При z не принадлежащем Q данная функция полагается равной 1 (что соответствует μQ = 0). Поэтому оценки будем искать при начальном состоянии z∈Q.