ВОПРОСЫ ДЛЯ САМОПРОВЕРКИ ПО ЧИСЛЕННЫМ МЕТОДАМ И ТЕОРИИ ВЕРОЯТНОСТЕЙ
1.Дайте определение случайной величины, случайной функции.
2.Что понимается под случайным процессом? Приведите примеры.
3.Дайте понятие состояния стохастической системы.
4.Какова классификация случайных процессов?
5.Чем отличается дискретный случайный процесс с непрерывным временем от дискретного случайного процесса с дискретным временем?
6.Как называется процесс, в котором переход из одного состояния в другое зависит только от состояния, в котором находится процесс?
7.При каком условии случайный процесс с непрерывным временем является марковским?
8.Какие случайные процессы носят название марковских
цепей ?
9.Дайте определение интенсивности перехода для марковского случайного процесса с непрерывным временем.
10.Какому условию удовлетворяют элементы матрицы интенсивностей переходов?
11.Как называется матрица интенсивностей, сумма элементов каждой строки которой равна нулю?
12.Что понимается под эргодическим свойством случайного процесса?
13.Что описывает граф состояний системы?
14.Какие графические элементы присутствуют в графе состояний системы?
15.Что понимают под предельными вероятностями состояний системы?
16.Что описывают системы дифференциальных уравнений Колмогорова?
17.Какими численными методами можно решать систему Колмогорова?
4
18.Реализации каких численных методов решения задачи Коши систем дифференциальных уравнений на языке Pascal Вам известны?
19.Что предлагается в математическом пакете Maple для решения задачи Коши систем дифференциальных уравнений?
5
СВЕДЕНИЯ ИЗ ТЕОРИИ МАРКОВСКИХ ПРОЦЕССОВ
Воснове широкого класса технологических процессов или систем лежат вероятностные (стохастические) по своей природе явления. При изучении стохастических систем, которые развиваются во времени в зависимости от ряда случайных факторов, полезной математической моделью является случайный процесс. Для математического описания процессов или систем, развивающихся в форме случайного процесса, может быть применен математический аппарат марковских случайных процессов, разработанный в теории вероятностей.
Втеории вероятностей функция X(t) называется случайной, если ее значение при любом аргументе t является случайной величиной. Случайная функция X(t), аргументом которой является время, называется случайным процессом.
Случайный процесс называется марковским или случайным
процессом без последействия, если для любого момента времени to вероятностные характеристики процесса в будущем будут зависеть только от его состояния в данный момент to, u не зависят от того, как и когда система пришла в это состояние.
Случайный процесс в некоторой технологической системе S представляет собой случайные переходы системы из состояния в состояние. Под системой S понимается всякое множество взаимосвязанных элементов, которое нельзя расчленить на независимые подмножества. Состояние системы S(t) может быть охарактеризовано с помощью одной или нескольких численных переменных. Например, в различные моменты времени в системе количество работоспособных узлов и отказавших узлов может меняться. Если каждому возможному набору работоспособных (или отказывающих) элементов поставить в соответствие некоторое состояние системы, то отказы и восстановления элементов будут отражаться переходом системы из одного состояния в другое.
Разделение на классы марковских случайных процессов производится в зависимости от непрерывности или дискретности множества значений функции X(t) и параметра t. Если множество X
– дискретное, то марковский процесс называется дискретным
6
марковским процессом или цепью Маркова. Если момент времени t изменения значения случайной функции X(t) меняется дискретно, то процесс называется цепью Маркова с дискретным временем. Система в этом случае скачком переходит в одно из своих состояний S0, S1, S2,…, Sn в строго определенные моменты времени. Если же время перехода из состояния Si в состояние Sj системы непрерывное, то процесс называется цепью Маркова с
непрерывным временем.
Стоит выделить в рамках классификации марковских процессов случай, когда множество значений случайного процесса и время t являются непрерывными. Такие процессы называются
непрерывными марковскими процессами. Наиболее важным примером таких процессов являются диффузионные процессы.
В данной курсовой работе рассматриваются цепью Маркова с непрерывным временем. В практике нередко встречаются случайные процессы, которые с определенной погрешностью можно считать цепью Маркова с непрерывным временем.
При исследовании марковских цепей пользуются графическим представлением системы с помощью графа состояний. Теория графов в настоящее время представляется большим и интенсивно развивающимся разделом математики, развитие которого стимулируется наличием огромного числа практических применений. Не вдаваясь в математические подробности, следует отметить, что граф содержит вершины, моделирующие некоторое множество элементов. Вершины часто изображаются кружками. Всевозможные парные отношения между вершинами (отношения смежности, достижимости, несовместности, подчиненности и т.д.) отображаются либо ребрами (линиями без стрелок), соединяющими вершины в неориентированных графах, если отношения не имеют четкой направленности, либо дугами (линиями со стрелки) в ориентированных графах (орграфах), если важно направление в этих отношениях. Во взвешенных графах каждой дуге (ребру) сопоставляется некоторое число (вес, стоимость, длина пути и т.д.). Граф состояний системы представляет собой взвешенный орграф (рис. 1), вершины которого
7
изображают возможные состояния системы Si . Дуги графа
состояний изображают возможные переходы системы из одного состояния в другое и имеют веса, характеризующие интенсивности переходов системы из состояния в состояние.
12
S1 S2
21
31
13
23
S3
Рис.1. Графическое представление цепи Маркова с непрерывным временем
Пусть система имеет конечное число состояний S1 , S2 , …,Sn .
Вероятности этих состояний для любого момента времени t обозначим как P1 (t), P2 (t), …, Pn (t) . Поскольку система обязана
находиться в одном из своих состояний, то указанные вероятности удовлетворяют условию вероятностей для полной группы событий
P1(t) P2 (t) ... Pn (t) 1.
Для процесса с непрерывным временем рассматриваются переходные вероятности Pij (t, t) того, что система, пребывавшая
в момент t в состоянии Si , за время t перейдет из него в состояние Sj . Однако, помимо переходных вероятностей Pij(t, t),
которые при t 0 тоже становятся бесконечно малыми величинами, для описания переходов используются интенсивности
8