СОДЕРЖАНИЕ РАЗДЕЛА

  1. Марковские процессы.
  2. Марковский процесс гибели и размножения.
  3. Марковские цепи с конечным числом состояний и непрерывным временем.
  4. Поток событий. Простейший поток и его свойства.
  5. Потоки Пальма. Потоки Эрланга.

Марковские процессы

 Говорят, что в физической системе X происходит случайный процесс, если она с течением времени может под влиянием случайных факторов переходить из состояния в состояние.
 Система X называется системой с дискретными состояниями, если она имеет счетное (в частном случае – конечное) множество возможных состояний x1, x2, …, xn, … и переход из одного состояния в другое осуществляется скачком..
 Возможные состояния системы X наглядно изображаются с помощью так называемого графа состояний (см. рис.1, 2), на котором состояния системы изображены прямоугольниками, а возможные переходы системы из состояния в состояние – стрелками, соединяющими соответствующие прямоугольники.

Рис. 1. Граф перехода состояний

Рис.2. x3 – состояние без выхода
 На рис. 1 показан граф состояний системы, имеющей четыре возможных состояния: x1, x2, x3, x4. Из состояния x1 возможны переходы в x2 или x3; из состояния x3 – в x4 или обратно в x1 из состояния x3 – в x4, из состояния x4 – обратно в x3.
 Состояние системы называется " состоянием без выхода ", если из него невозможен переход ни в какое другое состояние (см. состояние x3 на рис. 2).
 Для описания случайного процесса, протекающего в системе с дискретными состояниями x1, x2, …, xn часто пользуются вероятностями состояний
p1 ( t ), p2 ( t ), …, pn ( t ),
где pi ( t ) ( i = l, 2, …, n) – вероятность того, что в момент t система находится в состоянии xi. Вероятности pi ( t ) удовлетворяют условию
.
 Случайный процесс, протекающий в системе X, называется процессом с дискретным временем, если переходы системы из состояния в состояние возможны только в определенные моменты времени t1, t2, …, tn, Если переходы возможны в любой момент времени, процесс называется процессом с непрерывным временем.
 Если в системе X с дискретными состояниями происходит случайный процесс, то переходы системы из состояния в состояние можно рассматривать как процесс, происходящий под влиянием некоторых потоков событий. Случайный процесс с дискретными состояниями называется марковским, если все вероятностные характеристики процесса в будущем зависят лишь от того, в каком состоянии этот процесс находится в настоящий момент времени, и не зависят от того, каким образом этот процесс протекал в прошлом ("будущее зависит от прошлого только через настоящее").
 Представим себе, что производится последовательность испытаний, в каждом из которых может осуществиться одно и только одно из к несовместимых событий A1(s), A2(s), … , Ak(s) (верхний индекс обозначает номер испытания). Cкажем, что последовательность испытаний образует простую цепь Маркова, если условная вероятность в (s + 1)-м испытании (s = 1, 2, 3 , … ) осуществиться событию Ak(s + 1) ( i= 1, 2, … , k), после того как в s ­ м испытании, произошло известное нам событие, зависит только от того, каким было событие, происшедшее в s ­ м испытании, и не изменяется от добавочных сведений о том, какие события происходили в более ранних испытаниях.
 Часто при изложении теории цепей Маркова придерживаются иной терминологии и говорят о некоторой физической системе S, которая в каждый момент времени может находиться в одном из состояний x1, x1, …, xk и меняет свое состояние только в моменты t1, t2, … , tn, …. Для цепей Маркова вероятность перейти в какое ­ либо состояние Ai (i = 1, 2, … , k) в момент τ (ts < τ < ts + 1 ) зависит только от того, в каком состоянии система находилась в момент t ( ts − 1 < t < ts), и не изменяется от того, что становятся известными ее состояния в более ранние моменты.
 Для рассмотрим два примера.
 П р и м е р 1. Пусть частица, находящаяся на прямой, движется по этой прямой под влиянием случайных толчков, происходящих в моменты t1, t2, … , tn, …. . Частица может находиться в точках с целочисленными координатами а, а + 1, а + 2, …, b; в точках а и b находятся отражающие стенки. Каждый толчок перемещает частицу вправо с вероятностью р и влево с вероятностью q = 1 − р, если только частица не находится у стенки. Если же частица находится у стенки, то любой толчок переводит ее на единицу внутрь промежутка между стенками. Приведенный пример блуждания частицы представляет собой типичную цепь Маркова..
 П р и м е р 2. В модели Бора атома водорода электрон может находиться на одной из допустимых орбит. Обозначим через Аi событие, состоящее в том, что электрон находится на i ­ й орбите. Предположим, что изменение состояния атома может наступить только в моменты t1, t2, … , tn, …. (эти моменты представляют собой случайные величины). Вероятность перехода с i ­ й орбиты на j ­ ю в момент ts зависит только от i и j (разность ji зависит от количества энергии, на которую изменился заряд атома в момент ts и не зависит от того, на каких орбитах находился электрон в прошлом.
 Для однородных цепей Маркова условная вероятность появления события Ak(s + 1) в ( s + 1 ) ­ м испытании при условии, что в s ­ м испытании осуществилось событие Ak(s) не зависит от номера испытания. Назовем эту вероятность вероятностью перехода и обо- значим буквой pij в этом обозначении первый индекс всегда будет обозначать результат предшествующего испытания, а второй индекс указывает, в какое состдяние перейдет система в последующий момент времени.
 Полная вероятностная картина возможных изменений, осуществляющихся при переходе от одного испытания к непосредственно следующему, задается матрицей перехода
.
 П р и м е р 3. Изучаемая система S может находиться в состояниях x1, x2, x3; переход из состояния в состояние происходит по схеме однородной цепи Маркова; вероятности перехода задаются матрицей
.
 Если система находилась в состоянии x1, то после изменения состояния за один шаг она с вероятностью 1/2 останется в этом же состоянии, с вероятностью 1/6 перейдет в состояние x2 и с вероятностью 1/3 перейдет в состояние x3. Если же система находилась в состоянии x2, то после перехода она может оказаться с одинаковой вероятностью лишь в состояниях x1 и x3; перейти же из состояния x2 в x2 она не может. Последняя строка матрицы показывает нам, что из состояния x3 система может перейти в любое из возможных состояний с одной и той же вероятностью 1/3.
 П р и м е р 4. Получим матрицу перехода для описанного в первом примере случая частицы, блуждающей между двумя отражающими стенками. Если обозначить через А1 событие, состоящее в пребывании частицы в точке с координатой а, через А2 пребывание в точке с координатой а + 1, …, через Аs (s = b − a + 1) – пребывание в точке с координатой b, то матрицей перехода будет
.
 П р и м е р 5. Напишем также матрицу перехода для блуждания частицы между двумя поглощающими стенками. Обозначения событий и остальные условия сохраним те же, что и в предыдущем примере. Разница будет лишь в том, что частица, попавшая в состояния A1 или As, остается в них с вероятностью 1:
.
 Условия, которым должны удовлетворять элементы матрицы перехода.
  1. Вероятности должны быть неотрицательными числами, т. е. при всех i и j
    0 ≤ pij ≤ 1.
  2. Из того, что при переходе из состояния Ai(s) перед (s + 1) ­ м испытанием система обязательно переходит в одно и только в одно из состояний после (s + 1) ­ го испытания, вытекает равенство
     (i = 1, 2, …, k).
    Таким образом, сумма элементов каждой строки матрицы перехода равна единице.
Определим вероятности перехода из состояния Ai(s) в s ­ м испытании в состояние Ai(s + n) через n испытаний. Обозначим эту вероятность значком Рij(n).
 Рассмотрим какое-нибудь промежуточное испытание с номером s + m. В этом испытании осуществится какое-то одно из возможных событий Ar(s + m) (1 ≤ rk). Вероятность такого перехода согласно только что введенным обозначениям равна Рir (m). Вероятность же перехода из состояния Ar(s + m) в состояние Aj(s + n) равна prj (n − m). По формуле полной вероятности
.  (1)
 Обозначим через πn матрицу перехода через n испытаний
.
Согласно (1) между матрицами πs с различными индексами существует соотношение
πn = πm·πn − m (0 < m < n).
В частности, при n = 2 находим:
π2 = π1·π1 = π12,
при n = 3
π3 = π1·π2 = π13,
и вообще при любом n
πn = π1n.
Отметим частный случай формулы (1): при m = 1
.
 П р и м е р 6. Простой подсчет показывает, что матрицы перехода за два шага для примеров 4 и 5 имеют вид:
 для блуждания частицы между отражающими стенками (s ≥ 5)
,
для блуждания между поглощающими экранами
.
 Интуитивно ясно, что в случае отражающих стенок частица после большого числа шагов получит возможность оказаться в любой точке между отражающими стенками. В случае же поглощающих стенок, чем большее число шагов прошла система, тем больше вероятность того, что частица будет поглощена стенками.
 Если процесс, протекающий в системе с дискретными состояниями и непрерывным временем, является марковским, то для вероятностей состояний p1 ( t ), p2 ( t ), …, pn ( t ) можно составить систему линейных дифференциальных уравнений.
 При составлении этих дифференциальных уравнений удобно пользоваться графом состояний системы, на котором против каждой стрелки, ведущей из состояния в состояние, проставлена плотность (интенсивность) потока событий, переводящего систему из состояния в состояние по данной стрелке. Образец такого графа (размеченного графа состояний) показан на рис. 3. Здесь λi,j обозначает плотность потока событий, переводящего систему из состояния xi в состояние xj.


Рис. 3. Плотности перехода
 Если имеется размеченный граф состояний системы X, то систему дифференциальных уравнений для вероятностей состояний pi ( t ) ( i = l, 2, …, n) можно написать, пользуясь следующим правилом. В левой части каждого уравнения стоит производная , а в правой части – столько членов, сколько стрелок связано непосредственно с данным состоянием; если стрелка ведет в данное состояние, член имеет знак плюс, если ведет из данного состояния, член имеет знак минус. Каждый член равен плотности потока событий, переводящего систему по данной стрелке, умноженной на вероятность того состояния, из которого исходит стрелка. Например, для системы X, размеченный граф состояний которой показан на рис. 3, система дифференциальных уравнений будет:
Число уравнений может быть уменьшено на единицу, если учесть условие: для любого t
p1( t ) + p2( t ) + p3( t ) + p4( t ) = 1.
Начальные условия для интегрирования такой системы отражают состояние системы в начальный момент. Если, например, система при t = 0 была в состоянии xk, то полагают
pk (0) = 1; pш (0) = 0 при ik.
 Предельным режимом для системы X называется случайный процесс, устанавливающийся в системе при t -> ∞.
 Если в числе состояний системы имеются состояния без выхода, то при t -> ∞ система с практической достоверностью оказывается в одном из них.
 Если все потоки событий, переводящие систему из состояния в состояние, стационарны (λi,j = const), общее число состояний конечно и состояний без выхода нет, то предельный режим существует и характеризуется предельными вероятностями состояний p1 ( t ), p2 ( t ), …, pn ( t ) (). Чтобы найти эти вероятности, приравнивают нулю левые части уравнений для вероятностей состояний ( полагают все производные равными 0) и решают полученную систему линейных алгебраических уравнений. К ним добавляется нормировочное условие
 Например, для системы X, размеченный граф состояний которой дан на рис. 3, система алгебраических уравнений, определяющая предельный режим, будет

Марковский процесс гибели и размножения

 Марковская непрерывная цепь называется цепью "гибели и размножения", если её граф состояний можно вытянуть в одну цепочку, к которых каждое из средних состояний S2, …, Sn − 1 связано прямой и обратной связью с каждым из соседних состояний, а крайние состояния S1,Sn – только с одним соседним.
 П р и м е р 7. Техническое устройство состоит из трех одинаковых узлов, каждый из них может выходить из строя. Вышедший из строя узел немедленно начинает восстанавливатья. Состояния системы пронумеруем по числу отказавших узлов:
S0 – все три узла исправны;
S1 – один узел неисправен (восстанавливается), два исправны;
S2 – два узела неисправены (восстанавливаются), один исправны;
S3 – все три узла неисправны (восстанавливаются).
 Граф состояний показан на рис. 4.

Рис. 4.Линейный граф схемы " гибеди и размножения"
 Напишем алгебраические уравнения для вероятностей состояний.
Для состояния S0 имеем
λ10 p1 − λ01 p0 = 0,
или
λ10 p1 = λ01 p0, (2)
Для состояния S1 имеем
λ01 p0 − λ10 p1 − λ12 p1 + λ21 p2 = 0, (3)
но в силу (2) соотношение (3) примет вид
− λ12 p1 + λ21 p2 = 0, (4)
или
λ21 p2 = λ12 p1, (5)
Для состояния S2 имеем
λ12 p1 − λ21 p2 − λ23 p2 + λ32 p3 = 0, (5)
но в силу (4) соотношение (6) примет вид
− λ23 p2 + λ32 p3 = 0, (6)
или
λ32 p3 = λ23 p2, (7)
Для состояния S3 имеем
− λ32 p3 + λ23 p2 = 0, (8)
или

λ23 p2 = λ32 p3, (9)

 Для схемы гибели и размножения, члены, соответствующие стоящим друг над другом стрелкам, равны между собой:

λ10 p1 = λ01 p0,
λ21 p2 = λ12 p1,
λ32 p3 = λ23 p2,
λ23 p2 = λ32 p3.

Предельные вероятности p0, p1, p2, p3 в рассматриваемой схеме гибели и размножения удовлетворяют этой системе уравнений и нормировочному условию
p0 + p1 + p2 + p3 = 1, (10)
Из первого уравнения системы найдём
,  (11)
Из второго, с учётом (11), получим
,  (12)
Из третьего, с учётом (12), получим
. (13)
 В числителе стоит произведение всех плотностей вероятности перехода (интенсивностей) λij, стоящих у стрелок, направленных слева направо, с начала и до той, которая идёт в указанное состояние. В знаменателе – произведение всех интенсивностей, стоящих у стрелок, идущих справа налево от указанной конечной до самого начала.
Все вероятности p1, p2, p3 выражены через p0. Подставим соотношения (11), (12), (13) в нормировочное уравнение (10). Получим
,
откуда
.  (14)
Остальные вероятности находятся из системы (11), (12), (13).
П р и м е р 8. Найти предельные вероятности состояний для процесса гибели и размножения, граф которого указан на рис.85.

Рис. 5. Граф состояния для примера 8
По формулам (11), (12), (13), (14) находим
 П р и м е р 9. Прибор состоит из трёх узлов; поток отказов – простейший, среднее время безотказной работы каждого узла равно tб. Отказавший узел сразу же начинает ремонтироваться; среднее время ремонта узла равно tр; закон распределения этого времени показательный. Найти среднюю производительность прибора, если при трёх работающих узлах она равна 100 %, при двух – 50 %, а при одном и менее – прибор вообще не работает.
 Решение. Граф состояний в рассматриваемом примере имеет вид рис. 6.

Рис. 6. Граф состояний примера 9
 По стрелкам вправо систему переводят отказы. Если система находится в состоянии S0, то работают три узла; каждый из них подвергается потоку отказов с интенсивностью 1/ tб; значит, поток отказов, действующих на всю систему, в три раза более интенсивен λ01 = 3/ tб.
 Если система находится в состоянии S1, то работают два узла; общий поток отказов имеет интенсивность λ12 = 2/ tб. Аналогично λ23 = 1/ tб.
По стрелкам влево систему переводят ремонты. Среднее время ремонта равно tр, значит, интенсивность потока восстановления, действующий на один восстанавливаемый узел, равна μ = λ10 = 1/tр, на два узла — λ21 = 2/tр, на три — λ32 = 3/tр.
Пользуясь соотношениями (11) – (14), получим
Если принять время безотказной работы узла tб = 10 (час), время ремонта tp = 5 (час). Тогда tp / tб = 0,5 и
Средняя производительность прибора в установившемся режиме равна
 П р и м е р 9. Рассматривается работа некоторой системы. Среднее время безотказной работы системы равно 1 /λ; поток отказов (сбоев) системы — простейший с параметром λ. Если в системе происходит сбой, то она останавливается и неисправность устраняется. Среднее время устранения неисправности равно 1/μ; поток восстановлений простейший – с параметром μ. Определить вероятность того, что система в момент времени t будет работать, если она в момент времени t = 0 работала.
 Р е ш е н и е . Рассмотрим два состояния системы:
x0 – система исправна,
x1 – система ремонтируется.
Вероятности этих состояний в момент t обозначим р0 (t) и р1 (t) соответственно; составим размеченный граф состояний

Рис. 7. Граф состояний задачи 9.
 Система дифференциальных уравнений для вероятностей состояний имеет вид
 Решение системы уравнений при начальных условиях р0 (0) = 1, р1 (0) = 0 будет
При t –> ∞ будет иметь место стационарный режим работы системы с вероятностями состояний

Марковские цепи с конечным числом состояний и непрерывным временем

 На практике часто встречаются ситуации, когда переходы системы из состояния в состояние происходят не в фиксированные, а в случайные моменты времени, когда заранее указать невозможно – переход может осуществиться в любой момент времени. Например, выход из строя элемента аппаратуры может произойти в любой момент времени; завершение ремонта этого элемента может тоже произойти так же в любой момент времени. Заранее нельзя предугадать момент времени, когда произойдёт сбой в работе аппаратуры.
 Для описания таких процессов может быть применена схема марковского случайного процесса с дискретными состояниями и непрерывным временем, который назвают непрерывной цепью Маркова.
 Покажем, как выражаются вероятности состояний для такого процесса.
Пусть имеется ряд дискретных состояний S1, S2, …, Sn. Переход системы из состояния в состояние может осуществиться в любой момент времени. Этот процесс можно схематично представить графом состояний.
 Обозначим pi (t) вероятность того, что в момент времени t система будет находиться в состоянии Si ( i = 1, 2, …, n). Для любого момента времени t сумма вероятностей состояний равна единице:
 (15)
так как события, состоящие в том, что в момент времени t система находится в состоянии S1, S2, …, Sn несовметны и образуют полную группу.
Для того, чтобы найти вероятности p1 (t), p2 (t), …, pn (t), необходимо знать характеристики процесса, аналогичные переходным вероятностям для марковской цепи. В случае процесса с непрерывным временем не придётся задавать определённые, отличные от нуля, переходные вероятности pi j; вероятность перехода системы из состояния в состояние точно в момент времени t будет равна нулю ( так же как вероятность любого определённого значения непрерывной случайной величины). Вместо переходных вероятностей pi j введём в рассмотрение плотность вероятностей перехода λ i j.
 Пусть система в момент времени t находится в состоянии Si. Рассмотрим элементарный промежуток времени Δ t, примыкающий к моменту t.
 Назовём плотностью вероятности перехода λi j предел отношения вероятности перехода системы за время Δ t из состояния Si в состояние Sj к длине промежутка Δ t
, (16)
где pi jt) – вероятность того, что система, находившаяся в момент t в состоянии Si, за время Δ t перейдёт из него в состояние Sj (плотность вероятностей перехода определяется только для ij).
 Из формулы (16) следует, что при малом Δ t вероятность перехода pi jt) ( с точностью до бесконечно малых высшего порядка) равна λi j Δ t
pi jt) ≈ λi j Δ t.
 Если все плотности вероятностей перехода λi j не зависят от t (т.е. от того, в какой момент начинается элементарный участок Δ t), марковский процесс называется однородным. Если эти плотности представляют собой какие-то функции времени λi j (t ), процесс называется неоднородным. При пользовании сокращённым названием "непрерывная марковская цепь" будем так же различать однородные и неоднородные цепи.
 Предположим, что плотности вероятностей перехода λ i j известны для всех пар состояний Si, Sj. Построим граф состояний системы и против каждой стрелки поставим соответствующие плотности вероятностей перехода. Такой граф, с проставленными у стрелок плотностями вероятностей перехода, называется размеченным графом состояний.
По размеченному графу состояний можно определить вероятности состояний
p1 (t), p2 (t), …, pn (t) (17)
как функции времени. Эти вероятности удовлетворяют дифференциальным уравнениям, которые называются уравнениями Колмогорова. Решая эти уравнения, получают вероятности (17).
Пример 10. Прибор может находиться в одном из четырёх режимах работы S1, S2, S3, S4. Размеченный граф состояний прибора показан на рис. 8.

Рис. 8. Граф состояний примера 10.
Найти вероятность p1 (t) того, что прибор будет работать в режиме S1.
 Придадим t малое приращение Δ t и найдём вероятность того, что в момент времени t + Δ t система будет находиться в состоянии S1. Как это событие может произойти? Очевидно, двумя способами – в момент t прибор уже был на режиме S1, а за время Δ t не вышел из этого режима; или – в момент t прибор был на режиме S3, а за время Δ t прибор перешёл из режима S3 в режим S1.
 Вероятность первого варианта найдём как произведение вероятности p1(t) того, что в момент t прибор был на режиме S1 на условную вероятность того, что, будучи в состоянии S1, система за время Δ t не перейдёт из него в S2. Эта условная вероятность с точностью до бесконечно малых высшего порядка малости равна 1 − λ12 Δt.
 Вероятность второго варианта равна вероятности того, что в момент t прибор работал в режиме S3, умноженной на условную вероятность перехода за время Δ t в состояние S1.
p3(t) λ31 Δ t.
 Применяя правило сложения вероятностей, получим
p1(t + Δ t) = p1(t) ( 1 − λ12 Δt) + p3(t) λ31 Δ t.
 Раскроем скобки в правой части, перенесём p1(t) в левую часть и разделим обе части равенства на Δ t), получим
.
 Теперь устремим Δ t к нулю и перейдём к пределу
.
Левая часть есть не что иное, как производная функции p1(t)
.  (17)
Аналогичные дифференциальные уравнения могут быть выведены и для остальных вероятностей состояния p2 (t), …, pn (t).
Рассмотрим второе состояние S2 и найдём p2(t + Δ t) – вероятность того, что в момент (t + Δ t) прибор будет находиться в режиме S2. Это событие может произойти следующими способами:
  1. – в момент t прибор уже был на режиме S2, и за время Δ t изменения состояния прибора не произошло;
  2. – в момент t прибор был на режиме S1, и за время Δ t перешёл на режим S2, или
  3. – в момент t прибор был на режиме S4, и за время Δ t перешёл на режим S2.
 Вероятность первого варианта вычисляется так: p2 (t) умножается на условную вероятность того, что прибор за Δ t не перейдёт ни на режим S3, на на режим S4. Так как события, состоящие в переходе за время Δ t из S2 в S3 и из S2 в S4 несовместимы, то вероятность того, что осуществится один из этих переходов, равна сумме их вероятностей, т. е. λ23 Δ t + λ24 Δ t с точностью до бесконечно малых высшего порядка. Вероятность того, что не осущесвится ни один из этих переходов, равна 1 − λ23 Δ t − λ24 Δ t. Отсюда вероятность первого варианта
p2 (t) (1 − λ23 Δ t − λ24 Δ t).
 Прибавляя сюда вероятности второго и третьего вариантов, получим
p2(t + Δ t) = p2 (t) (1 − λ23 Δ t − λ24 Δ t) + p1 (t) λ12Δ t + p4 (t) λ42 Δ t.
Перенося p2 (t) в левую часть, деля на Δ t и переходя к пределу, получим дифференциальное уравнение для p2 (t):
.  (18)
 Рассуждая аналогично для режимов S3, S4, получим в результате систему дифференциальных уравнений, составленных по типу (17) и (18)
 (19)
 Эти уравнения для вероятностей состояний называются уравнениями Колмогорова.
Интегрирование этой системы уравнений даст искомые вероятности режимов как функции времени. Начальные условия берутся в зависимости от того, каков был начальный режим прибора. Например, в режиме S1, надо принять начальные условия
при t = 0 имеет место p1 = 1, p2 = p3 = p4 = 0.
Заметим, что всех четырёх уравнений для p1, p2, p3, p4 можно было бы не писать, действительно, p1 + p2 + p3 + p4 = 1 для всех t, и любую из вероятностей можно выразить через три остальные. Например, p4 можно выразить через p1, p2, p3 в виде
p4 = 1 − (p1 + p2 + p3)
и подставить в остальные уравнения. Тогда специального уравнения для вероятности p4 можно не писать.
 Обратим внимание на структуру уравнений (19). Все они построены по определённому правилу.
 В левой части каждого уравнения стоит производная веростности состояния, а правая часть содержит столько членов, сколько стрелок связано с данным состоянием. Если стрелка направлена из состояния, соответствующий член имеет знак "минус"; если в состояние – знак "плюс". Каждый член равен произведению плотности вероятности перехода, соответствующей данной стрелке, умноженной на вероятность того состояния, из которого исходит стрелка.
 Это правило составления дифференциальных уравнений для вероятностей состояний является общим и справедливо для любой непрерывной марковской цепи. С его помощью можно совершенно механически, без всяких рассуждений, записывать дифференциальные уравнения для вероятностей состояний непосредственно по размеченному графу.
Пример 11. Составить дифференциальное уравнение для размеченного графа

Рис. 9 Граф для примера 11.
С начальными условиями при t = 0 p1 = 1, p2 = p3 = p4 = p5 = 0.

Поток событий. Простейший поток и его свойства.

 При рассмотрении случайных процессов, протекающих в системах с дискретными состояниями и непрерывным временем, часто приходится встречаться с так казываемыми "потоками событияй".
 Потоком событий называется последовательность однородных событий, следующих одно за другим в какие ­то случайные моменты времени.
 Примерами могут быть:
  1. – поток вызовов на телефонной станции;
  2. – поток включений приборов в бытовой электосети;
  3. – поток грузовых составов, поступающих на железнодорожную станцию;
  4. – поток … и т. д.
 При рассмотрении процессов, протекающих в системе с дискретными состояниями и непрерывным временем, удобно представить себе процесс так, как будто переходы системы из состояния в состояние происходят под действием каких ­ то потоков событий (поток вызовов, поток неисправностей, поток заявок на обслуживание, поток посетителей и т. п.).
 Будем изображать поток событий последовательностью точек на оси времени 0t. Положение каждой точки на оси случайно.
 Поток событий называется регулярным, если события следуют одно за другим через строго определённые промежутки времени. Такой поток сравнительно редко встречается на практике, но его можно рассматривать как предельный случай.
 При исследовании операций чаще приходится встречаться с потоками событий, для которых и моменты наступления событий и промежутки времени между ними случайны.
 О п р е д е л е н и е 1. Поток событий называется стационарным, если попадания того или иного числа событий на участок времени длиной τ зависит только от длины участка и не зависит от того, где именно на оси Ot расположен этот участок.
 О п р е д е л е н и е 2. Поток событий называется потоком без последствия, если для любых непересекающихся участков времени число событий, попадающих на один из них, не зависит от того, сколько событий попало на другой.
 О п р е д е л е н и е 3. Поток событий называется ординарным, если вероятность попадания на элементарный участок двух или более событий пренебрежимо мала по сравнению с вероятностью попадания одного события.
 Стационарность потока означает его однородность по времени: вероятностные характеристики такого потока не должны меняться в зависимости от времени. В чатности, интенсивность (или плотность) потока событий – среднее число событий в единицу времени, для стационарного потока должна оставаться постоянной. Это не означает, что фактическое число событий, появляющихся в единицу времени, постоянно; поток может иметь местные сгущения и разряжения. Важно для стационарного потока эти сгущения и разряжения не носят закономерного характера, а среднее число событий, попадающих на единичный учаток времени, остается постоянным для всего рассматриваемого периода.
 На практике часто встречаются потоки событий, которые (по крайней мере на ограниченном участке времени) могут рассматриваться как стационарные. Например, поток вызовов, поступающих на телефонную станцию, скажем, на интервале от 12 до 13 часов может считаться стационарным. Тот же поток в течение целых суток уже не будет стационарным (точью интенсивность потока вызовов меньше, чем днем). Так же обстоит дело и в с большинством физических процессов, которые мы называем "стационарными" – в действительности они стационарны только на ограниченном участке времени, а распространение этого участка до бесконечности – лишь удобный прием для упрощения.
 Отсутствие последействия в потоке означает, что события потока появляются в последовательные моменты времени независимо друг от друга. Например, поток пассажиров, входящих на станцию метро, можно считать потоком без последействия, потому что причины, обусловившие приход отдельного пассажира именно в данный момент, а не в другой, как правило, не связаны с аналогичными причинами для других пассажиров. Если такая зависимость появляется, условие отсутствия последействия оказывается нарушенным.
 Рассмотрим поток грузовых поездов, идущих по железнодорожной ветке. Если, по условиям безопасности, они не могут следовать один за другим чаще, чем через интервал времени τ0, то между событиями в потоке имеется зависимость, и условие отсутствия последействия нарушается. Если интервал τ0 мал по сравнению со средним интервалом между поездами τ, такое нарушение несущественно, но если интервал τ0 сравним с τ, его приходится учитывать.
 Ординарность потока означает, что события в потоке происходят поодиночке, а не группами. Например, поток клиентов в парикмахерскую, что нельзя сказать о потоке клиентов в ЗАГС для регистрации брака.
 Если в неординарном потоке события происходят только парами, группами, то можно его рассматривать как ординарный "поток пар", "поток групп". Несколько сложнее обстоит дело, если число событий, образующих "пакет" (группу одновременно происходящих событий) случайно. Тогда приходится наряду с потоком пакетов рассматривать случайную величину Х – число событий в пакете, и математическая модель потока становится болоее сложной: он представляет собой не только последовательность моментов появления пакетов, но и последовательность случайных величин – чисел событий в каждом пакете. Пример неординарного потока событий со случайным числом событий в пакете – поток товарных вагонов, прибывающих на сортировочную станцию ("пакетом" является поезд).
 Рассмотри поток событий, обладающий всеми тремя свойствами: стационарный, без последствия, ординарный. Такой поток называется простейшим (или стационарным пуассоновским) потоком. Название "простейший" связано с тем, что математическое описание событий, связанных с простейшими потоками, оказывается наиболее простым. Отметим, что "самый простой", на первый взгляд, регулярный поток со строго постоянными интервалами между событиями не является "простейшим" в вышесказанном смысле слова.. Он обладает ярко выраженным последействием, так как моменты появления событий связаны между собой жёсткой функциональной зависимостью. Именно из ­ за этого последействия анализ процессов, связанных с регулярными потоками, оказывается, как правило, труднее, а не легче по сравнению с простейшими.
 Простейший поток играет среди других потоков особую роль. При суперпозиции (взаимном наложении) достаточно большого числа потоков, обладающих последействием (лишь бы они были стационарны и ординарны), образуется суммарный поток, который можно считать простейшим, и тем точнее, чем больше число потоков складывается.
 Если поток событий не имеет последствия, ординарен, но не стационарен, он называется нестационарным пуассоновским потоком. В таком потоке интенсивность λ (среднее число событий в единицу времени) зависит от времени:

λ = λ (t),

тогда как для простейшего потока

λ = const.

 Пуассоновский поток событий (как стационарный, так и нестационарный) связан с распределением Пуассона. Число событий потока, попадающих на любой участок, распределено по закону Пуассона. Действительно, рассмотрим на оси Ot, где наблюбается поток событий, некоторый временной интервал длины τ, начинающийся в момент t0 и заканчивающийся в момент t0 + τ. Вероятность попадания на этот участок ровно m событий выражается формулой

(m = 0, 1, … ), (20)

где α – среднее число событий, приходящееся на участок τ.
 Для стационарного (простейшего) пуассоновского потока, величина α равна интенсивности потока, умноженной на длину интервала:

α = λ·τ,

т.е. не зависит от того, где на оси Ot взят участок τ. Для нестационарного пуассоновского потока величина α выражается формулой:

,

и зависит от того, в какой точке t0 начинается участок τ.
 Рассмотри на оси Ot простейший поток событий с интенсивностью λ. Нас будет интересовать интервал времени T между соседними событиями в этом потоке. Величина T есть случайная величина, найдём её функцию распределения:

F (t ) = p (T < t),

т.е. вероятность того, что величина T примет значение, меньшее, чем t. Отложим от начала интервала T (точки t0) отрезок t и найдём вероятность того, что интервал T будет меньше t. Для этого нужно, чтобы на участок длины t, примыкающий к точке t0, попало хотя бы одно событие потока. Вычислим вероятность этого F (t ) через вероятность противоположного события ( на участок t не попадёт ни одного события потока):

F (t ) = 1 − p0.

 Вероятность p0 найдём по формуле (20), полагая m = 0:

,

откуда функция распределения величины T будет

F (t ) = 1 − e− λt (t > 0 ). (21)

 Закон распределения с плотностью (21) называется показательным. Параметр λ называется параметром показательного закона.
Найдём числовые характеристики случайной величина T – математическое ожидание mt

, (22)

дисперсию Dt

. (23)

 Извлекая корень квадратный из дисперсии, найдём среднее квадратическоео отклонение случайной величины T:

. (24)

 Для показательного распределения математическое ожидание и среднее квадратическое отклонение равны друг другу и обратны параметру λ.
 Исследуя структуру простейшего потока событий пришли к заключению: промежуток времени T между соседними событиями в простейшем потоке распределён по показательному закону; его среднее значениее и среднее квадратическое отклонение равны 1/λ, где λ – интенсивность потока.
 Для нестационарного пуассоновского потока закон распределения промежутка T уже не будет показательным; вид этого закона будет зависеть от того, где на оси Ot расположено первое из событий, и от вида зависимости λ (t), характеризующей переменную интенсивность потока. Однако, если λ (t) меняется сравнительно медленно и его изменение за время между двумя событиями невелико, то закон распределения промежутка времени между событиями можно приближённо считать показательным (21), полагая в этой формуле величину λ равной среднему значению λ (t) на этом участке.
 Найдём вероятность того, что на участке Δ t появится какое-то событие потока, т.е. участок не будет "пуст". Так как поток ординарен, вероятностью появления на участке Δ t более чем одного события можно пренебречь. Обозначим p0( Δ t) вероятность того, что на участке Δ t не будет события, а p1( Δ t) – вероятность того, что на участке Δ t появится одно событие. В силу однородности потока

p1( Δ t) ≈ 1 − p0( Δ t),

а вероятность p0( Δ t) вычисляется по формуле (20):

,

откуда

p1( Δ t) ≈ 1 − e− λ·Δt.

 Разлагая e− λ·Δt в ряд по степеням λ·Δt и пренебрегая величинами высшего порядка малости, получим:

p1( Δ t) ≈ 1 − (1 − λ·Δt).

Откуда

p1( Δ t) ≈ λ·Δt. (25)

т.е. вероятность появления на элементарном участке времени Δt какого-то события потока приближённо равна λ·Δt, где λ – интенсивность потока. Эту вероятность будем называть "элементом вероятности появления события".
Такая же формула будет справедлива и для нестационарного пуассоновского потока, с той разницей, что величину λ нужно брать равной её значению в той точке t, к которой примыкает участок Δt:

p1( Δ t) ≈ λ(t)·Δt.

Потоки Пальма. Потоки Эрланга

 Потоком Пальма (потоком с ограниченным последействием) называется поток событий, у которого промежутки между последовательными событиями
T1, T2, …, Ti, …
представляют собой независимые, одинаково распределённые случайные величины.
 Простейший (стационарный пуассоновский) поток является частным случаем потока Пальма: в нём промежутки T1, T2, …, Ti, … представляют собой случайные величины, распределённые по одному и тому же показательному закону; их независимость следует из того, что простейший поток есть поток без последствия, и промежутки по времени между любыми двумя событиями не зависят от того, каковы промежутки между другими.
 П р и м е р. Некоторый элемент технического устройства работает непрерывно до своего выхода из строя, после чего он мгновенно заменяется новым. Срок работы элемента случаен. Если отдельные экземпляры элементов выходят из строя независимо друг от друга, то поток отказов ( или "поток восстановлений", так как отказ и восстановление происходят в один и тот же момент) представляет собогй поток Пальма.
 Если к тому же срок работы элемента распределён по показательному закону, поток Пальма превращается в простейший (стационарный пуассоновский) поток.
 П р и м е р. Группа самолётов идёт в боевом порядке "колонна" с одинаковой для всех самолётов скоростью V. Каждый из них, кроме ведущего, обязан выдержать строй, т.е. держаться на заданном расстоянии от впереди идущего. Это расстояние измеряется дальномером и выдерживается с ошибками. Моменты пересечения самолётами заданного рубежа при этих условиях образуют поток Пальма, так как случайные величины независимы. Заметим, что этот же поток не будет потоком Пальма, если самолёты стремятся выдержать заданное расстояние не от соседа, а от ведущего всю колонну.
 Многие потоки событий, встречающиеся на практике, не являются в точности потоками Пальма, но могут быть ими приближённо заменены.
 Важными для практики образцами потоков Пальма являются так называемые потоки Эрланга (Э). Эти потоки образуются в результате "просеивания" простейших рядов.
 Потоком Эрланга k - го порядка (Эk) называется поток событий, получаемый из простейшего потока путем операции "разрежения", когда выбрасывают из потока k точек подряд, и сохраняется только ( k + l ) - ю (рис. 10). Простейший поток есть поток Эрланга первого порядка.

Рис. 10. Поток Эрланга k – го порядка
 Промежуток времени Т между двумя соседними событиями в потоке Эрланга k ­ ro порядка представляет собой сумму k независимых случайных величин – расстояний между событиями в исходном простейшем потоке:

.

Каждая из этих случайных величин распределена по показательному закону:

f1(t) = λ e−λ t (t > 0).

Закон распределения интервала Т между соседними событиями в потоке Эk называется законом Эрланга k - го порядка.
 Найдём выражение для плотности распределения этого закона; обозначим её fk(t). Для этого рассмотрим на оси времени простейший поток с интенсивностью λ, в котором события разделены интервалами T1, T2, …, и найдём элемент вероятности fk(tdt – вероятность того, что интервал окажется в пределах элементарного участка (t, t + dt).
 Для этого на участок длиной t должно попасть ровно k − 1 точек простейшего потока; вероятность этого события, согласно формуле (20) равна

.

Кроме того, последняя (k - я) точка должна попасть на элементарный участок (t, t + d t) – вероятность этого равна λ dt (смотри формулу (25). Перемножая эти вероятности, получим:

,

откуда

 ( t > 0). (26)

 При k = 1 (простейший поток) получаем
f 1 ( t ) = λ· e − λ t ( t > 0). (27)
(показательный закон).
 Функция распределения
 ( t > 0)
 Найдём характеристики закона Эрланга k - го порядка: его математическое ожидание mt(k) и дисперсию Dt(k). Случайная величина T, распределённая по закону Эрланга k - го порядка, получается сложением k независимых случайных величин

,

где каждая из величин Ti распределена по показательному закону (27) с математическим ожиданием 1/λ и дисперсией 1/λ2 (см. формулы 22, 23). Применяя теоремы сложения математических ожиданий и дисперсий, имеем

. (28)

 Извлекая из последнего выражения корень квадратный, найдём среднее квадратическое отклонение:

.

 Математическое ожидание, дисперсия и среднее квадратическое отклонение интервала между соседними событиями в потоке Эрланга k - го порядка будут определяться соотношениями:

. (29)

Закон распределения fk(t), и все его характеристики в (29) выражены не через интенсивность самого потока Эрланга Эk, а через интенсивность λ порождающего его простейшего потока, который подвергался прореживанию. Выразим характеристики потока через интенсивность (среднее число событий в единицу времени) самого потока Эрланга Эk.
 Очевидно

Λk = λ/k; λ = k·Λk,

так как из исходного простейшего потока с интенсивностью λ берётся только k - я часть.
 Подставляя выражение λ через Λ в формулу (26), получим

  (t > 0) (30)

 Математическое ожидание, дисперсия и среднее квадратическое отклонение этого закона будут:

. (31)

 Теперь предположим, что, сохраняя неизменной интенсивность потока Λk:

Λk = Λ = const,

будем менять только порядок k закона Эрланга. Его математическое ожидание останется постоянным:

, (32)

а дисперсия и среднее квадратическое отклонение будут меняться:

. (33)

 Из формул (33) видно, что при k –> ∞ и дисперсия, и среднее квадратическое отклонение стремятся к нулю. Это значит, что при k –> ∞ поток Эрланга заданной интенсивности Λ неограниченно приближается к регулярному потоку с постоянным интервалом между событиями:

.

 Это свойство потоков Эрланга удобно в практических приложениях: оно даёт возможность, задаваясь различными k, получать потоки, обладающие различным последействием – от полного отсутствия последействия (k = 1) до жёсткой функциональной связи между моментами появления событий (k = ∞). Таким образом, порядок потока Эрланга k может служить в какой - то степени "мерой последействия".
 В целях упрощения часто бывает удобно приближённо заменить реальный поток событий – потоком Эрланга с тем же последействием. Это делают, согласовывая характеристики реального потока – математическое ожидание и дисперию интервала между событиями – с теми же характеристиками заменяющего потока Эрланга.
 Как плотность распределения f k ( t ), так и функцию распределения F k ( t ) для закона Эрланга любого порядка можно вычислять, пользуясь таблицами пуассоновского распределения
.
В этих обозначениях
f k ( t ) = λP ( k, λt)  ( t > 0)
F k ( t ) = 1 − R ( k, λt),
где
.
Если Q ( m, a) = 1 − R ( m, a), тогда
P ( k, a) = R ( k, a) − R ( k − 1, a) = Q ( k − 1, a) − Q ( k, a).
Между функциями P ( k, a) и R ( k, a) существует следующее соотношение:
.
Полезно знать предельные соотношения:
 Регулярным потоком событий называется поток, в котором события следуют одно за другим через строго определенные промежутки времени.
 При увеличении порядка k потока Эрланга (и одновременном уменьшении масштаба по оси Ot делением на (k + 1) поток Эрланга приближается к регулярному.
 Пример. В результате статистической обработки интервалов времени между событиями в некотором потоке получены следующие характеристики:
  1. – среднее значение интервала mt = 2 мин,
  2. – среднее квадратическое отклонение интервала σt = 0,9 мин.
 Требуется подобрать поток Эрланга, обладающий приблизичельно теми же характеристиками, найти его интенсивность Λ и порядок k.
 Решение. Интенсивность Λ есть величина, обратная среднему интервалу между событиями:

Λ = 1/mt = 1/2 = 0,5 (соб/мин)

Из формулы (33) находим порядок потока Эрланга k:

Выбирая в качестве k ближайшее целое число, получаем

k = 5.

 Итак, данный поток можно приближённо заменить потоком Эрланга 5 - го порядка с плотностью вида:

или

 (t > 0) (34)

 Вид кривой плотности распределения (34) показан на рис. 11.

Рис. 11. График плотности распределения вероятностей примера.
 Особое внимание, уделяемое здесь потокам Эрланга по сравнению с другими потоками Пальма (с произвольным законом распределения интервала времени между соседними событиями) объясняется тем, что при помощи этих потоков можно сводить не-марковские процессы к марковским.
 Потоки Эрланга весьма удобны для приближённого представления потоков Пальма любого вида, так как потоки Эрланга различных порядков образуют целую гамму, дающую постепенный переход от простейшего потока (полное отсутствие последействия) к потоку с регулярными интервалами (полное, жёсткое последействие).