АвтоАвтоматизацияАрхитектураАстрономияАудитБиологияБухгалтерияВоенное делоГенетикаГеографияГеологияГосударствоДомДругоеЖурналистика и СМИИзобретательствоИностранные языкиИнформатикаИскусствоИсторияКомпьютерыКулинарияКультураЛексикологияЛитератураЛогикаМаркетингМатематикаМашиностроениеМедицинаМенеджментМеталлы и СваркаМеханикаМузыкаНаселениеОбразованиеОхрана безопасности жизниОхрана ТрудаПедагогикаПолитикаПравоПриборостроениеПрограммированиеПроизводствоПромышленностьПсихологияРадиоРегилияСвязьСоциологияСпортСтандартизацияСтроительствоТехнологииТорговляТуризмФизикаФизиологияФилософияФинансыХимияХозяйствоЦеннообразованиеЧерчениеЭкологияЭконометрикаЭкономикаЭлектроникаЮриспунденкция

Определение управляемого полумарковского случайного процесса с катастрофами

Читайте также:
  1. Access. Базы данных. Определение ключей и составление запросов.
  2. I. Дифракция Фраунгофера на одной щели и определение ширины щели.
  3. I. Определение
  4. I. Определение
  5. I. Определение основной и дополнительной зарплаты работников ведется с учетом рабочих, предусмотренных технологической картой.
  6. I. Определение пероксида водорода (перекиси водорода)
  7. I. Определение проблемы и целей исследования
  8. I. Определение ранга матрицы
  9. I. Пограничное состояние у новорожденных детей. Определение, характеристика, тактика медицинского работника.
  10. I. Сестринский процесс при гипертонической болезни: определение, этиология, клиника. Принципы лечения и уход за пациентами, профилактика.
  11. I. Сестринский процесс при диффузном токсическом зобе: определение, этиология, патогенез, клиника. Принципы лечения и ухода за пациентами
  12. I. Сестринский процесс при остром инфаркте миокарда: определение, клиника, неотложная помощь, транспортировка пациента.

Исходным объектом для конструктивного построения управляемого полумарковского процесса с катастрофами является однородная четырехмерная марковская цепь или однородный управляемый процесс марковского восстановления с катастрофами

(5.33)

Как и ранее в обозначениях (5.33) считаем:

· - конечное множество состояний, первая компонента однородного управляемого процесса марковского восстановления с катастрофами принимает дискретные значения из этого множества;

· – множество положительных действительных чисел, поэтому вторую компоненту и последнюю компоненту однородного управляемого процесса марковского восстановления с катастрофами отождествляем со временем, на пространстве задаем борелевскую s- алгебру[12];

· U - есть некоторое пространство управлений с s- алгеброй A подмножеств этого пространства.

Однородная марковская цепь определяется переходными вероятностями i,jОE, t,t,x,yОR+, BÎ A, uÎU и начальным распределением

В рассматриваемом случае предполагаем, что марковская цепь задается переходными вероятностями специального вида

в которых нет зависимости от параметров t, u и y – значений второй, третьей и четвертой компоненты на предыдущем шаге и номера шага n. Следовательно, будущее поведение однородного управляемого процесса марковского восстановления с катастрофами зависит только от значения первой компоненты и имеет место однородность этого управляемого марковского процесса восстановления. При этих дополнительных ограничениях в качестве начального распределения можно задавать константы

(5.34)

поскольку событие являются достоверным, а относительно и далее полагаем

В дальнейшем будем использовать обозначения

(5.35)

Из равенства (5.35) следует, что можно модель усложнить и считать, что область определения функции по переменной B зависит от состояния i. Это значит для каждого iОE задано множество управлений Ui и s- алгебра A i подмножеств этого пространства Ui. Функция , определяемая равенством (5.35), задана для i,jÎE, t,xÎR+, BО A i.

Исследуем свойства функции , вытекающие из определения этой функции.

Прежде всего, заметим, что при x®Ґ получаем равенство

где функция определяется равенством (5.24) со всеми вытекающими из этого равенства свойствами.

Функции (5.35) обладают следующими свойствами при любых i,jОE,t>0,x>0 и A i:

·

· - неубывающие по t и x, непрерывные слева функции;

·

Семейство функций порождает на измеримом пространстве (Ui, A i) семейство вероятностных мер

iÎE, BÎ A i. (5.36)

Так как для любого jÎE, t,xÎR+, A i справедливо неравенство то мера абсолютно непрерывна относительно меры и на основании теоремы Радона-Никодима существуют измеримые функции такие, для которых имеет место равенство

(5.37)

Функции есть условные вероятности

(5.38)

Таким образом, однородный управляемый процесс марковского восстановления с катастрофами может быть задан семейством матриц , множеством вероятностных мер и начальным распределением вероятностей состояний pi, i,jÎE, t,xÎR+, uОUi, BО A i.

Семейство матриц будем называть полумарковским ядром управляемого полумарковского процесса с катастрофами, а семейство вероятностных мер будем называть семейством управляющих мер.

Из определения полумарковского ядра управляемого полумарковского процесса и полумарковского ядра управляемого полумарковского процесса с катастрофами следует предельное равенство

которое позволяет установить связь полумарковского ядра управляемого полумарковского процесса с катастрофами со стандартным полумарковским ядром.

Из равенства (5.38) следует

(5.39)

В силу монотонности функции (5.39) по переменной t получаем неравенство

(3.8)

Следовательно, мера абсолютно непрерывна относительно меры и на основании теоремы Радона-Никодима существуют измеримые функции такие, для которых имеет место равенство

(5.40)

Далее определим управляемый полумарковский процесс с катастрофами Y(t) как случайный процесс с четырьмя компонентами

(5.41)

где а считающий процесс определяется равенством (5.17).

Заметить, что процесс совпадает со стандартным полумарковским процессом, вторая компонента управляемого полумарковского процесса определяет траекторию принимаемых решений. Эта пара совпадает с управляемым полумарковским процессом X(t) (см. определение (5.32)). Третья и четвертая компоненты и принимают значения из пространства R+=[0,Ґ). Компоненты управляемого полумарковского процесса с катастрофами Y(t), и введенный выше считающий процесс имеют ступенчатые траектории, для которых совпадают моменты изменения состояний (изменения состояний происходят в моменты ).

Компоненты и увяжем с моментами появления некоторого события А, называемого катастрофой. Если для некоторого t>0 выполняется неравенство то считаем, что на периоде произошла катастрофа в момент . Значение процесса определяет номер периода, на котором произошла катастрофа. Таким образом, получаем последовательность (поток) моментов катастроф при t>0. В частности, если то есть момент первой катастрофы.


1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 | 13 | 14 | 15 | 16 | 17 | 18 | 19 | 20 | 21 | 22 | 23 | 24 | 25 | 26 | 27 | 28 | 29 | 30 | 31 | 32 | 33 | 34 | 35 | 36 | 37 | 38 | 39 | 40 | 41 | 42 | 43 |

Поиск по сайту:



Все материалы представленные на сайте исключительно с целью ознакомления читателями и не преследуют коммерческих целей или нарушение авторских прав. Студалл.Орг (0.005 сек.)