Почти полностью разложимая цепь Маркова - Википедия - Nearly completely decomposable Markov chain
В теория вероятности, а почти полностью разложимая (NCD) цепь Маркова это Цепь Маркова где пространство состояний может быть разделено таким образом, что перемещение внутри раздела происходит гораздо чаще, чем перемещение между разделами.[1] Существуют особенно эффективные алгоритмы для вычисления стационарное распределение цепей Маркова с этим свойством.[2]
Определение
Андо и Фишер определить полностью разложимую матрицу как матрицу, в которой «идентичная перестановка строк и столбцов оставляет набор квадратных подматрицы на главная диагональ и нули повсюду ". Почти полностью разложимая матрица - это матрица, в которой идентичная перестановка строк и столбцов оставляет набор квадратных подматриц на главной диагонали и мелкие ненулевые где-либо еще.[3][4]
Пример
А Цепь Маркова с матрица перехода
почти полностью разложим, если ε мала (скажем, 0,1).[5]
Алгоритмы стационарного распределения
Разработаны специальные итерационные алгоритмы для цепей Маркова NCD.[2] хотя многоуровневый алгоритм, алгоритм общего назначения,[6] экспериментально было показано, что он конкурентоспособен, а в некоторых случаях значительно быстрее.[7]
Смотрите также
Рекомендации
- ^ Kontovasilis, K. P .; Митроу, Н. М. (1995). «Марково-модулированный трафик с почти полными характеристиками разложимости и связанные с ним модели массового обслуживания». Достижения в прикладной теории вероятностей. 27 (4): 1144–1185. Дои:10.2307/1427937. JSTOR 1427937.
- ^ а б Koury, J. R .; McAllister, D. F .; Стюарт, У. Дж. (1984). "Итерационные методы вычисления стационарных распределений почти полностью разложимых цепей Маркова". Журнал SIAM по алгебраическим и дискретным методам. 5 (2): 164–186. Дои:10.1137/0605019.
- ^ Андо, А.; Фишер, Ф. (1963). «Почти разложимость, разделение и агрегация и актуальность обсуждения стабильности». Международное экономическое обозрение. 4 (1): 53–67. Дои:10.2307/2525455. JSTOR 2525455.
- ^ Куртуа, П. Дж. (1975). «Анализ ошибок в почти полностью разложимых стохастических системах». Econometrica. 43 (4): 691–709. Дои:10.2307/1913078. JSTOR 1913078.
- ^ Пример 1.1 из Инь, Джордж; Чжан, Цин (2005). Цепи Маркова с дискретным временем: методы и приложения на двух шкалах времени. Springer. п.8. ISBN 978-0-387-21948-6.
- ^ Horton, G .; Лойтенеггер, С. Т. (1994). «Многоуровневый алгоритм решения установившихся цепей Маркова». Обзор оценки эффективности ACM SIGMETRICS. 22: 191–200. CiteSeerX 10.1.1.44.4560. Дои:10.1145/183019.183040.
- ^ Leutenegger, Scott T .; Хортон, Грэм (июнь 1994). Об использовании многоуровневого алгоритма для решения почти полностью разложимых цепей Маркова (Отчет ICASE № 94-44) (Технический отчет). НАСА. Отчет подрядчика 1949 г. 29.
Мы представляем экспериментальные результаты, показывающие, что многоуровневый алгоритм общего назначения является конкурентоспособным и может быть значительно быстрее, чем специализированный алгоритм KMS, когда для решения отдельных блоков используются методы Гаусса-Зейделя и исключения Гаусса. Цепи Маркова, Многоуровневые, Численное решение.