The jMarkov Project
JMarkov is an Object-Oriented tool used for modeling and solving large-scale Markov Chains.
Modules
jMarkov has the following modules
- Core Module: Permits modeling large-scale Markov Chains.
- jQBD: Modeling of QBDs
- jPhase: Modeling of Phase type distributions
- jMDP: Modeling of MarkovDecision Processes.
Downloads
This download inludes all modules, documentation and examples.
Documentation
Manuals
Reference Manual Documentation
Publications related to the Project
Conference proceedings
- Germán Riaño and Julio Góez. jMarkov: An Object Oriented Framework for Modeling and Analyzing Markov Chains and QBDs, in Proceedings of the SMCtools’06, October 2006. Pisa, Italy.
- Juan F. Pérez and Germán Riaño . jPhase: an object- oriented tool for modeling Phase-Type distributions, in Proceedings of the SMCtools’06, October 2006. Pisa, Italy.
- Diego Bello and Germán Riaño. Linear Programming Solvers for Markov Decision Processes, in Proceedings of the 2006 IEEE Systems and Information Engineering Design Symposium, 2006.
- Julio Góez and Germán Riaño JMarkov, librería para la solución de cadenas de Markov de gran escala , in Proceedings of the XII Latin-Ibero-American Congress on Operations Research, 2006. Ciudad de La Habana, Cuba.
Conference Talks
- Julio Góez and Germán Riaño Módulo de JMarkov para la solución de procesos de cuasi nacimiento y muerte. XI Latin American Summer Workshop on Operations Research, 2005. Villa de Leyva, Colombia.
- Andres Sarmiento and Germán Riaño. JMDP: An Object Oriented Framework for Modeling MDPs. Informa Annual Meeting, San Francisco,2005
Contact Information
Markovi
Cadenas de Markov
Descripción
Este progrma permite al estudiante experimentar con cadenas de Markov. Es una herramienta didáctica, no apta para análisis serios.
Usted podra ver el comportamiento de cadenas de máximo ocho estados. Con sólo darle las entradas correspondientes a la matriz P, el programa dibujará el grafo y ejecutará una simulación. Alternativamente, podrá ver el comportamiento de la matriz Pn a medida que n crece. El programa incluye 20 ejemplos.
Antes de ejecutar la simulacion trate de anticiparse a las siguientes preguntas:
- ¿Existe el límite de Pn ?
- ¿Son iguales todos los renglones de la matriz límite?
- ¿Depende dicho límite de las condiciones iniciales?
- ¿Puede usted predecir por adelantado si hay una columna de 0´s en la matriz límite?
Los vasitos de leche marcados con T y R son respectivamente la probabilidad teórica de encontrarse en el estado y la fracción real de tiempo que ha visitado cada estado (para esa simulación particular). En el modo matriz los vectores Vn y Vr representan lo mismo.
Instalación
Hay dos posiblidades de instalación
- Clique aquí para bajar el archivo auto-ejecutable. Guárdelo en la carpeta que quiera y dele doble-clic para descomprimir los archivos internos. Para ejecutar el programa dele doble clic a Markov.exe.
- Clique aquí para la versión zip. Descomprima TODOS los archivos en la carpeta de su elección. Para ejecutar el programa dele doble clic a Markov.exe.
Este programa fue desarrollado por Germán Riaño en la Universidad de los Andes, Bogotá Colombia.
JMarkov
JMarkov is an Object-Oriented tool used for modeling and solving large-scale Markov Chains.
Modules
jMarkov has the following modules
- Core Module: Permits modeling large-scale Markov Chains.
- jQBD: Modeling of QBDs
- jPhase: Modeling of Phase type distributions
- jMDP: Modeling of MarkovDecision Processes.
Downloads
This download inludes all modules, documentation and examples.
Documentation
Manuals
Reference Manual Documentation
Publications related to the Project
Conference proceedings
- Germán Riaño and Julio Góez. jMarkov: An Object Oriented Framework for Modeling and Analyzing Markov Chains and QBDs, in Proceedings of the SMCtools’06, October 2006. Pisa, Italy.
- Juan F. Pérez and Germán Riaño . jPhase: an object- oriented tool for modeling Phase-Type distributions, in Proceedings of the SMCtools’06, October 2006. Pisa, Italy.
- Diego Bello and Germán Riaño. Linear Programming Solvers for Markov Decision Processes, in Proceedings of the 2006 IEEE Systems and Information Engineering Design Symposium, 2006.
- Julio Góez and Germán Riaño JMarkov, librería para la solución de cadenas de Markov de gran escala , in Proceedings of the XII Latin-Ibero-American Congress on Operations Research, 2006. Ciudad de La Habana, Cuba.
Conference Talks
- Julio Góez and Germán Riaño Módulo de JMarkov para la solución de procesos de cuasi nacimiento y muerte. XI Latin American Summer Workshop on Operations Research, 2005. Villa de Leyva, Colombia.
- Andres Sarmiento and Germán Riaño. JMDP: An Object Oriented Framework for Modeling MDPs. Informa Annual Meeting, San Francisco,2005
Contact Information