Definition
人工知能および確率理論において、マルコフ過程は状態間をランダムに移行するシステムを記述するために使用される基本的なモデルです。その核心原理はマルコフ性質であり、システムの将来の状態が過去の状態ではなく、現在の状態のみによって決定されるという特性に基づいています。
Summary
マルコフとは、未来の状態が現在の状態のみに依存し、記憶を持たないというマルコフ性質に従う確率過程を指します。
Key Concepts
- マルコフ性質
- 記憶性なし（マルコフ性）
- 状態遷移
- 確率過程
Use Cases
- 強化学習エージェント
- 自然言語生成
- 予知保全システム