ในวิธีการเชิงตัวเลขสำหรับสมการเชิงอนุพันธ์สุ่มวิธีการประมาณค่าแบบลูกโซ่มาร์คอฟ (MCAM)เป็นหนึ่งในวิธีการเชิงตัวเลข (แบบแผน) หลายวิธีที่ใช้ในทฤษฎีการควบคุมสุ่ม น่าเสียดายที่การปรับใช้แบบแผนเชิงกำหนดอย่างง่ายเพื่อให้เข้ากับแบบจำลองสุ่ม เช่น วิธี Runge–Kutta นั้นใช้ไม่ได้ผลเลย

เป็นชุดความคิดที่มีประสิทธิภาพและใช้งานได้อย่างกว้างขวาง เนื่องจากการควบคุมแบบสุ่มยังอยู่ในช่วงเริ่มต้น จึงอาจกล่าวได้ว่าเป็น 'ข้อมูลเชิงลึก' สำหรับปัญหาการประมาณเชิงตัวเลขและปัญหาอื่นๆ ในกระบวนการสุ่ม [ ^{1 ] [ 2 ] สิ่ง}เหล่านี้แสดงถึงสิ่งที่เทียบเท่ากับทฤษฎีการควบคุมแบบกำหนด เช่นทฤษฎีการควบคุมที่เหมาะสมที่สุด^{[ 3 ]}

แนวคิดพื้นฐานของ MCAM คือการประมาณกระบวนการควบคุม ดั้งเดิม ด้วยกระบวนการมาร์คอฟควบคุม ที่เลือกไว้ บนปริภูมิสถานะจำกัดในกรณีที่จำเป็น จะต้องประมาณฟังก์ชันต้นทุน ให้ตรง กับลูกโซ่มาร์คอฟที่เลือกไว้เพื่อประมาณกระบวนการสุ่มดั้งเดิมด้วย

• ทฤษฎีการควบคุม
• การควบคุมที่เหมาะสมที่สุด
• สมการเชิงอนุพันธ์สุ่ม
• สมการเชิงอนุพันธ์
• การวิเคราะห์เชิงตัวเลข
• กระบวนการสุ่ม