Download
1 / 66
700 likes | 1.01k Vues
به نام خدا. پايان نامه کارشناسي ارشد مهندسي پزشکي- بيوالکتريک. ارائه: رضوان کياني فر استاد راهنما: آقاي دکتر توحيد خواه خرداد 88. مدلسازي تصميم گيري در انسان با استفاده از پيش بيني مبتني بر مدل و فرآيند تصميم گيري مارکوف. فهرست. مقدمه اي بر تصميم گيري اهداف و فرضيات
E N D
به نام خدا پايان‌نامه کارشناسي ارشد مهندسي پزشکي- بيوالکتريک ارائه: رضوان کياني فر استاد راهنما: آقاي دکتر توحيد خواه خرداد 88 مدلسازي تصميم گيري در انسان با استفاده از پيش بيني مبتني بر مدل و فرآيند تصميم گيري مارکوف
فهرست • مقدمه اي بر تصميم گيري • اهداف و فرضيات • نروسايکولوژي تصميم گيري و ارائه مدل کیفی • مروري بر مطالعات مدلسازی موجود • نحوه پياده سازي مدل کیفی با روش MDP • نتايج شبيه سازي • آزمايشات عملي • نتيجه گيري • پيشنهادات
مقدمه • تصميم گيري به فرآيند شکل گيري ترجيحات، انتخاب و اجراي اعمال و ارزيابي نتايج گفته مي شود. • درهرتصميم گيري هدفي وجود دارد و تصميم گيرنده بايد با کم هزينه ترين روش به آن برسد. • انسانها يک فرآيند يادگيري تقويتي را براي بهينه سازي انتخاب ها بکار مي گيرند.
اهداف 1- بررسي مراکز مغزي مرتبط با تصميم گيري 2- شناخت مراکزي که در پيش بيني دخالت دارند و چگونگي ارتباط وعملکرد آنها و ارائه مدل مناسب 3- پيشنهاد روش مناسب براي مدلسازي عملکرد مراکزفوق طوري که با واقعيت بيولوژيکي سازگار باشد 4- ارائه روشي مناسب براي ارزيابي مدل پيشنهادي • يکي از مسائلي که انسان را از ساير موجودات سطح پايين متمايز ميکند، قابليت او در تحليل مسائل، پيش از وقوع آن و تصميم گيري بر اساس سود و زيان بلندمدت اعمال است. • روی جنبه های انگیزشی تصمیم گیری مطالعات بیشتری انجام شده اما روی نقش مکانیزمهای کنترلی سطح بالاتر نظیرپیش بینی، مطالعات کمترند. • با توجه به نقش حافظه فعال در نگه داری موقت حالات بعدی به نظر می رسد که درنظر گرفتن این مکانیزم از دیدگاه مدل داخلی به توصیف بهتر رفتارهای انسان در تصمیم گیری کمک می کند.
فرضيات • تاکيد روي نواحي پيشاني و برخي نواحي مغز مياني • از نقش احساس يا پاداش دروني و توجه صرف نظر شده • انتخاب تکليف مارپيچ (منافاتی با کلی بودن عنوان ندارد)
روشهاي مطالعه تصميم گيري • مطالعه بيماران شناختي نياز به انجام تستهاي روان شناسي اطلاعات حاصل از بيمار قابل اعتماد نيست اتيسم، افسردگي، شيزوفرني،ADHD ، روانپريشي وسواس و...
روشهاي مطالعه تصميم گيري • ثبت سلولي(1970) نياز به انجام تکليف خاص معمولا روي ميمون انجام مي شود
روشهاي مطالعه تصميم گيري • روشهاي تصويربرداري(1992) نياز به طراحي تکليفهاي خاص کم بودن سوژه ها وضوح فضايي ناکافي ارتباط بین فعالیت نورونی و فشار خون مغزی
انواع تستهاي روانشناسي • مارپیچ • تست رواني کلام • تست استروپ • تست هايلينگ • تست کارت ويسکانسين • AX-CPT • IGT • برج هانوي • تکليف پاسخ تاخير يافته • مارپيچ
قشر پريفرانتال(PFC) Ventral Lateral Frontal Cortex Orbital
دسته بندي مطالعات انجام شده نوروسايکولوژي: مطالعات تصويربرداري (بيش از نود درصد) هوش مصنوعي: روشهاي مارکوف براي مسير يابي ربات، روابط منطقي مطالعه تصميم گيري مدلهاي نوروني(تقليد الگوي خروجي نورونهاي دوپامين) مدلسازي: مدلهاي عملکردي
مدلهاي نوروني • هوک و همکارانش (1995) • دويا (2000) • دويا(2002) • هارونو و کاواتو (2006) • جوشي و همکارانش(2007)
مدلهاي عملکردي • ولاسوز و همکارانش(1998) • پيساپيا(2004) • آن و همکارانش(2005) • استانکويچ و همکارانش(2006) • بالسي(2007) • ايشيدا و همکارانش(2008)
روش انجام کار • MDP مناسب ترين کانديد براي مدلسازي تصميم گيري • حالت • عمل • احتمال تحول حالت • پاداش • سياست • تابع ارزش • مدل محيط
تخمين تابع ارزش • يادگيري تفاضل زماني(TD) NewEstimate ← OldEstimate + StepSiz [Target – OldEstimate]
الگوريتم پيش بيني • 1- مشاهده حالت فعلي • 2- بدست آوردن حالت بعدي و پاداش متناظر با آن از طريق مدل به ازاي تمام اعمال مجاز • 3- بروز سازي توابع ارزش و خطايTD • 4- تغيير حالت فرضي از حالت فعلي به يک حالت بعدي ممکن و تکرار مراحل فوق تا زماني که تمام حالات موجود در افق پيش بيني امتحان شوند.
چگونه زيرهدفها انتخاب مي شوند؟ • از طريق ژنتيکي و انتخاب طبيعي • تحليل رشته اعمالي که پاداش دريافت کرده اند • تحليل فضاي حالت • پاداش هاي دروني • استنباط از رفتار ديگران
بررسی اثر سلسله مراتبی در يادگيری
