tsta

فارسی

Home / سی و دومین کنفرانس ملی و دهمین کنفرانس بین المللی مهندسی زیست پزشکی ایران

DDQN-Learning of Hill-Type Musculoskeletal Arm Model for Elbow Motor Control

Authors :

Mohammad-Reza Sayyed Noorani¹ Abbas Jafarpour Mahalleh² Kimiya Khojand³

1- University of Tabriz 2- University of Tabriz 3- University of Tabriz

Keywords :

Double Deep Q-learning،Elbow Flexion Control،Hill-Type Musculoskeletal Model،Muscle Activation،OpenSim

Abstract :

This study aimed to develop a model-based reinforcement learning (RL) framework designed to partially emulate central nervous system (CNS) learning processes for goal-directed motor control. The RL model, implemented using a double deep Q-learning (DDQN) algorithm, interacting with a biomechanical arm model served as the simulated environment. The environment comprised a Hill-type musculoskeletal representation of the biceps brachii and triceps brachii muscles, enabling elbow flexion–extension over a range of 10–135°. Within this setup, the RL agent received state information, including elbow joint angle and velocity, from the environment and generated muscle activation signals as control outputs. These signals acted on the Hill-based biomechanical model, allowing the agent to learn reaching toward specified target through iterative episodes. To validate biomechanical realism, forward dynamics simulations were performed in OpenSim using a customized arm model driven by the RL-generated excitations. Results demonstrated that the agent successfully acquired stable and biologically plausible motor strategies.

List of archived papers

A Comparative Analysis of Simulated and Experimental Acoustic and Thermal Behavior of HIFU

Maryam Fazeli - Remi Souchon - Cyril Lafon - Mehran Jahed

مطالعه مروری طراحی و ساخت نانوحامل‌های هوشمند برای تحویل هدفمند داروهای ضد سرطان به تومورهای لوزالمعده

ایدا احمدی - ابوبکر سوری - جعفرصادق مقدس

ارائه روشی جدید برای دستیابی به تعادل بار کاری پردازنده ها در محیط توزیع شده گرید محاسباتی با استفاده از الگوریتم ژنتیک

نجمه بلوردی - مریم حسینی گسمونی - فاطمه امامی پناه - مجده فخرآبادی

تاثیر بشردوستی شرکتی بر کارایی سرمایه گذاری با تاکید بر استراتژی تجاری شرکت

محمد فرجی بنائی - سمیرا بالائی - مهین اروجی

تحلیل بیومکانیکی تعادل ایستایی در جوانان و سالمندان بر روی سطوح پایدار و ناپایدار با استفاده از شاخص‌های سینتیکی نیروی واکنشی زمین

فرشته موسوی کنک لو - علیرضا هاشمی اسکویی - شقایق حسن زاده خانمیری

بررسی مربوط بودن ارزش اطلاعات حسابداری با استفاده از روش CART: یک مطالعه برای شرکت‌های داروسازی در بورس اوراق بهادار تهران

نوراله خدادادی - مهرداد قنبری - بابک جمشیدی نوید - جواد مسعودی

A Comprehensive Architecture for Smart Hospitals: Leveraging IoT, AI, and Data Science

Jafar Abdollahi - Laya Mahmoudi - Babak Nouri-Moghaddam

شناسایی خودکار حملات روز صفر با رویکرد چندفازی در تولید امضاهای Snort

مازیار کریمی - سعید مهرجو

بررسی و مقایسه روش‌های تشخیص جوامع در شبکه‌های اجتماعی با هم‌افزایی الگوریتم‌های تکاملی و یادگیری ماشین

زهرا انیسی نسب - محمد مصلح

پیش بینی بار الکتریکی کوتاه مدت در شبکه شرکت برق منطقه ای آذربایجان با استفاده ‏از سیستم فازی

محمدرضا رستمی نوشهر - لاریسا خدادادی - حسین خون جهان - عبدالحسین شاکری

more

Samin Hamayesh - Version 43.6.0