DEEP REINFORCEMENT LEARNING CONTROL OF A TENSION-CONSTRAINED TENDON-DRIVEN UNDERACTUATED ROBOTIC FINGER: A COMPARATIVE STUDY OF DDPG AND SAC

Scientific Journal of Astana IT University, 2026

Толық мәтін Ашық қол жеткізу: Gold Метадеректер (CSL-JSON)
DOI 10.37943/cvpa1758
Деректер сенімділігі 70 орташа
Бұл баға қалай есептеледі

Ол жазбаның өзінің тексерілетін белгілерінен құралады: мақаланың DOI-і бар ма, оның деректерін қанша тәуелсіз дереккөз растады, міндетті өрістер толтырылған ба және соңғы растау қаншалықты жаңа. Дереккөздер арасындағы алшақтық пен идентификатордың болмауы бағаны төмендетеді. 80-нен бастап мән жазбаның қосымша тексерусіз жарияланғанын, 60-тан 79-ға дейін — оның сенімділігі төмен күйде жарияланғанын және қолмен тексеру ұсынылатынын білдіреді. Редактор қолмен тексерген жазбаны қайта есептеу 90-нан төмен түсірмейді. Бұл — мақаланың өзіне емес, ол туралы деректерімізге берілген баға.

Аңдатпа

Tendon-driven robotic fingers are underactuated and strongly nonlinear, and their unidirectional, friction-attenuated tendon tension imposes actuation constraints that any practical controller must respect. A previous study established that a deterministic learning controller (DDPG) can track a grasp trajectory for such a finger and compared it against model-based schemes. The present work extends that line of investigation by asking a narrower but unresolved question: for this same single-actuator, three-link tendon-driven architecture, how does a deterministic actor-critic policy (DDPG) compare with a stochastic, maximum-entropy policy (SAC) once a tension-limit penalty is built directly into the learning objective? Using the previously validated physics-based simulation model, both agents are trained under identical conditions with a reward that jointly penalizes tracking error and tension-constraint violation, and are evaluated across random, sinusoidal, and step disturbances using steady-state error, RMS, ISE, and IAE. The results show a consistent and interpretable trade-off: the stochastic SAC policy attains lower tracking error and better disturbance rejection, especially under time-varying and abrupt loads, at the cost of noisier control and longer training, whereas the deterministic DDPG policy converges faster and produces smoother torque and tension profiles but adapts less well to coupled disturbances. The study isolates the role of the exploration mechanism and the tension penalty in shaping these behaviors and offers practical guidance on selecting between deterministic and stochastic actor-critic methods for physically constrained, underactuated tendon-driven systems.