ترجمه فارسی مقاله ARCLE: محیط یادگیری پیکره استدلال و انتزاع برای یادگیری تقویتی

چکیده

This paper introduces ARCLE, an environment designed to facilitate reinforcement learning research on the Abstraction and Reasoning Corpus (ARC). Addressing this inductive reasoning benchmark with reinforcement learning presents these challenges: a vast action space, a hard-to-reach goal, and a variety of tasks. We demonstrate that an agent with proximal policy optimization can learn individual tasks through ARCLE. The adoption of non-factorial policies and auxiliary losses led to performance enhancements, effectively mitigating issues associated with action spaces and goal attainment. Based on these insights, we propose several research directions and motivations for using ARCLE, including MAML, GFlowNets, and World Models.

چکیده به فارسی (ترجمه ماشینی)

در این مقاله ARCLE ، محیطی طراحی شده برای تسهیل تحقیقات یادگیری تقویت شده در مورد انتزاع و استدلال (ARC) طراحی شده است.پرداختن به این معیار استدلال القایی با یادگیری تقویت ، این چالش ها را نشان می دهد: یک فضای عمل گسترده ، یک هدف سخت قابل دسترسی و انواع کارها.ما نشان می دهیم که یک عامل با بهینه سازی سیاست پروگزیمال می تواند وظایف فردی را از طریق ARCLE بیاموزد.اتخاذ سیاستهای غیر عاملی و خسارات کمکی منجر به پیشرفت عملکرد شد ، به طور موثری مسائل مرتبط با فضاهای عمل و دستیابی به هدف را کاهش داد.بر اساس این بینش ها ، ما چندین جهت و انگیزه تحقیق را برای استفاده از ARCLE از جمله MAML ، Gflownets و مدل های جهان پیشنهاد می کنیم.