ترجمه فارسی مقاله اکتشافات کارگردانی در یادگیری تقویت از منطق زمانی خطی

انتخاب پلن

انتخاب پلن برای ادامه خرید الزامی است.

عنوان مقاله به انگلیسی Directed Exploration in Reinforcement Learning from Linear Temporal Logic
عنوان مقاله به فارسی اکتشافات کارگردانی در یادگیری تقویت از منطق زمانی خطی
نویسندگان Marco Bagatella, Andreas Krause, Georg Martius
فرمت مقاله انگلیسی PDF
تعداد صفحات 22
لینک دانلود رایگان مقاله انگلیسی دانلود مقاله
دسته بندی موضوعات Machine Learning,یادگیری ماشین ,
توضیحات Submitted 18 August, 2024; originally announced August 2024.
توضیحات به فارسی ارائه شده در 18 اوت 2024 ؛در ابتدا اوت 2024 اعلام شد.
اطلاعات بیشتر از این مقاله در پایگاه های علمی INSPIRE HEP
NASA ADS
Google Scholar
Semantic Scholar

📚 محتوای این محصول آموزشی (پکیج کامل)

علاوه بر مقاله اصلی انگلیسی که دریافت می کنید، برای یادگیری عمیق‌تر و تسلط کامل بر مباحث مجموعه‌ای از کتاب‌های آموزشی نیز ارائه می‌شود.

🎯 این بسته یک دورهٔ آموزشی کامل و چندلایه است؛ شامل ویدیوهای آموزشی، کتاب‌ها، تمرین‌ها و خودآزمایی.

ℹ️ نکات مهم هنگام خرید

  • این محصول به صورت فایل دانلودی کامل ارائه می‌شود.
  • توجه: لینک‌های اختصاصی دوره طی حداکثر 24 ساعت پس از ثبت سفارش ارسال می‌شوند.
  • دقت کنید لینک ها به شماره موبایل شما ارسال می شوند. پس در ارائه شماره موبایل صحیح دقت کنید.
  • برای راهنمایی در مورد نحوه دانلود به شماره 09395106248 پیامک دهید یا تماس بگیرید. (ایده آل ترین گزینه ارسال پیام در یکی از پیام رسان ها به همین شماره است تا سریعا لینک های محصول همان جا برای شما ارسال گردد.)
  • اگر پرداخت انجام شده ولی بعد از 24 ساعت هنوز لینک‌ها را دریافت نکرده‌اید، نام و نام خانوادگی و نام محصول را پیامک کنید تا لینک‌ها دوباره ارسال شوند.

💬 راه‌های ارتباطی پشتیبانی:
واتس‌اپ یا هر پیام رسان داخلی یا پیامک: 09395106248
تلگرام: @ma_limbs

چکیده

Linear temporal logic (LTL) is a powerful language for task specification in reinforcement learning, as it allows describing objectives beyond the expressivity of conventional discounted return formulations. Nonetheless, recent works have shown that LTL formulas can be translated into a variable rewarding and discounting scheme, whose optimization produces a policy maximizing a lower bound on the probability of formula satisfaction. However, the synthesized reward signal remains fundamentally sparse, making exploration challenging. We aim to overcome this limitation, which can prevent current algorithms from scaling beyond low-dimensional, short-horizon problems. We show how better exploration can be achieved by further leveraging the LTL specification and casting its corresponding Limit Deterministic Büchi Automaton (LDBA) as a Markov reward process, thus enabling a form of high-level value estimation. By taking a Bayesian perspective over LDBA dynamics and proposing a suitable prior distribution, we show that the values estimated through this procedure can be treated as a shaping potential and mapped to informative intrinsic rewards. Empirically, we demonstrate applications of our method from tabular settings to high-dimensional continuous systems, which have so far represented a significant challenge for LTL-based reinforcement learning algorithms.

چکیده به فارسی (ترجمه ماشینی)

منطق زمانی خطی (LTL) یک زبان قدرتمند برای مشخصات کار در یادگیری تقویت است ، زیرا این امکان را می دهد تا اهداف فراتر از بیان فرمولاسیون بازده با تخفیف معمولی را توصیف کند.با این وجود ، آثار اخیر نشان داده اند که فرمول های LTL می توانند به یک طرح پاداش و تخفیف متغیر ترجمه شوند ، که بهینه سازی آن سیاستی را به حداکثر می رساند که محدودیت پایین تر از احتمال رضایت فرمول را به دست می آورد.با این حال ، سیگنال پاداش سنتز شده اساساً پراکنده است و اکتشاف را به چالش می کشد.هدف ما غلبه بر این محدودیت است ، که می تواند از الگوریتم های فعلی جلوگیری کند و از مشکلات کمتری و کمتری در زمینه افشون استفاده کند.ما نشان می دهیم که چگونه می توان با استفاده بیشتر از مشخصات LTL و به دست آوردن محدودیت مربوط به آن (LDBA) به عنوان یک فرآیند پاداش مارکوف ، اکتشاف بهتر را بدست آورد ، بنابراین نوعی تخمین ارزش سطح بالا را امکان پذیر می کند.با در نظر گرفتن یک دیدگاه بیزی نسبت به پویایی LDBA و پیشنهاد توزیع قبلی مناسب ، ما نشان می دهیم که مقادیر تخمین زده شده از طریق این روش را می توان به عنوان یک پتانسیل شکل دهنده برخورد کرد و به پاداش های ذاتی آموزنده نقشه برداری کرد.از نظر تجربی ، ما برنامه های روش خود را از تنظیمات جدولی گرفته تا سیستم های مداوم با ابعاد بالا نشان می دهیم ، که تاکنون یک چالش مهم برای الگوریتم های یادگیری تقویت شده مبتنی بر LTL را نشان داده اند.

📚 محتوای این محصول آموزشی (پکیج کامل)

علاوه بر مقاله اصلی انگلیسی که دریافت می کنید، برای یادگیری عمیق‌تر و تسلط کامل بر مباحث مجموعه‌ای از کتاب‌های آموزشی نیز ارائه می‌شود.

🎯 این بسته یک دورهٔ آموزشی کامل و چندلایه است؛ شامل ویدیوهای آموزشی، کتاب‌ها، تمرین‌ها و خودآزمایی.

ℹ️ نکات مهم هنگام خرید

  • این محصول به صورت فایل دانلودی کامل ارائه می‌شود.
  • توجه: لینک‌های اختصاصی دوره طی حداکثر 24 ساعت پس از ثبت سفارش ارسال می‌شوند.
  • دقت کنید لینک ها به شماره موبایل شما ارسال می شوند. پس در ارائه شماره موبایل صحیح دقت کنید.
  • برای راهنمایی در مورد نحوه دانلود به شماره 09395106248 پیامک دهید یا تماس بگیرید. (ایده آل ترین گزینه ارسال پیام در یکی از پیام رسان ها به همین شماره است تا سریعا لینک های محصول همان جا برای شما ارسال گردد.)
  • اگر پرداخت انجام شده ولی بعد از 24 ساعت هنوز لینک‌ها را دریافت نکرده‌اید، نام و نام خانوادگی و نام محصول را پیامک کنید تا لینک‌ها دوباره ارسال شوند.

💬 راه‌های ارتباطی پشتیبانی:
واتس‌اپ یا هر پیام رسان داخلی یا پیامک: 09395106248
تلگرام: @ma_limbs

نظرات

هنوز نظری ثبت نشده است.

وارد شوید تا نظر ثبت کنید.