Machine Learning,Artificial Intelligence,Computation and Language,Computer Vision and Pattern Recognition,یادگیری ماشین , هوش مصنوعی , محاسبات و زبان , چشم انداز رایانه و تشخیص الگوی ,
توضیحات
Submitted 30 August, 2024; originally announced August 2024. , Comments: 9 pages, 2 figures, XAI World Conference 2024 Late-Breaking Work , MSC Class: 68T07 (Primary) 68T30; 68T50 (Secondary) ACM Class: I.2.4; I.2.6; I.2.7
توضیحات به فارسی
ارسال شده در 30 اوت 2024 ؛در ابتدا اوت 2024 اعلام شد. ، نظرات: 9 صفحه ، 2 شکل ، کنفرانس جهانی XAI 2024 کار دیررس ، کلاس MSC: 68T07 (اولیه) 68T30 ؛کلاس 68T50 (ثانویه) کلاس ACM: I.2.4 ؛I.2.6 ؛i.2.7
کتاب پرسش و پاسخ چهارگزینهای – نسخه یادگیری سریع
— پاسخها بلافاصله بعد از سؤال برای مرور سریع
مشاهده نمونه نسخه کوییز سریع
کتاب پرسش و پاسخ چهارگزینهای – نسخه خودآزمایی
— پاسخها در انتهای بخشها برای سنجش واقعی یادگیری
مشاهده نمونه نسخه آزمونی
🎯 این بسته یک دورهٔ آموزشی کامل و چندلایه است؛ شامل ویدیوهای آموزشی، کتابها، تمرینها و خودآزمایی.
ℹ️ نکات مهم هنگام خرید
این محصول به صورت فایل دانلودی کامل ارائه میشود.
توجه: لینکهای اختصاصی دوره طی حداکثر 24 ساعت پس از ثبت سفارش ارسال میشوند.
دقت کنید لینک ها به شماره موبایل شما ارسال می شوند. پس در ارائه شماره موبایل صحیح دقت کنید.
برای راهنمایی در مورد نحوه دانلود به شماره 09395106248 پیامک دهید یا تماس بگیرید. (ایده آل ترین گزینه ارسال پیام در یکی از پیام رسان ها به همین شماره است تا سریعا لینک های محصول همان جا برای شما ارسال گردد.)
اگر پرداخت انجام شده ولی بعد از 24 ساعت هنوز لینکها را دریافت نکردهاید، نام و نام خانوادگی و نام محصول را پیامک کنید تا
لینکها دوباره ارسال شوند.
💬 راههای ارتباطی پشتیبانی: واتساپ یا هر پیام رسان داخلی یا پیامک:
09395106248 تلگرام: @ma_limbs
چکیده
The use of transformer-based models is growing rapidly throughout society. With this growth, it is important to understand how they work, and in particular, how the attention mechanisms represent concepts. Though there are many interpretability methods, many look at models through their neuronal activations, which are poorly understood. We describe different lenses through which to view neuron activations, and investigate the effectiveness in language models and vision transformers through various methods of neural ablation: zero ablation, mean ablation, activation resampling, and a novel approach we term 'peak ablation'. Through experimental analysis, we find that in different regimes and models, each method can offer the lowest degradation of model performance compared to other methods, with resampling usually causing the most significant performance deterioration. We make our code available at https://github.com/nickypro/investigating-ablation.
چکیده به فارسی (ترجمه ماشینی)
استفاده از مدل های مبتنی بر ترانسفورماتور به سرعت در سراسر جامعه در حال رشد است.با این رشد ، درک چگونگی کار آنها و به ویژه چگونگی مکانیسم های توجه نشان دهنده مفاهیم مهم است.اگرچه روشهای تفسیر زیادی وجود دارد ، بسیاری از آنها از طریق فعال سازی عصبی خود به مدل ها نگاه می کنند ، که از نظر ضعیف درک نشده اند.ما لنزهای مختلفی را برای مشاهده فعال سازی های نورون توصیف می کنیم و اثربخشی در مدل های زبان و ترانسفورماتورهای بینایی را از طریق روشهای مختلف فرسایش عصبی بررسی می کنیم: فرسایش صفر ، فرسایش متوسط ، تغییر شکل مجدد و یک رویکرد جدید که "فرسایش اوج" را اصطلاح می کنیم.از طریق تجزیه و تحلیل تجربی ، می فهمیم که در رژیم ها و مدل های مختلف ، هر روش می تواند کمترین تخریب عملکرد مدل را در مقایسه با سایر روش ها ارائه دهد ، در حالی که مجدداً نمونه برداری معمولاً باعث خراب شدن عملکرد می شود.ما کد خود را در https://github.com/nickypro/investigating-ablation در دسترس قرار می دهیم.
📚 محتوای این محصول آموزشی (پکیج کامل)
علاوه بر مقاله اصلی انگلیسی که دریافت می کنید، برای یادگیری عمیقتر و تسلط کامل بر مباحث مجموعهای از کتابهای آموزشی نیز ارائه میشود.
کتاب پرسش و پاسخ چهارگزینهای – نسخه یادگیری سریع
— پاسخها بلافاصله بعد از سؤال برای مرور سریع
مشاهده نمونه نسخه کوییز سریع
کتاب پرسش و پاسخ چهارگزینهای – نسخه خودآزمایی
— پاسخها در انتهای بخشها برای سنجش واقعی یادگیری
مشاهده نمونه نسخه آزمونی
🎯 این بسته یک دورهٔ آموزشی کامل و چندلایه است؛ شامل ویدیوهای آموزشی، کتابها، تمرینها و خودآزمایی.
ℹ️ نکات مهم هنگام خرید
این محصول به صورت فایل دانلودی کامل ارائه میشود.
توجه: لینکهای اختصاصی دوره طی حداکثر 24 ساعت پس از ثبت سفارش ارسال میشوند.
دقت کنید لینک ها به شماره موبایل شما ارسال می شوند. پس در ارائه شماره موبایل صحیح دقت کنید.
برای راهنمایی در مورد نحوه دانلود به شماره 09395106248 پیامک دهید یا تماس بگیرید. (ایده آل ترین گزینه ارسال پیام در یکی از پیام رسان ها به همین شماره است تا سریعا لینک های محصول همان جا برای شما ارسال گردد.)
اگر پرداخت انجام شده ولی بعد از 24 ساعت هنوز لینکها را دریافت نکردهاید، نام و نام خانوادگی و نام محصول را پیامک کنید تا
لینکها دوباره ارسال شوند.
💬 راههای ارتباطی پشتیبانی: واتساپ یا هر پیام رسان داخلی یا پیامک:
09395106248 تلگرام: @ma_limbs
