ترجمه فارسی مقاله تحقیقات در مورد الگوریتم فشرده سازی شخصی برای مدلهای از پیش آموزش شده بر اساس افزایش آنتروپی همرفومورفیک

انتخاب پلن

انتخاب پلن برای ادامه خرید الزامی است.

عنوان مقاله به انگلیسی Research on Personalized Compression Algorithm for Pre-trained Models Based on Homomorphic Entropy Increase
عنوان مقاله به فارسی تحقیقات در مورد الگوریتم فشرده سازی شخصی برای مدلهای از پیش آموزش شده بر اساس افزایش آنتروپی همرفومورفیک
نویسندگان Yicong Li, Xing Guo, Haohua Du
فرمت مقاله انگلیسی PDF
تعداد صفحات 8
لینک دانلود رایگان مقاله انگلیسی دانلود مقاله
دسته بندی موضوعات Machine Learning,یادگیری ماشین ,
توضیحات Submitted 16 August, 2024; originally announced August 2024.
توضیحات به فارسی ارائه شده 16 اوت 2024 ؛در ابتدا اوت 2024 اعلام شد.
اطلاعات بیشتر از این مقاله در پایگاه های علمی INSPIRE HEP
NASA ADS
Google Scholar
Semantic Scholar

📚 محتوای این محصول آموزشی (پکیج کامل)

علاوه بر مقاله اصلی انگلیسی که دریافت می کنید، برای یادگیری عمیق‌تر و تسلط کامل بر مباحث مجموعه‌ای از کتاب‌های آموزشی نیز ارائه می‌شود.

🎯 این بسته یک دورهٔ آموزشی کامل و چندلایه است؛ شامل ویدیوهای آموزشی، کتاب‌ها، تمرین‌ها و خودآزمایی.

ℹ️ نکات مهم هنگام خرید

  • این محصول به صورت فایل دانلودی کامل ارائه می‌شود.
  • توجه: لینک‌های اختصاصی دوره طی حداکثر 24 ساعت پس از ثبت سفارش ارسال می‌شوند.
  • دقت کنید لینک ها به شماره موبایل شما ارسال می شوند. پس در ارائه شماره موبایل صحیح دقت کنید.
  • برای راهنمایی در مورد نحوه دانلود به شماره 09395106248 پیامک دهید یا تماس بگیرید. (ایده آل ترین گزینه ارسال پیام در یکی از پیام رسان ها به همین شماره است تا سریعا لینک های محصول همان جا برای شما ارسال گردد.)
  • اگر پرداخت انجام شده ولی بعد از 24 ساعت هنوز لینک‌ها را دریافت نکرده‌اید، نام و نام خانوادگی و نام محصول را پیامک کنید تا لینک‌ها دوباره ارسال شوند.

💬 راه‌های ارتباطی پشتیبانی:
واتس‌اپ یا هر پیام رسان داخلی یا پیامک: 09395106248
تلگرام: @ma_limbs

چکیده

In this article, we explore the challenges and evolution of two key technologies in the current field of AI: Vision Transformer model and Large Language Model (LLM). Vision Transformer captures global information by splitting images into small pieces and leveraging Transformer's multi-head attention mechanism, but its high reference count and compute overhead limit deployment on mobile devices. At the same time, the rapid development of LLM has revolutionized natural language processing, but it also faces huge deployment challenges. To address these issues, we investigate model pruning techniques, with a particular focus on how to reduce redundant parameters without losing accuracy to accommodate personalized data and resource-constrained environments. In this paper, a new layered pruning strategy is proposed to distinguish the personalized layer from the common layer by compressed sensing and random sampling, thus significantly reducing the model parameters. Our experimental results show that the introduced step buffering mechanism further improves the accuracy of the model after pruning, providing new directions and possibilities for the deployment of efficient and personalized AI models on mobile devices in the future.

چکیده به فارسی (ترجمه ماشینی)

در این مقاله ، ما چالش ها و تکامل دو فناوری کلیدی را در زمینه فعلی AI: Vision Transformer Model و مدل زبان بزرگ (LLM) بررسی می کنیم.Vision Transformer با تقسیم تصاویر به قطعات کوچک و استفاده از مکانیسم توجه چند سر ترانسفورماتور ، اطلاعات جهانی را ضبط می کند ، اما تعداد مرجع بالای آن و محاسبه محدودیت سربار در دستگاه های تلفن همراه.در عین حال ، توسعه سریع LLM باعث تحول در پردازش زبان طبیعی شده است ، اما همچنین با چالش های استقرار عظیمی روبرو است.برای پرداختن به این موضوعات ، ما تکنیک های هرس مدل را با تمرکز خاص بر نحوه کاهش پارامترهای اضافی بدون از دست دادن دقت در اختیار داشتن داده های شخصی و محیط های محدود شده با منابع بررسی می کنیم.در این مقاله ، یک استراتژی جدید هرس لایه بندی شده برای تمایز لایه شخصی از لایه مشترک با سنجش فشرده شده و نمونه گیری تصادفی پیشنهاد شده است ، بنابراین پارامترهای مدل را به طور قابل توجهی کاهش می دهد.نتایج تجربی ما نشان می دهد که مکانیسم بافر مرحله معرفی شده ، دقت مدل را پس از هرس بهبود می بخشد ، و جهت و امکانات جدیدی را برای استقرار مدل های هوش مصنوعی کارآمد و شخصی در دستگاه های تلفن همراه در آینده فراهم می کند.

📚 محتوای این محصول آموزشی (پکیج کامل)

علاوه بر مقاله اصلی انگلیسی که دریافت می کنید، برای یادگیری عمیق‌تر و تسلط کامل بر مباحث مجموعه‌ای از کتاب‌های آموزشی نیز ارائه می‌شود.

🎯 این بسته یک دورهٔ آموزشی کامل و چندلایه است؛ شامل ویدیوهای آموزشی، کتاب‌ها، تمرین‌ها و خودآزمایی.

ℹ️ نکات مهم هنگام خرید

  • این محصول به صورت فایل دانلودی کامل ارائه می‌شود.
  • توجه: لینک‌های اختصاصی دوره طی حداکثر 24 ساعت پس از ثبت سفارش ارسال می‌شوند.
  • دقت کنید لینک ها به شماره موبایل شما ارسال می شوند. پس در ارائه شماره موبایل صحیح دقت کنید.
  • برای راهنمایی در مورد نحوه دانلود به شماره 09395106248 پیامک دهید یا تماس بگیرید. (ایده آل ترین گزینه ارسال پیام در یکی از پیام رسان ها به همین شماره است تا سریعا لینک های محصول همان جا برای شما ارسال گردد.)
  • اگر پرداخت انجام شده ولی بعد از 24 ساعت هنوز لینک‌ها را دریافت نکرده‌اید، نام و نام خانوادگی و نام محصول را پیامک کنید تا لینک‌ها دوباره ارسال شوند.

💬 راه‌های ارتباطی پشتیبانی:
واتس‌اپ یا هر پیام رسان داخلی یا پیامک: 09395106248
تلگرام: @ma_limbs

نظرات

هنوز نظری ثبت نشده است.

وارد شوید تا نظر ثبت کنید.