ترجمه فارسی مقاله ارزیابی سازگاری واقعی بدون محدودیت در حوزه‌ها

چکیده

This work addresses the challenge of factual consistency in text generation systems. We unify the tasks of Natural Language Inference, Summarization Evaluation, Factuality Verification and Factual Consistency Evaluation to train models capable of evaluating the factual consistency of source-target pairs across diverse domains. We rigorously evaluate these against eight baselines on a comprehensive benchmark suite comprising 22 datasets that span various tasks, domains, and document lengths. Results demonstrate that our method achieves state-of-the-art performance on this heterogeneous benchmark while addressing efficiency concerns and attaining cross-domain generalization.

چکیده به فارسی (ترجمه ماشینی)

این کار به چالش سازگاری واقعی در سیستم های تولید متن می پردازد.ما وظایف استنباط زبان طبیعی ، ارزیابی خلاصه ، تأیید واقعی بودن و ارزیابی قوام واقعی را برای آموزش مدلهای آموزش می دهیم که قادر به ارزیابی سازگاری واقعی جفت های هدف در حوزه های متنوع هستند.ما این موارد را در برابر هشت خط پایه در یک مجموعه معیار جامع شامل 22 مجموعه داده که شامل وظایف مختلف ، دامنه ها و طول اسناد است ، ارزیابی می کنیم.نتایج نشان می دهد که روش ما در حالی که به نگرانی های کارآیی و دستیابی به تعمیم متقابل دامنه می پردازد ، به عملکرد پیشرفته در این معیار ناهمگن می رسد.