Afrispeech Семантика: оцінювання аудіосемантичного мислення у мовних моделях із різними доменами та акцентами
https://ift.tt/tzEDlUO
Аудіомоделі мови (ALMs) все частіше використовуються для розуміння на основі мови, але їх здатність виконувати семантичне мислення поза інтерпретацією, пошуком за текстом-аудіо, підсумовуванням та відповіданням на запитання (Q&A) залишається недостатньо оціненою за допомогою бенчмарків. Зокрема, вплив варіацій акценту, зсув домену та семантичне надвисновування щодо аудіореasoning залишаються мало зрозумілими. Ми оцінюємо аудіомовні моделі за п’ятьма завданнями семантичного та паралінгвістичного мислення: виведення (entailment), узгодженість (consistency), правдоподібність (plausibility), зсув акценту (accent drift) та обмеження акценту (accent restraint). У сукупності ці завдання оцінюють здатність моделі розуміти над розмовною аудіо як джерело основних доказів, зокрема чи може бути інферовано текстову гіпотезу, чи заперечується або лишається невизначеною аудіо, чи відповідають або суперечать твердження висловленому змісту, чи є заяви правдоподібними в рамках дискурсу, і чи залишаються прогнози моделі стабільними або адекватно обмеженими за змінами акценту. Ці висновки підкреслюють критичні обмеження сучасних оцінок аудіорозуміння та надіємо надати керівництво для більш надійного та справедливого дизайну та оцінювання ALM
HI-FI News
через Штучний інтелект https://ift.tt/EtGuxQV
11 червня 2026 р. о 05:10
June 11, 2026 at 05:10AM
Залишити відповідь
Щоб відправити коментар вам необхідно авторизуватись.