SAM Audio Judge: A Unified Multimodal Framework for Perceptual Evaluation of Audio Separation

від

у

SAM Audio Judge: єдина мультимодальна рамка для перцептивної оцінки відокремлення аудіо

https://ift.tt/6ZyEKVF

Оцінювання продуктивності залишається складним завданням у відокремленні аудіо, а існуючі метрики оцінювання часто не узгоджуються з людським сприйняттям, мають грубий розріз і залежать від опорних сигналів. З іншого боку, суб’єктивні слухові тести залишаються золотим стандартом реальної оцінки, але вони дорогі, трудомісткі та важко масштабуються. У цій роботі розглядається зростаюча потреба в автоматизованих системах, здатних оцінювати відокремлення аудіо без участі людини. Запропонована метрика оцінювання SAM Audio Judge (SAJ) є мультимодальною детальною об’єктивною метрикою без еталонного сигналу, яка демонструє високу узгодженість із людським сприйняттям. SAJ підтримує три аудіодомени (речова мова, музика та загальні звукові події) та три вхідні підказки (текст, візуальні дані та відрізок), охоплюючи чотири різні виміри оцінки (повнота, точність, правдивість та загальна оцінка). SAM Audio Judge також має потенційні застосування у фільтрації даних, псевдо-міткуванні великих наборів даних та повторному ранжуванні в моделях відокремлення аудіо. Ми публікуємо наш код і попередньо натреновані моделі за адресою: https://ift.tt/vNIAGfz.

HI-FI News

via Artificial Intelligence https://ift.tt/jbcYMH9

28 січня 2026 р. о 04:14 ранку

January 28, 2026 at 04:14AM