LambdaMark: семантичне водяне позначення аудіо для надійності та радіоактивності
https://ift.tt/YCuwsra
Нещодавні досягнення у сфері генеративного аудіо зробили копіювання голосу все більш легким, що призводить до шахрайства з голосом, impersonation та інших форм несанкціонованого використання. Загальний спосіб атаки — це тонке налаштування моделі генерації мовлення на записах цільового мовця, що дозволяє моделі синтезувати мову в голосі цього мовця. Водяна маркування аудіо пропонує обнадійливий захист шляхом вбудовування помітних сигналів у аудіо. Практична водяна позначка повинна задовольняти дві ключові властивості: надійність та радіоактивність (радіоактивність у контексті водяних позначок означає здатність сигналу залишати сліди та бути виявним). Існуючі методи водяних позначок зазвичай вбудовують сигнали у низькорівневі представлення, такі як хвильові форми або спектрограми, що робить їх вразливими до маніпуляцій на рівні сигналу та обмежує їх переносимість до подальших моделей. Ми представляємо LambdaMark — першуGeneric-радіоактивну схему водяних позначок. На відміну від попередніх підходів, LambdaMark досягає загальної радіоактивності шляхом вбудовування багатобітової інформації водяної позначки в семантичні латентні представлення аудіо. Наші водяні позначки мають семантичну інтерпретацію та тому більш ймовірно будуть опановані подальшою моделлю через тонке налаштування. LambdaMark включає легковаговий енкодер водяних позначок для введення багатобітних пертурбацій, залежних від повідомлення, у семантичні аудіо-репрезентації та декодер для виявлення наявності водяної позначки та відновлення вбудованої бітової інформації. Енкодер та декодер навчалися за допомогою спеціальної багатокомпонентної втрати, яка зберігає якість водяного аудіо, збільшує рівень відновлення бітів та покращує надійність проти звичайних спотворень та спроб адверсарного видалення. Експерименти показують, що LambdaMark досягає майже досконалої надійності за звичайних спотворень. LambdaMark також є єдиною водяною позначкою, що стійка до всіх оцінюваних атак видалення. Більше того, LambdaMark демонструє загальну та надійну радіоактивність та залишається стійкою до спотворень та адверсарних атак видалення навіть наGenerated outputs of those finetuned models.
HI-FI News
via Artificial Intelligence https://ift.tt/oQ4nqiz
23 червня 2026 р. о 06:35 (AM)
June 23, 2026 at 06:35AM
Залишити відповідь