Наша модель біоакустики Perch була натренована переважно на наземних тваринах — наприклад, птахах. Але Perch 2.0 демонструє неймовірні результати на підводній акустиці. Ось як це допомагає нам слухати та розуміти морські екосистеми 🧵

Океан — це «звуковий ландшафт» таємниці. Щоб захистити підводні види, нам потрібно ідентифікувати їх у великому масштабі. Нещодавно ми запустили Perch 2.0, який чудово справляється з морськими валідаційними завданнями — незважаючи на відсутність підводного аудіо під час навчання.

Щоб розширити можливості Perch 2.0 для ідентифікації звуків під водою, ми використали трансферне навчання. Попередньо навчена модель вже може розуміти звук, тому ми навчаємо її вивчати нові параметри лише для фінального етапу процесу, застосовуючи їх до нового виду.

Окуня 2.0 оцінювали за різними завданнями з вокалізації китів: розрізнення різних видів китів з вусоподібними китами та підпопуляцій косаток. Порівняно з попередньо навченими моделями, він стабільно посідав перше або друге місце для кожного набору даних і розміру вибірки.

Ми вважаємо, що Perch 2.0 настільки успішно переносить дані про птахів у підводні звуки завдяки своїй здатності: Узагальнюйте: він може професійно класифікувати звуки, які не включені до його навчання. Класифікувати схожі звуки: він змушений вивчати детальні акустичні особливості. Визнайте різноманіття: визначте різноманітні види, які еволюціонували з вокалізацією, але все ще мають спільні структурні характеристики.