Mô hình nền tảng sinh học âm thanh của chúng tôi, Perch, chủ yếu được đào tạo trên các loài động vật trên cạn - như chim. Nhưng Perch 2.0 đang thể hiện hiệu suất đáng kinh ngạc trong âm thanh dưới nước. Dưới đây là cách nó giúp chúng tôi lắng nghe và hiểu các hệ sinh thái biển 🧵

Đại dương là một "khung âm thanh" của sự bí ẩn. Để bảo vệ các loài dưới nước, chúng ta cần xác định chúng trên quy mô lớn. Gần đây, chúng tôi đã ra mắt Perch 2.0, sản phẩm này xuất sắc trong các nhiệm vụ xác thực biển - mặc dù không có âm thanh dưới nước trong quá trình đào tạo.

Để mở rộng khả năng của Perch 2.0 cho việc nhận diện âm thanh dưới nước, chúng tôi đã tận dụng học chuyển giao. Mô hình đã được huấn luyện trước có thể hiểu âm thanh, vì vậy chúng tôi dạy nó học các tham số mới chỉ cho bước cuối cùng trong quy trình, áp dụng nó cho một loài mới.

Perch 2.0 đã được đánh giá trên một loạt các nhiệm vụ về tiếng kêu của cá voi: phân biệt các loài cá voi có râu khác nhau và các quần thể cá voi sát thủ. So với các mô hình đã được huấn luyện trước, nó luôn nằm trong top hoặc là mô hình có hiệu suất tốt thứ hai cho mỗi tập dữ liệu và kích thước mẫu.

Chúng tôi tin rằng Perch 2.0 rất thành công trong việc chuyển đổi dữ liệu chim thành âm thanh dưới nước nhờ vào khả năng: Tổng quát: nó có thể phân loại âm thanh một cách chuyên nghiệp mà không có trong quá trình đào tạo của nó. Phân loại âm thanh tương tự: nó buộc phải học các đặc điểm âm thanh chi tiết. Nhận diện sự đa dạng: xác định nhiều loài đã phát triển các âm thanh vocal hóa, nhưng vẫn chia sẻ các đặc điểm cấu trúc.