Nosso modelo de fundação em bioacústica, Perch, foi treinado principalmente em animais terrestres – como aves. Mas o Perch 2.0 está mostrando desempenho incrível em acústica subaquática. Veja como isso está nos ajudando a ouvir e entender os 🧵 ecossistemas marinhos

O oceano é uma "paisagem sonora" de mistério. Para proteger as espécies subaquáticas, precisamos identificá-las em escala. Recentemente, lançamos o Perch 2.0, que se destaca em tarefas de validação marinha – apesar de não ter áudio subaquático no treinamento.

Para ampliar as capacidades do Perch 2.0 para identificação de sons subaquáticos, aproveitamos o aprendizado por transferência. O modelo pré-treinado já entende o som, então ensinamos a ele a aprender novos parâmetros apenas para a etapa final do processo, aplicando-os a uma nova espécie.

A Perch 2.0 foi avaliada em uma variedade de tarefas de vocalização de baleias: distinguir diferentes espécies de baleias barbas e subpopulações de orcas. Comparado com modelos pré-treinados, ele ficou consistentemente entre o melhor ou segundo melhor desempenho para cada conjunto de dados e tamanho de amostra.

Acreditamos que o Perch 2.0 é tão bem-sucedido em transferir dados de aves para sons subaquáticos devido à sua capacidade de: Generalize: ele consegue categorizar com maestria sons que não estão incluídos em seu treinamento. Classifique sons semelhantes: é obrigado a aprender detalhes acústicos. Reconhecer diversidade: identificar uma variedade de espécies que evoluíram vocalizações, mas ainda compartilham características estruturais.