O nosso modelo de fundação em bioacústica, Perch, foi treinado principalmente em animais terrestres - como aves. Mas o Perch 2.0 está a mostrar um desempenho incrível em acústica subaquática. Aqui está como está a ajudar-nos a ouvir e entender os ecossistemas marinhos 🧵
O oceano é uma "paisagem sonora" de mistério. Para proteger as espécies subaquáticas, precisamos identificá-las em grande escala. Recentemente, lançámos o Perch 2.0, que se destaca em tarefas de validação marinha - apesar de não ter áudio subaquático no treinamento.
Para expandir as capacidades do Perch 2.0 para identificação de som subaquático, utilizámos o aprendizado por transferência. O modelo pré-treinado já consegue entender som, então ensinamos a aprender novos parâmetros apenas para a etapa final do processo, aplicando-o a uma nova espécie.
O Perch 2.0 foi avaliado em uma variedade de tarefas de vocalização de baleias: distinguindo diferentes espécies de baleias com barbatana e subpopulações de orcas. Comparado com modelos pré-treinados, ele ficou consistentemente entre os melhores ou o segundo melhor modelo para cada conjunto de dados e tamanho de amostra.
Acreditamos que o Perch 2.0 é tão bem-sucedido na transferência de dados de aves para sons subaquáticos devido à sua capacidade de: Generalizar: pode categorizar sons que não estão incluídos no seu treinamento com maestria. Classificar sons semelhantes: é forçado a aprender características acústicas detalhadas. Reconhecer diversidade: identificar uma variedade de espécies que evoluíram vocalizações, mas que ainda compartilham características estruturais.
91