Google新模型DolphinGemma助力人与海豚跨物种交流

AI快讯2个月前发布 niko
18 0
AiPPT - 一键生成ppt

人与海豚交流新突破长久以来,人类对与海豚交流充满好奇。如今,谷歌推出的DolphinGemma模型让这一设想成为现实,它能听懂海豚声音并实现水下实时交流。

独特的DolphinGemma模型该模型作为基础LMM模型,采用音频数据训练,学习海豚发声结构并生成类似声音序列。它利用Google特有的音频技术,通过SoundStream分词器高效表示海豚声音,由适合复杂序列的模型架构处理。参数仅400M,可部署在GooglePixel手机上。

WDP数据集的关键作用要实现与海豚沟通并非易事,WDP的庞大标记数据集至关重要。自1985年起,WDP开展长期水下海豚研究项目,产生了丰富独特的数据,为模型训练提供了必不可少的上下文数据。

CHAT系统与手机应用 WDP与佐治亚理工学院合作开发的CHAT系统,是水下计算机。新一代系统以Google Pixel9为基础,整合功能并利用手机处理能力,方便科研人员。部署在手机上的DolphinGemma可助力CHAT预测和识别海豚发声模式。

AI跨物种交流的未来 DolphinGemma另辟蹊径,展现了AI更多可能性,也为科研团队带来机会。未来,或许借助AI能与更多动物交流。

© 版权声明
Trea - 国内首个原生AI IDE