猫眼电影
猫眼电影记者 冀新琪 报道w3u7903ejky2ywls
新智元报道
编辑:定慧
【新智元导读】谷歌推出全新DolphinGemma大模型,基于30年海豚研究数据训练的AI模型正试图破解海豚的语言密码。仅有400M参数的轻量级模型能在普通Pixel手机上运行,不仅能识别海豚声音模式,还能预测它们的下一个发声——就像LLM预测下一个词一样。
你是否曾经好奇过海豚神秘的声音在说什么?
现在借助AI的力量,可以实现「人与海豚」的跨物种交流。
谷歌推出了一款名为DolphinGemma的创新AI模型,不仅能听懂海豚说什么,还能在水下和海豚实时交流。
听起来很科幻,但这是真的!看来人类对AI的开发还不足1%。
DolphinGemma是一个基础LMM模型——但是使用音频数据来训练——来学习海豚发声的结构并生成类似海豚的声音序列,也是第一个能和动物交流的LLM。
Google的CEO Sundar Pichai也表示「这朝着实现跨物种交流迈出了非常酷的一步」。
同时Pichai也宣布了将在夏天开源这个模型,也许你可以带着这个模型去水族馆展示一下超能力了。
因为这个模型足够小,只有400M大小,可以部署在一台手机上。
几十年来,理解海豚的哨声和爆发脉冲一直是科学前沿。
如果不仅能聆听海豚,还能充分理解它们复杂交流的模式,是否能打破人类和其他物种的交流障碍?
DolphinGemma打破交流障碍
LLM能预测下一个词,DolphinGemma也能预测海豚想要说什么。
DolphinGemma利用了Google特有的音频技术:SoundStream分词器高效地表示海豚声音。
这些声音随后由适合复杂序列的模型架构处理。
DolphinGemma的参数只有400M,可以直接部署在Google Pixel手机上。
左侧:DolphinGemma 早期测试中生成的哨声(左侧)和爆发脉冲(右侧)
DolphinGemma基于Gemma构建而成,Gemma是Google 的轻量级、最先进的开源模型,这些模型采用与Gemini模型相同的研发和技术。
和我们熟知的文本LLM类似,但是DolphinGemma是一个音频输入、音频输出的模型。
它能处理自然海豚声音序列,以识别模式、结构,并最终预测序列中可能的后续声音,就像LLM预测下一个单词或Token一样。
海豚数据集:WDP数十年的坚持
想要和海豚「沟通」是一项艰巨的任务。
多亏了WDP的庞大、标记数据集,为这项前沿AI研究提供了独特的机会。
自1985年以来,WDP开展了世界上持续时间最长的水下海豚研究项目,对巴哈马特定社区的野生大西洋斑点海豚(Stenella frontalis)进行了跨代研究。
这种非侵入性的、以「在他们的世界,以他们的方式」为原则的方法,产生了丰富而独特的数据集。
数十年水下视频和音频,与个体海豚身份、生活史和观察行为仔细配对的数据。
一群大西洋斑点海豚,Stenella frontalis
WDP长达数十年的观察工作至关重要。
最终目标是理解这些海豚的声音序列中的结构和潜在含义——寻找海豚语言中模式和规则。
这种对自然交流的长期分析构成了WDP研究的基础,并为任何AI分析提供必不可少的上下文数据。
左边:一只母斑点海豚在觅食时观察她的幼崽。她会使用她独特的签名哨声在幼崽完成活动后叫它回来。右边:用于可视化海豚哨声的频谱图
用Pixel手机和海豚交流
有了数据,也训练好了模型,如何让DolphinGemma的声音被海豚听到呢?
WDP与佐治亚理工学院合作,开发了「鲸目动物听力增强遥测」 (Cetacean Hearing Augmentation Telemetry,CHAT)系统,一种水下计算机。
CHAT不是直接破译海豚的复杂自然语言,而是建立一个更简单、共享的词汇表。
通过在人类之间演示系统,研究人员希望天生好奇的海豚会学会模仿这些哨声来请求她们喜欢的特定物体。
最终,随着更多海豚自然声音的理解,它们也可以被添加到系统中。
CHAT的新一代系统将以Google Pixel 9为基础,整合扬声器/麦克风功能,并利用手机的先进处理能力。
使用Pixel智能手机减少了对自定义硬件的需求,缩小了设备的成本和尺寸,极大方便了在公海就行研究的科研人员。
一台Google Pixel 9在最新的 CHAT 系统硬件内部
部署在手机上的DolphinGemma也可以帮助CHAT在海豚发声序列的早期预测和识别潜在的模式。
跨物种交流,AI搞定
不得不说,Google推出的DolphinGemma还是值得点个大大的赞的。
在当下巨头们都在「卷模型」的时候,DolphinGemma不仅另辟蹊径,同时也让我们看到了更多AI的可能性。
在探索更多AI应用的同时,也给更多的类似WDP这样数十年如一日坚持科研的团队带来了更多的机会。
AI对于我们的生活的影响还远远没有结束。
DeepMind的CEO Hassabis透露说,未来计划与更多的高智商动物进行交流,比如家里的狗。
Hassabis说他想知道自己家的狗在说什么。
谁说不可能呢,也许未来每个人都可以借助AI直接和你的猫狗进行交流。
这个画面想想还是非常喜感的。
参考资料:
https://blog.google/technology/ai/dolphingemma/
时事1:第一次老是进不去就软了
04月25日,广西推动高水平共建西部陆海新通道 扩大开放水平,
众人哈哈大笑。
,国外美女换装视频高清下载。04月25日,“学思践悟习近平经济思想丛书(2023)”出版发行,
“即便现在我不出手,子陵回来也不会善罢甘休。依照他的脾气,不将你们这一支斩尽,也要屠掉十之八九,不给他一个公道,他是不会咽下这口气的!”宛若黄金狮子般威猛的老人这样说道。
第五十三章 朱厌,色情性❌片涩涩涩黄游,女仆扒开🍑跪着让客人挠痒痒,51丨国产丨丝袜精品入口。时事2:少妇把腿扒开让我添6912p
04月25日,全球最严!澳大利亚未成年人告别社交媒体,
“呀,我们闯过来了?”小不点惊讶,以为危机在前方,不曾想就是那片寸草不生之地。
,免费🔞美女❌❌❌涂抹,学长边洗澡边🌿我啊~嗯~,绫华被扒开腿灌满白浆。04月25日,中新健康|农业农村部:将采取一系列措施 促进营养健康消费,
仿若回到了上古年间,聆听到了诸神的吟唱。
,不知火舞裸乳被爆❌白浆的漫漫画,男人扒开腿㊙️打扑克免费视频,捆绑女裸网。时事3:小医仙玉足抽搐泄欲h
04月25日,亿元重奖!伊利2023年年会圆满举行,御风踏浪拥抱美好2024,
“他刚出生时就拥有双瞳,这是上古圣人、神人的特征,注定要冠绝当世,与他生在一个时代,是很多同辈人的悲哀。”
,猛男白袜打✈️网站,日本❌❌❌❌❌色情40/,刘月黑人做爰XXXⅩ性高。04月25日,“天命人”山西古迹力战妖魔 “移动战神”密织5G网络助力游客畅游,
小孤山镇的祭灵尽管激烈反抗,符文交织,但终究还是被这头金毛狮子拍碎了,溅起一片灿烂的血,被凶兽一口吞掉。
,叶山小百合被部长欺负了是哪几集,《女员工的滋味》3在线观看,啊灬啊灬啊灬快灬潮喷了红桃视频。时事4:女性裸体㊙️无遮放屁网站
04月25日,龙年春晚扎堆官宣,谁是你的菜?,
“来,大叔特意给你熬了罐兽奶,喝吧。”一个胡子拉碴的中年人凑了过来。
,四人混战沈娜娜,微信卖偷拍片➕v,小舞被打屁屁拨开乳房。04月25日,浙江杭州:年轻人盛装过“汉服节”,
借这次集中培训的机会,我向各位干部提X点要求和希望。
,玖辛奈裸体被❌免费羞羞动漫,H+晨勃+憋尿+硬了+嗯啊,无码激情18🈲️激情视频软件。责编:洪波
审核:柴发合
责编:李林林