Stability AI与Arm合作 移动设备离线音频生成技术大突破

AI快讯4个月前发布 niko
7 0
AiPPT - 一键生成ppt

Stability AI与Arm携手推动移动音频生成变革 :以Stable Diffusion闻名的StabilityAI,此次与半导体巨头Arm合作,致力于将生成音频人工智能能力带入移动设备领域。合作成果显著,Stable AUdio Open模型可完全在ArmCPU上运行,让用户在移动设备上无需互联网连接,就能快速生成音效、音频样本等制作元素。

满足创作需求与效率提升 :随着生成性人工智能在企业和专业创作者中应用渐广,StabilityAI认为确保模型和工作流程在各创作领域便捷使用至关重要,这既提升创作效率,也利于技术融入视觉媒体制作流程。为满足不断增长的需求,公司着力提高模型在边缘设备上的运行效率。

技术优化实现音频生成飞跃 :在优化Stable Audio Open模型以适配移动设备时,初始测试在ArmCPU设备上生成音频需240秒。通过对模型的蒸馏处理,借助Arm的软件栈,特别是XNNPack的KleidiAI中的int8矩阵乘法内核,成功将生成11秒音频片段的时间缩短至8秒,响应速度提升30倍。

广泛可及与未来展望 :用户需兼容的移动设备体验此功能,鉴于多数智能手机配备Arm架构CPU,该技术对各类用户更易获取。未来,StabilityAI计划将图像、视频和3D领域的所有模型都应用于边缘设备,改变移动设备上的视觉媒体创作方式。

© 版权声明
Trea - 国内首个原生AI IDE