首页 > 快讯 > 期待 Qwen3-Omni 面世：端侧多模态模型迭代，PR 已加入 Transformers 框架

期待 Qwen3-Omni 面世：端侧多模态模型迭代，PR 已加入 Transformers 框架

发布时间：2025-09-22 11:17:45 | 责任编辑：张毅 | 浏览量：2 次

阿里巴巴云 Qwen 团队的最新跨模态模型 Qwen3-Omni 预计即将正式发布。据可靠消息，该模型已向 Hugging Face 的 Transformers 库提交了支持 PR，标志着这一端到端多模态 AI 系统的开源集成即将实现。这一进展基于 Qwen 系列的持续迭代，旨在进一步提升模型在资源受限设备上的部署效率。
Qwen3-Omni 是 Omni 系列的第三代产品，该系列以其端到端架构著称，能够无缝处理文本、图像、音频和视频等多种输入模态，并生成文本和语音输出。与前代模型类似，它采用 Thinker-Talker 双轨设计:Thinker 负责多模态输入的理解和高层表示生成，而 Talker 则实时合成自然语音。这种架构确保了模型在训练和推理过程中的高效流式处理，特别适用于实时交互场景。

这是一篇关于Qwen3-Omni 即将登场:端侧跨模态模型再升级，PR 已提交 Transformers 库的文章，内容值得关注。

©️版权声明：
本网站(https://aigc.izzi.cn)刊载的所有内容，包括文字、图片、音频、视频等均在网上搜集。
访问者可将本网站提供的内容或服务用于个人学习、研究或欣赏，以及其他非商业性或非盈利性用途，但同时应遵守著作权法及其他相关法律的规定，不得侵犯本网站及相关权利人的合法权利。除此以外，将本网站任何内容或服务用于其他用途时，须征得本网站及相关权利人的书面许可，并支付报酬。
本网站内容原作者如不愿意在本网站刊登内容，请及时通知本站，予以删除。