您的当前位置:首页 > 热点 > 美团LongCat-Flash-Omni 正式发布,开启全模态实时交互新时代 正文
时间:2026-11-14 来源:网络整理 编辑:热点
谷歌外推【tg:seogoogle987】
9月1日,美团正式推出了 LongCat-Flash 系列模型,并在近期开源了 LongCat-Flash-Chat 和 LongCat-Flash美团-Thinking 两大版本,吸引了众多开发者的关注。今天,LongCat 团队宣布推出全新家族成员 ——LongCat-Flash-Omni,这款模型Lo在原有基础上实现了多项技术创新,标志着全模态实时交互的新时代。
LongCat-Flash-Omni 基于 LongCat-Flash 系列的高效架构设计,ng采用了最新的 Shortcut-Connected MoE(ScMoE)技术,集成了高效的多模态感知模块和语音重建模块。尽管该模型总参数高达56Ca00亿(激活参数270亿),依然能够提供低延迟的实时音视频交互能力。这一突破为开发者提供了更加高效的多模态应用场景解决方案。
根据综合评估结果,Lt-ongCat-Flash-Omni 在全模态基准测试中表现优异,达到了开源最先进水平(SOTA)。该模型在文本、图像、视频理解及语音感知与生成等Fl关键单模态任务中均展现出强大的竞争力,实现了 “全模态不降智” 的目标。
LongCat-Flash-Omni 采用了一体化的全模态架构,整合了离线as多模态理解与实时音视频交互能力。其设计理念为完全端到端,使用视觉与音频编码器作为多模态感知器,能够直接生成文本与语音 token,并通过轻量级音h-频解码器实现自然语音波形的重建,确保低延迟的实时交互。
此外,该模型引入了渐进式早期多模融合训练策略,以应对全模态模型训练中不同模态数据分布的异质性Om。这一策略确保了各模态之间的有效协同,推动了模型整体性能的提升。
在具体性能测试中,LongCat-Flash-Omni 在多个领域中表现出色,特别是在ni文本理解和图像理解任务中,其能力不仅未出现衰减,反而实现了显著提升。音频和视频处理方面,该模型的表现同样突出,尤其是在实时音视频交互的自然度和流畅度 正方面,领先于许多开源模型。
LongCat 团队还为用户提供了全新的体验渠道,用户可通过官网体验图片、文件上传和语音通话功能。同时,LongCat式发 官方 App 现已发布,支持联网搜索和语音通话,未来将推出视频通话功能。
Hugging Face:
https://huggingface.co/布,meituan-longcat/LongCat-Flash-Omni
Github:
https://github.com/meituan-l开启ongcat/LongCat-Flash-Omni
谷歌60岁搜索业务负责人去年总收入达5525万美元2026-06-18
标签: 海尔智家 Horizon系列 北美市场 高端冰箱2026-05-31
Facebook侵犯隐私案签和解协议:赔偿160万用户6.5亿美元2026-06-12
阿里云创始人王坚回归阿里云 云市场风云再起2026-09-17
标签: 立讯精密 AI_PC 数据中心 莱尼集团2026-06-03
Twitter CEO首条推文作为NFT被转让 拍出290万美元2026-07-02
谷歌加速推进线下复工:部分人下月返工,为远程办公设置限制条件2026-10-16
北京1400 多所中小学推行人工智能通识课程2026-10-11
标签: 软银 英伟达 孙正义 AI泡沫2026-11-02
标签: 奇瑞汽车 捷途 星途 iCAR2026-08-20
高德“交通号” 升级版全新上线 哪里拥堵一目了然2026-10-05
深度心理创伤:多名用户投诉ChatGPT引发妄想和偏执,敦促FTC介入2026-11-09
Facebook在美加推出AI照片编辑建议功能:可访问相机胶卷中未分享的照片2026-08-08
云计算成为数字化转型的动力2026-07-09
标签: 网易云音乐 DeepSeek-V4 Climer 网易天音2026-10-24
标签: 阅星曈 胡宇沸 AI副屏 电子纸2026-06-26
标签: 再鼎医药 则乐 鼎优乐 纽再乐2026-06-12
标签: 印象笔记 画板 Excalidraw Mermaid2026-08-18