京东开源JoyAI-Echo WM登顶WBench,世界模型迈入“可进入”的全模态新阶段

财闻 2026-09-09 12:26:52

它既能根据用户的移动和视角变化持续生成世界,也能同步生成720P视频、环境音、音乐和语音,并支持第一人称、第三人称及多轮连续交互,让AI生成的内容从“可以看”。

近日,京东开源实时可交互世界模型JoyAI-Echo WM,首次将这两种相对独立的能力在一套模型中打通:它既能根据用户的移动和视角变化持续生成世界,也能同步生成720P视频、环境音、音乐和语音,并支持第一人称、第三人称及多轮连续交互,让AI生成的内容从“可以看”,进一步走向“可以进入、可以操作、可以听见”的全模态新阶段。

在面向交互式世界模型的公开评测 WBench Navigation 中,测试涵盖画面质量、场景遵循、交互控制、一致性和物理合理性等多个维度。 JoyAI-Echo WM以81.6分排名第一,其中一致性达到89.8;经过四步因果蒸馏的快速版本 JoyAI-Echo WM Flash,综合得分仍以81.0分排名第二,交互能力更进一步达到87.9。两个版本包揽榜单前两名,EchoWM 已达到当前评测SOTA水平。

在另一项SANA-WM-Bench中, JoyAI-Echo WM在短程简单轨迹和困难轨迹测试中的VBench得分分别达到83.91和83.96,均为参评模型最高。这意味着,模型不仅能“听懂往哪走”,也能在连续移动和转向过程中,保持出色的视角控制和画面稳定性。

依托实时可交互的音视频世界生成能力,JoyAI-Echo WM可应用于游戏、数字人直播、具身智能训练等场景:让游戏世界随玩家操作持续变化,让互动剧情拥有更强的参与感,让数字人在直播中能够保持角色、动作与声音连贯,也为未来具身智能体在虚拟环境中的探索、交互与训练提供新的技术基础。

JoyAI-Echo WM的推出是JoyAI-Echo能力的延伸。今年6月,京东开源JoyAI-Echo长音视频生成框架,重点解决长视频中人物容易“变脸”、声音难保持一致、生成效率低等问题,让AI能够持续生成分钟级音视频内容。

此次升级至JoyAI-Echo 1.5版本,京东同步开源其中的Echo WM与长视频版本Echo-LongVideo。Echo-LongVideo支持约10分钟多镜头音视频生成,即使经过频繁转场、场景变化和新角色加入,仍能保持人物外观、声音与故事线索连贯;同步开放的Echo Director Agent还可完成故事展开、分镜规划、生成审核和成片组装。

JDD期间,京东JoyAI基础模型矩阵全面升级。目前,京东已形成覆盖语音、图像、视频、实时交互、世界建模与具身智能等方向的基础模型能力,推动AI 从数字世界迈向物理世界,全面赋能零售、物流、工业、健康等核心业务,助力京东建设全球最 大物理世界运营中心。

相关推荐
实时资讯
更多
12:55
永清环保:具备4N~7N级高纯产品的制备能力
12:54
阳光电源:已正式推出EnerNeo系列固态变压器(SST)并面向市场供货
12:54
时代变了!红果短剧日活1.68亿 超“爱优腾芒”总和
12:53
聆达股份:公司目前主营业务主要以光伏电站发电业务及光伏EPC业务为主
12:53
易事特:公司的合作商选择主要基于其技术匹配度,供应链安全及产业协同效应
12:52
理光映像:将停止现售K系列数码单反相机生产
12:52
易事特:储能业务是公司主要的业务收入来源
12:50
君正股份:目前CW240还在研发中,相关细节请关注芯片发布信息
12:50
君正股份:新能源车在智驾座舱,域控等领域的不断发展,使其对存储需求大幅增长
12:49
三星资产运用(香港)(03187)宣派普通股息 金额有待公布 9月30日派发
12:48
江波龙首次回购A股124.95万股 成交金额约4.48亿元
12:48
润中国际控股股东周年大会决议案全数通过 重选姜孝恒及吴志彬为董事
12:47
和顺石油:未来将持续加大在半导体领域的投入
12:46
IDC:GPT-6 Astra计算机操作能力首次跨越可用分界线,网络安全能力达到最高级
12:36
君正股份:MLC将在国内晶圆厂流片
12:30
君正股份:V2目前还没在量产芯片上应用
12:28
“超脑+狼族”最新全阵容亮相!京东物流打造AI具身机器人军团
12:26
京东开源JoyAI-Echo WM登顶WBench,世界模型迈入“可进入”的全模态新阶段
12:24
打造10万卡国产算力集群 推出JoyAI世界模型,京东发布物理AI建设最新成果
12:13
光弘科技:印尼光弘将为施耐德、凯斯库、库力索法等提供非手机类产品制造服务
12:55
永清环保:具备4N~7N级高纯产品的制备能力
12:54
阳光电源:已正式推出EnerNeo系列固态变压器(SST)并面向市场供货
12:54
时代变了!红果短剧日活1.68亿 超“爱优腾芒”总和
12:53
聆达股份:公司目前主营业务主要以光伏电站发电业务及光伏EPC业务为主
12:53
易事特:公司的合作商选择主要基于其技术匹配度,供应链安全及产业协同效应
12:52
理光映像:将停止现售K系列数码单反相机生产
12:52
易事特:储能业务是公司主要的业务收入来源
12:50
君正股份:目前CW240还在研发中,相关细节请关注芯片发布信息
12:50
君正股份:新能源车在智驾座舱,域控等领域的不断发展,使其对存储需求大幅增长
12:49
三星资产运用(香港)(03187)宣派普通股息 金额有待公布 9月30日派发
12:48
江波龙首次回购A股124.95万股 成交金额约4.48亿元
12:48
润中国际控股股东周年大会决议案全数通过 重选姜孝恒及吴志彬为董事
12:47
和顺石油:未来将持续加大在半导体领域的投入
12:46
IDC:GPT-6 Astra计算机操作能力首次跨越可用分界线,网络安全能力达到最高级
12:36
君正股份:MLC将在国内晶圆厂流片
12:30
君正股份:V2目前还没在量产芯片上应用
12:28
“超脑+狼族”最新全阵容亮相!京东物流打造AI具身机器人军团
12:26
京东开源JoyAI-Echo WM登顶WBench,世界模型迈入“可进入”的全模态新阶段
12:24
打造10万卡国产算力集群 推出JoyAI世界模型,京东发布物理AI建设最新成果
12:13
光弘科技:印尼光弘将为施耐德、凯斯库、库力索法等提供非手机类产品制造服务
热门文章
日排行 周排行
小米澎程N70 Pro定价20.99万元,N70 Max定价23.99万元,N90 Max定价26.99万元
财闻 09-07
1
麒麟9050 Pro芯片亮相,余承东称史上最强,连飙三个Super
财闻 09-07
2
小米一场发布四条产品线:增程汽车、自研芯片和折叠屏同时落地
财闻 09-08
3
一文看完华为秋季新品发布会亮点、笑点,文末有彩蛋!
财闻 09-07
4
星宇股份官宣处罚多名高管,免职的人力资源总监身份引发争议
财闻 09-07
5
机构:终端涨价与创新放量并行,9月旺季电子行业催化密集
财闻 09-08
6
透视上市公司合规新局,财闻董秘沙龙·苏州站举办
财闻 09-07
7
因美国劳动节 美股休市一日
财闻 09-07
8
年内233家农商行、村镇银行退出:银行“没了”,存款还安全吗?
财闻 09-08
9
超级厄尔尼诺“爆改”来袭,A股农林渔牧板块再现涨停潮!
财闻 09-08
10