京东开源图像模型,实测AI如何能真正“看懂”空间

新京报
136次浏览

用AI做图、修图时,大众经常会遇到一些难题:想把图中的杯子挪个位置,结果杯子变形了;想换个视角看看画面,透视却完全不对;想调整两个物体的前后位置,也会出现遮挡混乱、比例失衡……16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

4月8日,记者从京东获悉,京东探索研究院近日正式开源了自研的JoyAI-Image-Edit图像模型,以解决上述难题。京东探索研究院称该模型是业内首个把“空间智能”刻进骨子里的开源模型,让AI终于能真正“看懂”空间、“编辑”空间,从原来的平面修图,升级成了三维空间重塑,而且模型的推理代码全部开放,开发者能直接拿来做应用。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

官方资料显示,JoyAI-Image-Edit贴合真实世界空间规律,从空间位置关系、多视角一致性、相机感知到场景推理等维度全面建模,实现了相机坐标视角变换、物体空间位移旋转、几何结构精准控制等多项空间编辑技术突破,将空间认知能力深度融入文本与图像生成流程,搭建了完整的空间理解数据与任务体系。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

全面兼容15类通用编辑能力擅长长文本精准渲染16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

具体而言,该模型打破了AI“理解图像”和“生成图像”的壁垒,让AI不仅能生成逼真的图像外观,更能精准理解图像背后的空间结构,在编辑过程中稳定保持主体形象与场景结构完整,多视角空间布局高度一致。不管是移动物体、换视角,还是调整物体间的关系,都能保持场景的几何规律,遮挡、光影也都自然合理,不会再出现变形、错乱的情况。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

京东探索研究院相关负责人对新京报贝壳财经记者表示,JoyAI-Image-Edit的核心跃升,在于其攻克了此前开源模型难以逾越的空间理解难题,具备三大辨识度高的空间编辑能力:视角变换——用户可通过自然语言指定相机的偏航角、俯仰角及缩放程度,模型在保持场景几何一致性的前提下生成新视角图像;空间漫游——支持连续的视角移动,生成在空间中逻辑连贯的多视角图像序列,类似于在三维场景中“走动”;物体空间关系操控——在保持场景整体结构稳定的前提下,对特定物体进行位移、缩放等空间变换,同时确保遮挡与光影关系自然合理。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

在实现空间级突破的同时,JoyAI-Image-Edit全面兼容15类通用编辑能力,深度覆盖内容创作的高频需求。无论是物体的替换、删除、添加,还是整体风格迁移、细节精修等操作,模型均实现了高性能覆盖。结合顶尖的空间编辑技术,模型在长文本精准渲染、多视角一致性生成等行业高难度任务中表现卓越,真正做到了全场景、无死角的高效创作。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

京东高级副总裁何晓冬在接受新京报贝壳财经记者采访时表示,通用人工智能有两个方向要走,一个方向是多模态,大模型必须具有视觉能力,未来甚至可以更进一步延伸向嗅觉、触觉;另外一个方向是走向具身智能,包括机器人、机械臂、无人车等,让通用人工智能走向物理世界。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

重点应用于具身智能领域模型还将探索多种场景16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

应用层面,JoyAI-Image-Edit模型可广泛应用于电商内容生产、创意设计制作、智能图像处理、3D模型重建、具身智能视觉感知等多元领域,大幅提升AI图像技术在复杂空间场景中的适配性与实用性。尤其是在具身智能领域,空间理解能力是机器人“理解世界”的核心基础,而该模型的推出,也为相关技术研发提供了关键的底层能力。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

具身智能相关测试图。受访者供图16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

在具身智能实测领域,演示效果显示:用户仅需输入自然语言提示词(如“机器人左手举起来”),并通过画框框选目标区域,即可对指定物体的动作、姿态、旋转角度进行精细化操控。在机器人做家务的实拍场景中,模型在完整保留背景环境、物体空间关系与物理合理性的前提下,生成了机器人抬手的全新姿态。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

2025年,京东在具身智能领域完成关键布局。其依托JoyAI大模型底层能力,正式推出JoyInside“附身智能”解决方案,面向智能家电、机器人等终端硬件植入高情商交互系统,将AI的认知与情感能力深度嵌入硬件终端,实现更贴合人类习惯的自然交互。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

此后,京东持续探索具身智能生态建设。一方面,围绕JoyInside平台迭代技术版本,升级语音、多模态感知等核心能力;另一方面,加快产业落地,通过开放接口、合作开发等模式,与多家家电及机器人企业达成合作,推动具身智能技术在家庭陪伴、日常服务等场景的规模化应用。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

京东探索研究院相关负责人称,此次JoyAI-Image-Edit的开源,是京东在AI多模态模型领域的重要布局,让AI图像编辑实现了从平面到空间的大跨越。未来该模型还将持续落地更多场景,不断探索空间智能落地价值。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

用AI做图、修图时,大众经常会遇到一些难题:想把图中的杯子挪个位置,结果杯子变形了;想换个视角看看画面,透视却完全不对;想调整两个物体的前后位置,也会出现遮挡混乱、比例失衡……16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

4月8日,记者从京东获悉,京东探索研究院近日正式开源了自研的JoyAI-Image-Edit图像模型,以解决上述难题。京东探索研究院称该模型是业内首个把“空间智能”刻进骨子里的开源模型,让AI终于能真正“看懂”空间、“编辑”空间,从原来的平面修图,升级成了三维空间重塑,而且模型的推理代码全部开放,开发者能直接拿来做应用。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

官方资料显示,JoyAI-Image-Edit贴合真实世界空间规律,从空间位置关系、多视角一致性、相机感知到场景推理等维度全面建模,实现了相机坐标视角变换、物体空间位移旋转、几何结构精准控制等多项空间编辑技术突破,将空间认知能力深度融入文本与图像生成流程,搭建了完整的空间理解数据与任务体系。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

全面兼容15类通用编辑能力擅长长文本精准渲染16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

具体而言,该模型打破了AI“理解图像”和“生成图像”的壁垒,让AI不仅能生成逼真的图像外观,更能精准理解图像背后的空间结构,在编辑过程中稳定保持主体形象与场景结构完整,多视角空间布局高度一致。不管是移动物体、换视角,还是调整物体间的关系,都能保持场景的几何规律,遮挡、光影也都自然合理,不会再出现变形、错乱的情况。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

京东探索研究院相关负责人对新京报贝壳财经记者表示,JoyAI-Image-Edit的核心跃升,在于其攻克了此前开源模型难以逾越的空间理解难题,具备三大辨识度高的空间编辑能力:视角变换——用户可通过自然语言指定相机的偏航角、俯仰角及缩放程度,模型在保持场景几何一致性的前提下生成新视角图像;空间漫游——支持连续的视角移动,生成在空间中逻辑连贯的多视角图像序列,类似于在三维场景中“走动”;物体空间关系操控——在保持场景整体结构稳定的前提下,对特定物体进行位移、缩放等空间变换,同时确保遮挡与光影关系自然合理。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

在实现空间级突破的同时,JoyAI-Image-Edit全面兼容15类通用编辑能力,深度覆盖内容创作的高频需求。无论是物体的替换、删除、添加,还是整体风格迁移、细节精修等操作,模型均实现了高性能覆盖。结合顶尖的空间编辑技术,模型在长文本精准渲染、多视角一致性生成等行业高难度任务中表现卓越,真正做到了全场景、无死角的高效创作。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

京东高级副总裁何晓冬在接受新京报贝壳财经记者采访时表示,通用人工智能有两个方向要走,一个方向是多模态,大模型必须具有视觉能力,未来甚至可以更进一步延伸向嗅觉、触觉;另外一个方向是走向具身智能,包括机器人、机械臂、无人车等,让通用人工智能走向物理世界。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

重点应用于具身智能领域模型还将探索多种场景16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

应用层面,JoyAI-Image-Edit模型可广泛应用于电商内容生产、创意设计制作、智能图像处理、3D模型重建、具身智能视觉感知等多元领域,大幅提升AI图像技术在复杂空间场景中的适配性与实用性。尤其是在具身智能领域,空间理解能力是机器人“理解世界”的核心基础,而该模型的推出,也为相关技术研发提供了关键的底层能力。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

具身智能相关测试图。受访者供图16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

在具身智能实测领域,演示效果显示:用户仅需输入自然语言提示词(如“机器人左手举起来”),并通过画框框选目标区域,即可对指定物体的动作、姿态、旋转角度进行精细化操控。在机器人做家务的实拍场景中,模型在完整保留背景环境、物体空间关系与物理合理性的前提下,生成了机器人抬手的全新姿态。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

2025年,京东在具身智能领域完成关键布局。其依托JoyAI大模型底层能力,正式推出JoyInside“附身智能”解决方案,面向智能家电、机器人等终端硬件植入高情商交互系统,将AI的认知与情感能力深度嵌入硬件终端,实现更贴合人类习惯的自然交互。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

此后,京东持续探索具身智能生态建设。一方面,围绕JoyInside平台迭代技术版本,升级语音、多模态感知等核心能力;另一方面,加快产业落地,通过开放接口、合作开发等模式,与多家家电及机器人企业达成合作,推动具身智能技术在家庭陪伴、日常服务等场景的规模化应用。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

京东探索研究院相关负责人称,此次JoyAI-Image-Edit的开源,是京东在AI多模态模型领域的重要布局,让AI图像编辑实现了从平面到空间的大跨越。未来该模型还将持续落地更多场景,不断探索空间智能落地价值。16f速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

本文链接:http://m.sushuapos.com/show-2-15970-0.html京东开源图像模型,实测AI如何能真正“看懂”空间

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

热门文章

延伸阅读

相关阅读

南财观察|两会热议预制菜:广东如何打造产业新优势?
南方财经全媒体记者高慧超 实习生卢秀颖 卢诗文 北京报道预制菜再度成为两会代表委员热议的焦点。尽管各种关于预制菜的争议仍在继续,但并不妨碍预制菜在龙年春节登上年夜饭饭桌,线
南财对话|全国政协委员连玉明:打造数据要素“三级市场”,加快构建数据资产核算和入表制度
21世纪经济报道 记者郑雪 张雅婷 北京、广州报道“只有政府‘看得见的手’与市场‘看不见的手’形成合力并实现平衡,才能稳妥、有效地促进数据要素市场持续健康发展。”2024年全国两
全国政协委员白重恩:中央财政仍有加杠杆的空间,应缓解地方财政压力和增加居民消费
21世纪经济报道记者 周潇枭 北京报道 政府工作报告指出,要强化宏观政策逆周期和跨周期调节,继续实施积极的财政政策和稳健的货币政策,加强政策工具创新和协调配合。积极的财政政策要适
南财记者直击第二次部长通道 五位部长回应社会关切
21世纪经济报道记者 缴翼飞 北京报道3月8日,十四届全国人大二次会议第二场“部
北汽集团称“在韩国高阳建厂”信息不实
  中新经纬3月8日电 7日晚,北汽集团官方微博发布声明称,“在韩国高阳建厂”的相关报道不实。  声明显示,北汽集团发现部分韩国媒体发布了关于“北汽和韩国高阳市签订合作备忘录,在韩国高阳市建立年产20万台电动车厂”
全国人大代表、中天科技集团董事长薛济萍:建议加大政策性开发性金融工具对南通交通枢纽重点项目支持力度
21世纪经济报道记者张梓桐 上海报道全国两会进行时,围绕区域交通的话题得到代表、委员的热议。在这其中,南通综合交通枢纽正在加快新出海口建设。2019年“规划建设南通通州湾长江集装

热点精选

最新推荐

您可能感兴趣