8月5日消息,京东正式开源自研实时流式视频编辑模型JoyAI-Video-Edit,打破传统视频先成片再剪辑的固有模式,实现播放画面同步实时修改,在流式实时视频编辑方向的各项指标全面领先,达到世界一流水平。

依托JoyAI基础大模型底座,设备在720P分辨率下可稳定实现30帧实时运算,画面处理无明显延迟卡顿,适配常规视频播放同步修改需求。

京东开源JoyAI-Video-Edit模型!实现视频边播边改:综合性能全球领先

模型摒弃行业只能剪辑短视频片段的短板,支持超长视频不间断流式处理,可实时更换人物着装、实体物件、整体场景与画面艺术风格。

在OpenVE-Bench专业评测数据库中,该模型整体表现超越SANA Streaming、LiveEdit等海外主流流式编辑模型,全局风格转换、局部物体增减、字幕智能修改优势突出,实时出图画质可对标离线专业剪辑模型。

商用场景可用于电商直播实时切换展示商品、模特穿搭,家装设计快速替换家具样式与整体装修风格,影视前期拍摄即时调整场景与人物造型,有效降低实景重拍带来的资金与时间成本。

京东开源JoyAI-Video-Edit模型!实现视频边播边改:综合性能全球领先

工业场景可批量生成机器人训练数据集,真人实操视频能够一键转化为机械臂作业素材,灵活更换场景与设备外观,低成本补足高危、冷门工况的训练素材缺口。

此次开源补齐JoyAI全系列模型的实时视频编辑能力,搭配JoyAI-Image-Edit、JoyAI-Echo、JoyAI-VL-Interaction等模型,完整覆盖图像创作、长音视频处理、实时交互、语音合成、机器人动作控制全链路AI能力。

目前,JoyAI-Video-Edit模型已在Hugging Face和GitHub平台开源,开发者与内容创作者可获取模型自主部署调试或进行功能二次开发。

【本文来源:快•科技】