大象新闻记者 李莉 张迪驰
6月3日,京东晓谕开源JoyAI-Echo长音视频生成框架。JoyAI-Echo惩处了行业三大痛点:脚色难踏实一致、音色变化难扫尾、视频生成速率慢,杀青了长视频生成“又快又好”。此外,JoyAI-Echo的“边聊边改”口头,让视频创作从 "静态生成" 造成 "动态结合"。

JoyAI-Echo在种种视频创作、数字东说念主直播、品牌营销、素质和游戏本色分娩等范畴有宏大的哄骗后劲,它的推出,符号着京东在长视频生成范畴杀青重要突破,进入群众第一梯队。
四大时期革命 惩处长视频生成三浩劫题
在AI视频范畴,十几秒短视频的生成质地越来越练习,但行业头疼的瓶颈照旧存在:难以向分钟级长视频突破。AI视频一但拉到这一时长,就会出现以下问题:并吞个脚色,在不同镜头里长得不相通;语言东说念主的音色忽高忽低以致短暂变声;生成速率慢到离谱,等几分钟以致半小时能力出扫尾。
以上问题,径直导致 AI 长视频停留在 "玩物" 阶段,很难真确干预分娩、创造价值。JoyAI-Echo 的出现,透澈冲突这个僵局。JoyAI-Echo 有四项时期革命:
一是跨模态音视频牵记库,让脚色再也不 "变脸"。这亦然JoyAI-Echo 最关键的突破。模子框架内置了一个成心的牵记库,能在多镜头生成过程中,执续保存并调用脚色的外不雅特征和语言东说念主音色信息。在长达 5 分钟的视频里,天博体育(TianboSports)官网脚色身份、视觉形象和声息音色王人能保执高度一致,再也不会出现 "并吞个东说念主演着演着造成另一个东说念主" 的纷扰情况。
二是牵记运行后锻真金不怕火,速率径直提高 7.5 倍。研发团队革命提倡了牵记运行后锻真金不怕火进程,纠合 SFT、跨模态 RLHF 和 Distribution Matching Distillation(DMD)时期,大幅提高了生成质地,更杀青了惊东说念主的推理加快。
开云体育app2026世界杯官方下载其中,仅 DMD 一项时期就带来了约 7.5 倍的速率提高,让长视频生成从 "等半天" 造成 "秒出片"。
三是加入智能 "导演助理"——Director Agent,手机百家家乐app下载让长视频第一次杀青 "对话式裁剪"。JoyAI-Echo 不再是 "输入指示词,一次性出扫尾" 的传统器用。你用当然语言说需求,它会自动帮你拆分红脚本、脚色、场景和镜头。那儿不逍遥,径直用对话的模样告诉它修改,它只从头生成有问题的局部镜头,毋庸重跑整条视频,让长视频创作从 "静态生成" 造成了 "动态结合"。
四是轻量化及时超分,高清输出不卡顿。为了满足专科本色分娩的需求,JoyAI-Echo 配套了成心的及时超分模块,守旧两档折柳率提高(736×1280 → 1152×1920,736×1280 → 1472×2560)。模块通过单步超分就能生成高折柳率视频和良好化音频,即使在流式蔓延的拘谨下,也能保执踏实的高清理会。
各项主义全面逾越行业 “AI 长视频时期"到来
为了客不雅评估 JoyAI-Echo 的性能,研发团队基于 100 个故事、3000 个镜头构建了长音视频生成评测集,从多个维度进行了全面测试。扫尾线路,JoyAI-Echo 在跨镜头一致性、视频质地、文本一致性和语音本色准确率等所有中枢主义上王人获得了逾越理会,其汉文音本色准确率更是高达0.8646,大幅逾越行业其它同类模子。
在与行业同类模子对比中,用户以为JoyAI-Echo音频质地偏好的比例为81.7%,指示词受命偏好为80.6%,视觉好意思学偏好为63.6%,IP 一致性偏好为59.4%。
JoyAI-Echo 的推出,意味着AI 视频生成的 "长视频时期"来了。它为假造故事创作和动漫制作、数字东说念主本色分娩和直播、品牌营销视频快速迭代、互动素质课件生成等范畴带来了全新可能,将大幅优化行业资本效果。JoyAI-Echo也预示着改日东说念主类不错像聊天相通百家乐IOS/安卓通用版/手机APP下载,执续创作、修改和完善长视频本色,让高一致性、高画质、可交互的视频生成,真确走进每一个本色创作家的使命进程。