字节跳动在AI视频赛道布下了一枚重子。彭博社9月7日援引知情人士消息报道,公司创始人张一鸣正在亲自督战一个代号机密的实时空间视频生成项目,目标是让AI生成的动态空间画面实现接近实时的响应,延迟低至50毫秒级别,帧率达到每秒20帧左右,从而支撑起沉浸式视频通话、空间社交等此前难以想象的应用形态。该项目建立在字节旗下视频生成模型Seedance的技术积累之上,被视为公司在AI视频竞争格局中至关重要的一次押注。
要理解这个项目的分量,先得看清当前AI视频生成的水平线。市面上的主流视频生成模型大多采用文生视频或图生视频模式,用户输入提示词后通常要等待几十秒甚至几分钟才能看到成片,属于典型的异步生成,难以用于实时交互。而50毫秒级别的延迟意味着画面响应速度接近人眼感知的实时阈值,AI生成的场景可以与用户的动作、语音同步变化,这是从看视频到进入视频的本质跨越。
如果把时间轴拉长,可以看到视频生成行业正沿着两条路线并行狂奔:一条是把成片质量做到影视级,服务内容生产;另一条就是把响应速度压到实时,服务交互体验。字节跳动选择在后者上重注押下,赌的是实时生成一旦突破,将重新定义视频通话、远程协作与虚拟社交的底层形态,而这类场景的用户基数与商业价值,可能远超单纯的视频创作工具市场。
张一鸣亲自督战AI项目的消息并不寻常。作为字节跳动创始人,他在退出一线日常管理后,把主要精力集中在AI前沿技术研究上,此前已在多个场合表达过对AI技术突破的关切。知情人士透露,此次实时空间视频项目直接向他汇报,团队在算力、人才与数据资源上获得倾斜,研发节奏明显加快,这被解读为字节最高层对AI视频战略地位的确认。
字节的紧迫感并非空穴来风。在生成式视频的全球竞赛中,头部厂商纷纷加大投入,实时生成被视为决定下一代产品形态的分水岭。字节此前凭借Seedance等模型在内容创作侧建立了优势,日活用户规模可观,但如果不能在实时交互这一前瞻方向上抢先卡位,现有优势可能在技术代际切换中被稀释。由创始人亲自督战,等于向团队和外界传递了不达目标不罢休的信号,也让这个项目在字节内部的优先级跃升至最高档。
外界普遍认为,字节跳动在AI上的组织决心一直不小,从大模型到视频生成再到具身智能,均有成建制的团队与专项投入。此次实时空间视频由创始人层面直接过问,意味着项目不仅能调动公司最强的算法与工程资源,还有望与抖音、飞书等核心产品的场景打通,一旦技术成熟,落地路径可能比外界想象的更短。
从技术路径看,实时空间视频生成的难点集中在三处:一是生成速度,现有扩散模型完成单帧图像需要消耗大量算力,压缩到毫秒级需要架构层面的革新;二是时序一致性,动态画面必须保证物体运动连贯、空间关系稳定,稍有偏差就会出现闪烁与畸变;三是算力成本,实时生成对推理资源的需求远高于异步生成,如何把单次生成成本压到可商用水平,是所有玩家共同面对的难题。
字节并非从零起步。Seedance系列模型在视频生成质量与运动控制上已有积累,字节还握有海量短视频数据与强大的推荐算法工程能力,这些都可能成为实时模型的训练与优化底座。不过有技术人士提醒,从异步生成跨越到实时生成不是简单堆算力就能解决,模型架构与推理引擎都需要针对性重构,50毫秒的目标能否如期达成,仍要看团队在扩散蒸馏、缓存复用与硬件协同上的实际进展。
值得参考的是,行业内已有团队在视频生成加速上取得阶段性突破,通过把高频画面元素缓存复用、让模型只渲染变化区域等方式,将单帧生成成本显著压低。字节的工程师文化向来强调工程效率与极致优化,若能把这类技术沉淀与Seedance的画质优势结合,实时空间视频的体验上限值得期待,当然这一切的前提是模型质量不能被速度牺牲太多。
截至发稿,字节跳动官方尚未对报道作出回应,也没有公布任何商用时间表,项目仍处于研发验证阶段。但资本市场与开发者社区的讨论已经升温,不少人认为,实时空间视频一旦成熟,将直接冲击现有的视频通话软件、直播平台甚至远程协作工具的市场格局,也会给内容创作者带来全新的表达方式,一次技术升级可能重塑整条产业链的价值分配。
对普通用户而言,这个项目的意义或许可以概括为一句话:视频生成正在从等结果变成即时呈现。当AI能够以接近实时的速度理解指令并生成连贯的空间画面,人与机器的交互方式将翻开新的一页。字节跳动此番押注的不仅是技术领先,更是下一代人机交互的入场券,而张一鸣的亲自坐镇,让这场豪赌的分量又重了几分。接下来值得关注的,是这项技术何时走出实验室,以及它会率先改变哪个行业。
对开发者与创业者而言,实时空间视频的想象空间同样巨大,从虚拟主播的即时形象驱动,到远程医疗中的立体示教,再到游戏里的动态场景生成,低延迟的AI视频能力可能成为众多新应用的公共底座。而一旦字节率先跑通并开放平台能力,围绕它生长的第三方生态,或许会成为比产品本身更值得期待的长尾价值。