数字人公司Tavus发布Phoenix-4.5实时人体渲染模型
数字人公司Tavus推出Phoenix-4.5,自称市场上最快、最富表现力的实时人体渲染模型,面部动画更丰富,情绪与微动更明显,动作延伸至上半身,并称这是人工智能最接近面对面通过图灵测试的一次。
公司白皮书写:从音频到视频时延134毫秒,较其所称市面其他模型快约25%,并生成完整帧而非只画脸,实时约40帧。渲染对象从“一张脸”扩到头、肩、姿态与躯干同步的PAL。内部测试中,Phoenix-4上训练失败的人脸有64%在4.5上成功。对比表显示音视语音识别与感知差值上升,FID与FVD下降。模型被描述为高斯-扩散架构,可在十余种情绪状态间切换,避免循环录像式点头。
Tavus将渲染层与感知模型Raven、对话轮次模型Sparrow一起出售,接口定位为可嵌入应用的面对面视频代理。早期Phoenix用一两分钟视频生成替身,结合音文驱动的三维模型、体渲染与二维生成网络。图灵测试式表述是营销句,不是第三方双盲实验结论。
实时数字人的竞争点从“像一张照片”转到“说话时肩膀会不会一起动、听的时候会不会点头错拍”。134毫秒把对话从可感知延迟推进到接近视频通话体感,客服、销售与教育场景才可能把循环片段换成生成帧。
市场机制上,这是接口订阅,不是电影级离线渲染。买方是要在视频通话里放一张会动的脸的产品团队;卖方是把时延和表情做成API的Tavus。受益方是已接入其会话视频接口的应用;承压方是仍靠预录片段和固定口型的虚拟主播工具。资金按会话分钟与席位流向渲染算力。
补充结构:公司未在该发布中给出独立实验室的图灵测试通过率。上半身运动仍不是全身骨骼级控制。
来源:公开信息
ABAB AI 解读
Tavus把图灵测试从文本聊天搬到摄像头前。4.5的卖点不是更高分辨率,是134毫秒里让肩和躯干跟着音节走。循环录像在严肃话题里会先被一张冻结的笑拆穿;生成帧把拆穿推迟。64%的失败人脸被救活,说明迭代发生在数据与对齐,而不只在口号。感知、轮次、渲染三件套,是把“会说话的头”做成可嵌入的操作系统。
资本路径是把时延卖成席位。客服与销售愿意为“看起来在听”付费,因为转化率比模型基准更好讲。算力花在每一帧的高斯扩散上,毛利取决于能否把40帧撑进现有视频基础设施。离线影视级数字人走的是另一张价目表,不跟这笔实时生意抢同一分钟。
类比Zoom把会议从电话会议里解放,以及早期Deepfake把脸换进视频:通道先在,主体后被替换。行业阶段是人机界面从对话框进入面部存在。谁先让上半身可信,谁就先进入需要眼神接触的高客单价场景。图灵测试被用作广告语,真正的验收是用户会不会在第三分钟忘记这是模型。
结构判断属于技术替代发生在社交接口。机制是:信任依赖微动作;微动作一旦可生成,预录片段失去定价权。面对面的验收标准从像素转向时延与协同运动,实验室分数只是入场券。
ABAB News · 认知定律
面对面的图灵测试,先死在一张冻结的笑上
时延掉进通话体感,循环片段才失去定价权
会说话的头不够,肩膀也得跟着音节走