返回快訊

數字人公司Tavus發佈Phoenix-4.5實時人體渲染模型

數字人公司Tavus推出Phoenix-4.5,自稱市場上最快、最富表現力的實時人體渲染模型,面部動畫更豐富,情緒與微動更明顯,動作延伸至上半身,並稱這是人工智能最接近面對面通過圖靈測試的一次。

公司白皮書寫:從音頻到視頻時延134毫秒,較其所稱市面其他模型快約25%,並生成完整幀而非只畫臉,實時約40幀。渲染對象從“一張臉”擴到頭、肩、姿態與軀幹同步的PAL。內部測試中,Phoenix-4上訓練失敗的人臉有64%在4.5上成功。對比表顯示音視語音識別與感知差值上升,FID與FVD下降。模型被描述爲高斯-擴散架構,可在十餘種情緒狀態間切換,避免循環錄像式點頭。

Tavus將渲染層與感知模型Raven、對話輪次模型Sparrow一起出售,接口定位爲可嵌入應用的面對面視頻代理。早期Phoenix用一兩分鐘視頻生成替身,結合音文驅動的三維模型、體渲染與二維生成網絡。圖靈測試式表述是營銷句,不是第三方雙盲實驗結論。

實時數字人的競爭點從“像一張照片”轉到“說話時肩膀會不會一起動、聽的時候會不會點頭錯拍”。134毫秒把對話從可感知延遲推進到接近視頻通話體感,客服、銷售與教育場景纔可能把循環片段換成生成幀。

市場機制上,這是接口訂閱,不是電影級離線渲染。買方是要在視頻通話裏放一張會動的臉的產品團隊;賣方是把時延和表情做成API的Tavus。受益方是已接入其會話視頻接口的應用;承壓方是仍靠預錄片段和固定口型的虛擬主播工具。資金按會話分鐘與席位流向渲染算力。

補充結構:公司未在該發佈中給出獨立實驗室的圖靈測試通過率。上半身運動仍不是全身骨骼級控制。

來源:公開信息

ABAB AI 解讀

Tavus把圖靈測試從文本聊天搬到攝像頭前。4.5的賣點不是更高分辨率,是134毫秒裏讓肩和軀幹跟着音節走。循環錄像在嚴肅話題裏會先被一張凍結的笑拆穿;生成幀把拆穿推遲。64%的失敗人臉被救活,說明迭代發生在數據與對齊,而不只在口號。感知、輪次、渲染三件套,是把“會說話的頭”做成可嵌入的操作系統。

資本路徑是把時延賣成席位。客服與銷售願意爲“看起來在聽”付費,因爲轉化率比模型基準更好講。算力花在每一幀的高斯擴散上,毛利取決於能否把40幀撐進現有視頻基礎設施。離線影視級數字人走的是另一張價目表,不跟這筆實時生意搶同一分鐘。

類比Zoom把會議從電話會議裏解放,以及早期Deepfake把臉換進視頻:通道先在,主體後被替換。行業階段是人機界面從對話框進入面部存在。誰先讓上半身可信,誰就先進入需要眼神接觸的高客單價場景。圖靈測試被用作廣告語,真正的驗收是用戶會不會在第三分鐘忘記這是模型。

結構判斷屬於技術替代發生在社交接口。機制是:信任依賴微動作;微動作一旦可生成,預錄片段失去定價權。面對面的驗收標準從像素轉向時延與協同運動,實驗室分數只是入場券。

ABAB News · 認知定律

  1. 面對面的圖靈測試,先死在一張凍結的笑上

  2. 時延掉進通話體感,循環片段才失去定價權

  3. 會說話的頭不夠,肩膀也得跟着音節走