YouTube正在推出一個AI頭像功能,讓創作者只需錄製自拍和語音提示就能為自己製作deepfake。該工具生成逼真的數位複製品,可以出現在8秒的Shorts影片中,完整包含創作者的外觀和聲音。使用者需要良好的照明、安靜的背景,並且必須年滿18歲且擁有現有頻道。Google將此定位為「更安全的」AI內容創作,承諾透過SynthID浮水印和C2PA認證進行清晰標記。

這次發布暴露了平台對合成內容的精神分裂式態度。YouTube在與deepfake詐騙和AI垃圾內容鬥爭的同時,積極建構讓數百萬人都能接觸deepfake的工具。時機很能說明問題——這正好在OpenAI殺死Sora之後推出,留下了Google急於填補的消費者影片生成空白。但民主化deepfake技術引發了關於驗證和信任的明顯問題,當任何人都可以字面意思上給自己嘴裡放話時。

更廣泛的deepfake生態系統揭示了這項技術已經變得多麼正常化。多個來源顯示,deepfake創建工具已經在Android、iOS和桌面平台上廣泛可用,由GAN驅動,可以用最少的技術知識令人信服地交換面孔和聲音。YouTube正在做的並不是革命性的——它是在將幾年前還處於地下的能力主流化。

對開發者來說,這標誌著產業的發展方向:合成媒體作為預設功能,而不是邊緣案例。像C2PA這樣的認證標記雖然用意良好,但實際上毫無用處——它們很容易被惡意行為者剝離和忽略。如果你在建構內容平台或驗證系統,請為一個區分真實和合成變得指數級困難的世界做好準備,無論Google對負責任部署做出什麼承諾。