<div id="readability-page-1"><blockquote> 夢晨 克雷西 發自 凹非寺 量子位 | 公眾號 QbitAI </blockquote> Sora 新視頻，變成 “抖音獨佔” 了。 悄無聲息，OpenAI 正式殺入 TikTok，加上洗腦配樂直接讓人刷到停不下來，瘋狂引流吸粉中： 短短 4 天，漲粉 10 萬，50 萬贊——這還是不打槍不宣傳的情況下。 這以後，人類創作者還怎麼玩？ <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/b39902a968d5b9850fe0ab1bf31dba9a.jpeg?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="1706" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/b39902a968d5b9850fe0ab1bf31dba9a.jpeg"/> 在 OpenAI 剛開的 TikTok 認證帳號上，悄然更新了不少全新生成視頻。 每一個都很有特點，同樣引發各路熱議。 來感受一下： <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/1f86f032afe1222dc9fb8be467f4f0ed.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="558" height="962" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/1f86f032afe1222dc9fb8be467f4f0ed.png"/> a16z 合夥人驚呼，如果這是在信息流裏刷出來的，絕對分不出真假。 <blockquote> 我看過很多 AI 視頻了，但這一條感覺到了轉折點。 </blockquote> <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/6eb248803e9ac8f2afb03602ecff673c.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="408" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/6eb248803e9ac8f2afb03602ecff673c.png"/> 來到真實的短視頻消費場景中，就更顯 Sora 與競品代差明顯：太逼真，以至於要特別聲明不是真的。 OpenAI 可太擔心 AI 視頻被當真引起不好影響了，不遺餘力的以各種方式提醒 “這是假的！這是假的！”。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/b39821e4ec1331b9bf2128db01255e97.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="1837" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/b39821e4ec1331b9bf2128db01255e97.png"/> 網友開始發出這樣的預警： <blockquote> 從現在開始，你在網上看到的一切都是值得懷疑的，不要相信你的眼睛。 </blockquote> <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f194cd16549dd4350a11062b14457b3d.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="405" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f194cd16549dd4350a11062b14457b3d.png"/> 有句老話叫 “互聯網時代，沒有人知道你是一條狗”。 現在正式升級成 “Sora 時代，沒有人知道你是一條不存在的狗”。 直接搞得不少短視頻創作者心態爆炸，要退坑了。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f8d05505e9090bb1d4a3f1df3328638b.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="518" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f8d05505e9090bb1d4a3f1df3328638b.png"/> 甚至連平台本身都被降維打擊。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/80832658767d0f23a023881ee277b8a2.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="406" height="456" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/80832658767d0f23a023881ee277b8a2.png"/> 全球估值第一的獨角獸字節跳動，與剛剛躍升第三位的 OpenAI 之間，似乎正醖釀着一場對決。 UGC 王者和 AIGC 新貴之間，終有一戰。 實際上，在 Sora 一夜爆火之前，字節內部並不缺乏 AI 視頻技術。 甚至其中一款Boximator還被傳成是 “中國版 Sora”。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/1ce898f8fa6fd4bde7962076bd22e7f0.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="530" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/1ce898f8fa6fd4bde7962076bd22e7f0.png"/> 在 Sora 發佈之前 Boximator 的論文就已經公佈，由字節 AI 實驗室總監李航領銜。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/ce55e87a34a09129b69dccd201fcd351.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="416" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/ce55e87a34a09129b69dccd201fcd351.png"/> 其實 Boximator 的功能並非根據純文字生成視頻，而是按照文字提示將靜態圖片動態化。 它以字節去年 11 月推出的PixelDance為基礎模型，加入了新的動作設定方式—— 從圖像中框選物體，然後設置運動終點或直接繪製軌跡，就能對動態效果進行精細控制。 形式上，Boximator 作為一個插件，與現有的視頻擴散模型結合使用，通過凍結基礎模型的權重，僅訓練控制模塊來實現這一功能。 比如，通過框框畫畫，讓小哈基米按照一定的軌跡追着球跑。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/9fd04f8fd02e0c004b07404522a59f26.gif?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="486" height="272" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/9fd04f8fd02e0c004b07404522a59f26.gif"/> 效果上，雖然也有 bug（飄走的雨傘沒有傘柄），但與 Pika 1.0（中）和 Gen-2（右）相比，Boximator 的動畫明顯更加完整，也更接近文字提示。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/11dcae6df59a38b7d07c48e344f966d6.gif?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="482" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/11dcae6df59a38b7d07c48e344f966d6.gif"/> 從材質和物理效果上看，也是 Boximator 更勝一籌。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/e25a74dd0c1a0af4956d46128b23ac81.gif?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="232" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/e25a74dd0c1a0af4956d46128b23ac81.gif"/> 技術層面，從架構上看，Boximator 在視頻擴散模型的每個空間注意力塊中增加了一個新的自注意力層，用於處理由對象 ID、硬/軟標誌和邊界框座標編碼的控制 token。 為了簡化學習 “框 - 對象” 關聯的挑戰，Boximator 在訓練過程中還採用了一種稱為自跟蹤（self-tracking）的技術。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/5bfb01d644c8cb849d6ed610cc3c72b5.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="700" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/5bfb01d644c8cb849d6ed610cc3c72b5.png"/> 那麼 Boximator 到底算不算 “字節版 Sora”？ 字節對此傳聞，以闢謠的姿態來回應： <blockquote> Boximator 是視頻生成領域控制對象運動的技術方法研究項目，目前還無法作為完善的產品落地，距離國外領先的視頻生成模型在畫面質量、保真率、視頻時長等方面還有很大差距。 </blockquote> Boximator 建立在之前 PixelDance（基礎研究）、MagicAnimate（專注於人體動作）等更多字節團隊研究基礎之上的最新成果。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/eed789398509034f76f779cf938a7fb6.gif?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="554" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/eed789398509034f76f779cf938a7fb6.gif"/> 總的來説，這些技術並非針對 Sora 特意開發，但在 AIGC 大戰如火如荼的背景之下，仍不失為一種“戰備”。 再加上年前原抖音 CEO 張楠卸任，專注於剪映，奔赴 AIGC 風口。 可以説雖然 Sora 的發佈很突然，但字節並不是毫無準備，或者説早就在業務推進中感知到了技術趨勢。 而相比 OpenAI 與字節這樣早晚要有的對決，視頻行業上下游其他選手，更像是遭遇了一場飛來橫禍。 Sora 的第一刀，其實砍向了 Adobe。 5 天過去了，股價跌跌不休，市值蒸發過百億美元。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/ca67646524820a8ee8e6a5507c54e260.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="845" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/ca67646524820a8ee8e6a5507c54e260.png"/> 危機時刻，Adobe 剛剛緊急宣佈，組建了一個 50 人的 AI 研究團隊。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f5dfce361ebeff0655a58cdd5a8c4c14.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="673" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f5dfce361ebeff0655a58cdd5a8c4c14.png"/> 但是這投入的力度，沒讓大家看出誠意。 29945 員工中的 50 人，只佔 0.16%。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/81fa7e194305f374f8bd756d28dc82a7.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="369" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/81fa7e194305f374f8bd756d28dc82a7.png"/> Adobe 代表的是沿用近 30 年的視頻生產、編輯工具，服務於內容創作者。 不轉型就會變成下一個柯達、諾基亞，但轉型也被認為面臨很大挑戰。 比如有人指出，Adobe 坐擁大量數據，但要用過去創作者的成果去訓練 AI，就會與這些用户關係緊張。 也正是因此，Adobe 的 AI 生圖工具 Firefly 並沒有在自家創意作品社區 Behance 的數據上訓練，有些束手束腳。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/1c7f7905eb3a735682ed6415e2f0aa82.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="317" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/1c7f7905eb3a735682ed6415e2f0aa82.png"/> 又比如從過去 Adobe 在 AI 生圖的表現來看，效果比 Midjourney 尚且很大差距，如今在 AI 視頻上又該如何面對 OpenAI 的技術代差。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/3157fae06e767fe63e78bfd2ca75b4ad.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="211" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/3157fae06e767fe63e78bfd2ca75b4ad.png"/> Adobe 之外，受衝擊第二大的就是素材供應商了，代表公司 Shutterstock 的日子也不好過。 連馬斯克都認同 “這個行業可能消亡” 的觀點。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/0c61ec52eaf2695f7bbd8d517bbd0a58.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1080" height="1617" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/0c61ec52eaf2695f7bbd8d517bbd0a58.png"/> 不過 Shutterstock 也給自己找好了退路，早早與 OpenAI 簽訂了合作協議，從素材供應商開始轉型訓練數據供應商。 這幾天不斷刷屏的 Sora 視頻中，就有不少 Shutterstock 圖片的影子。 <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/ad682a316d06f572e8234d5ebea58543.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1030" height="498" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/ad682a316d06f572e8234d5ebea58543.png"/> <img src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f0f68957cba3dbf58d16050dda790845.png?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="1014" height="720" original-src="https://imageproxy.pbkrs.com/https://www.qbitai.com/wp-content/uploads/replace/f0f68957cba3dbf58d16050dda790845.png"/> 還有人開玩笑説，Sora 名字四個字母不會就是代表 “Shutterstock 原創，AI 攪拌” 吧。 <img src="https://imageproxy.pbkrs.com/https://p3-sign.toutiaoimg.com/tos-cn-i-6w9my0ksvp/28c4c469b4bb4567a84abd2b70c069d0~noop.image/query-X2l6PTU4NTU4JmZyb209YXJ0aWNsZS5wY19kZXRhaWwmbGszcz05NTMxOTJmNCZ4LWV4cGlyZXM9MTcwOTA5ODY4MSZ4LXNpZ25hdHVyZT0vT3NpMGxSZnQvd0RNcStlRytSNm1JQ203d2c9?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="954" height="228" original-src="https://imageproxy.pbkrs.com/https://p3-sign.toutiaoimg.com/tos-cn-i-6w9my0ksvp/28c4c469b4bb4567a84abd2b70c069d0~noop.image/query-X2l6PTU4NTU4JmZyb209YXJ0aWNsZS5wY19kZXRhaWwmbGszcz05NTMxOTJmNCZ4LWV4cGlyZXM9MTcwOTA5ODY4MSZ4LXNpZ25hdHVyZT0vT3NpMGxSZnQvd0RNcStlRytSNm1JQ203d2c9"/> 參考鏈接： [1] https://www.tiktok.com/@openai [2] https://boximator.github.io/ [3] https://twitter.com/bilawalsidhu/status/1760076742679552273</div>

字節跳動

OpenAI

Sora 新視頻在 TikTok 上受到熱烈歡迎，短短 4 天漲粉 10 萬，50 萬贊。OpenAI 的 AI 視頻技術引起了很多關注和討論。Sora 的逼真程度讓人難以分辨真假，網友開始懷疑在網上看到的一切。這對短視頻創作者產生了衝擊，甚至影響到了平台本身。字節跳動和 OpenAI 似乎在 AI 領域將展開一場競爭。在 Sora 火爆之前，字節內部也有類似的技術。Sora 的發佈引起了廣泛討論。

Sora 新視頻只發 TikTok：OpenAI 4 天漲粉 10 萬