OpenAI再拋震撼彈,發布首個AI視頻模型Sora,可直接輸出60秒視頻,並包含高度細致的背景、複雜的多角度鏡頭,以及富有情感的多個角色。
OpenAI官網截圖
內地界面新聞報道,目前OpenAI官網上已經更新了多個視頻demo,在這些demo中,Sora不僅能準確呈現細節,還能理解物體在物理世界中的存在,並生成具有豐富情感的角色。該模型還可以根據提示、靜止圖像甚至填補現有視頻中的缺失幀來生成視頻。
例如一個Prompt(大語言模型中的提示詞)的描述是:在東京街頭,一位時髦的女士穿梭在充滿溫暖霓虹燈光和動感城市標誌的街道上。在Sora生成的視頻裡,女士身著黑色皮衣、紅色裙子在霓虹街頭行走,不僅主體連貫穩定,還有多鏡頭,包括從大街景慢慢切入到對女士的臉部表情特寫,以及潮濕的街道地面反射霓虹燈的光影效果。
另一個Prompt則是,一隻貓試圖叫醒熟睡的主人,要求吃早餐,主人試圖忽略這隻貓,但貓嘗試了新招,最終主人從枕頭下拿出藏起來的零食,讓貓自己再多待一會兒。在這個AI生成視頻裡,貓甚至都學會了踩奶,對主人鼻頭的觸碰甚至都是輕輕的,接近物理世界裡貓的真實反應。
OpenAI表示,他們正在教AI理解和模擬運動中的物理世界,目標是訓練模型來幫助人們解決需要現實世界交互的問題。
隨後OpenAI解釋了Sora的工作原理,Sora是一個擴散模型,它從類似於靜態噪聲的視頻開始,通過多個步驟逐漸去除噪聲,視頻也從最初的隨機像素轉化為清晰的圖像場景。Sora使用了Transformer架構,有極強的擴展性。
Sora是基於過去對DALL·E和GPT的研究基礎構建,利用DALL·E 3的重述提示詞技術,為視覺模型訓練數據生成高描述性的標注,因此模型能更好遵循文本指令。
有YouTuber發表了對Sora的感想,表示內容創作行業已經永遠改變了,並且毫不誇張。「我進入YouTube世界已經15年時間,但OpenAI剛剛的展示讓我無言……動畫師/3D藝術家們有麻煩了,素材網站將變得無關緊要,任何人都可以無壁壘獲得難以置信的產品,內容背後的『想法』和故事將變得更加重要。」
也就是說,以往一些自詡「技術流」的人恐怕有失業之虞,而那些會講故事的人,看來仍然吃香。
深喉
** 博客文章文責自負,不代表本公司立場 **
自拜登政府上台以來,遏制中國芯片産業發展一直是其政策重點之一。據《華爾街日報》12月22日報道,如今距離卸任只剩幾周的美國商務部長雷蒙多稱,美國試圖限制中國獲得先進半導體技術的努力並沒有阻礙中國的進步,在芯片競賽中「試圖阻撓中國是『白費工夫』(a fool's errand)」。
《華爾街日報》報道截圖
當然,雷蒙多說出這番話是替拜登任內出台的《芯片與科學法案》「賺吆喝」。該法案提出在半導體製造、研發和勞動力等方面投資近530億美元,鼓勵半導體産業到美國投資。《華爾街日報》說,雷蒙多在訪談中表示,聯邦政府對美國國內創新的資金支持「比出口管制更重要」。
美國商務部長雷蒙多。AP資料圖片
報道稱,雷蒙多認為,努力將中國排除在「敏感技術」之外仍然很重要,但對華半導體出口管制只不過使中國向全球技術主導地位邁進的步伐「减速」而已。「打敗中國的唯一方法就是走在他們前面。」她說,「我們必須跑得更快,在創新方面超越他們,這才是制勝之道。」
這並非雷蒙多首次提出這種論調。去年2月,雷蒙多在美國喬治城大學做演講時,就公開闡述過拜登政府應對半導體領域中國競爭的「兩套戰略」。
據美媒當時報道,當被問及《芯片與科學法案》以及美國對中國實施的出口管制如何影響中美關係時,雷蒙多說:「當我考慮我們與中國的競爭時,有一個進攻戰略和一個防禦戰略。防禦戰略就是出口管制,不讓中國獲得我們的超高端技術;但進攻性戰略更重要,這就是投資美國。」
美國總統拜登將《芯片與科學法案》視為其重要的政治遺産。《華爾街日報》提到,本月早些時候,民主黨人拜登自誇其《芯片與科學法案》及相關立法是「羅斯福新政以來對美國最重大的投資」。
然而,鑒於共和黨前總統特朗普明年1月就將重返白宮,拜登政府的芯片産業政策前途難料。今年10月,特朗普曾批評《芯片與科學法案》「實在糟糕」。他反對通過補貼政策鼓勵半導體企業建廠,認為這吸引到的都不是「好公司」。相反,他建議徵收高額關稅,迫使企業「自願」回流美國。
特朗普還提議,加速對投資額超過10億美元的企業項目的審批,包括豁免相關環境審查程序等,鼓勵企業投資。據悉,這有望促成軟銀一筆價值1000億美元、與人工智能(AI)等前沿技術領域相關的投資在美落地。
對此,雷蒙多承認,拜登政府的一些監管措施阻礙了美國的競爭力,但她也反駁稱,像特朗普這樣「給公司一張空白支票,讓他們為所欲為」,是「一個巨大的錯誤」。
不過,在美媒看來,《芯片與科學法案》的實施確實面臨挑戰。
《華爾街日報》指出,法案的大部分資金被分配給了大型芯片製造商,如英特爾獲得了近80億美元的聯邦補助,但這個美國半導體巨頭在追趕外國競爭對手方面表現不佳。今年8月,英特爾宣布裁員15%,並將暫停向股東派發股息,這是英特爾有史以來最大規模裁員。在連續多個季度業績不佳後,公司CEO格爾辛格本月早些時候被迫離職。
此外,分析人士也質疑,《芯片與科學法案》是否過度重視芯片製造,而對研發投入不足。美國塔夫茨大學弗萊徹學院教授、《芯片戰爭》一書的作者克里斯•米勒(Chris Miller)指出,《芯片與科學法案》劃撥資金的80%都是建廠補貼,這種「不平衡」多少有些「令人失望」。
2022年10月和2023年10月,美國商務部工業與安全局(BIS)先後出台出口管制措施,針對中國先進芯片和相關製造設備的進口,意在全面加强打壓中國半導體行業的先進制程能力。本月2日,BIS又新增136家中國實體和4家中國實體海外子公司至「實體清單」,管制範圍同樣聚焦在先進AI領域相關芯片和所需設備。
對此,中國也對美國出台了半導體相關的原材料管制措施。12月3日,中方决定加强有關兩用物項對美國出口管制,包括:禁止兩用物項對美國軍事用戶或軍事用途出口;原則上不予許可鎵、鍺、銻、超硬材料相關兩用物項對美國出口;對石墨兩用物項對美國出口,實施更嚴格的最終用戶和最終用途審查。
在3日的例行發布會上,商務部新聞發言人應詢表示,中方此舉是為了維護國家安全和利益、履行防擴散等國際義務,且根據《中華人民共和國出口管制法》等法律規定作出相關决定。
發言人提到,近年來,美方泛化國家安全概念,將經貿科技問題政治化、武器化,濫用出口管制措施,無端限制有關産品對華出口,並將多家中國企業列入制裁清單進行打壓遏制,嚴重破壞國際貿易規則,嚴重損害企業正當合法權益,嚴重破壞全球産業鏈供應鏈穩定。
「中國政府堅定不移推進高水平對外開放,堅决反對任何泛化國家安全概念的錯誤做法。中方願與有關國家和地區加强出口管制領域對話,共同促進全球産業鏈供應鏈的安全與穩定。」發言人說。
彭博社當時指出,作為數十種關鍵礦産的全球最大供應國,中國擴大出口管制將對美國相關行業造成嚴重影響。更引發這家美媒關注的是,這是中國首次複製美西方此前慣用的「治外法權」,將出口管制延伸至中國境內外的公司,將中國産品或含有中國零部件的産品納入制裁範圍。
「中國在對美國發起反制方面一向比較行動緩慢或謹慎,但現在似乎很明顯的是,中國開始放開手脚了。」總部位於北京的策緯諮詢公司(Trivium China)副總監湯姆•努尼斯特分析稱。新加坡南洋理工大學助理教授駱明輝說:「這表明……在芯片方面,中國可以打出一些牌來打擊美國。」
美國知名經濟學家、耶魯大學高級研究員斯蒂芬•羅奇則投書英國《金融時報》指出,中方的反制措施「是一次外科手術式打擊」,「將對美國的關鍵産業産生重要的戰略影響」。他警告即將上任的特朗普政府應謹慎决策,因為「中國手裏還有很多『王牌』(trump cards)」。