Skip to Content Facebook Feature Image

OpenAI新AI模型GPT-4o或將重塑人機互動 教師、同聲傳譯要失業?
AI手機還會遠嗎?

博客文章

OpenAI新AI模型GPT-4o或將重塑人機互動 教師、同聲傳譯要失業?
AI手機還會遠嗎?
博客文章

博客文章

OpenAI新AI模型GPT-4o或將重塑人機互動 教師、同聲傳譯要失業?
AI手機還會遠嗎?

2024年05月15日 11:32 最後更新:11:46

當地時間5月13日10時,OpenAI首席技術官Mira Murati在全球矚目的春季發佈會上揭幕了新一代AI巨擘——GPT-4o。這款全能型AI模型以其超乎尋常的實時多模態對話能力,引發全球關注。

OpenAI首席技術官Mira Murati。

OpenAI首席技術官Mira Murati。

據《華爾街見聞》,GPT-4o的特性在於其高度的即時響應和表達能力,如同真實人類一般,能夠同時處理文字、圖像、視頻和語音信息,且接受和中斷對話自如。OpenAI創始人Sam Altman暗示了GPT-4o強大的擬人化能力,他在社交平台上引用了電影《Her》中的概念,預示人機交互或開啓新篇章。

電影《Her》中,男主角愛上了一個像人類一樣「有血有肉」的AI。

電影《Her》中,男主角愛上了一個像人類一樣「有血有肉」的AI。

Murati宣佈,相較於GPT-4 Turbo,GPT-4o速度提升了兩倍,開放API接口的同時,用戶請求速率上限提升至之前的五倍。

更為引人關注的是,這一先進模型將全面免費開放,惠及ChatGPT的所有用戶,取消其他所有限制,API價格降低50%。

發佈會還展示了桌面版ChatGPT及全新用戶界面(UI)。

GPT-4o即日起逐步向用戶開放,未來還將增加語音和視頻理解等功能。

Murati稱,GPT-4o為每個用戶都提供了GPT-4級別的智能,同時還改進了GPT-4在文本、視覺以及音頻方面的能力。

借助GPT-4o,OpenAI通過跨文本、視覺和音頻端到端訓練了新模型,使得所有輸入和輸出都由同一神經網絡處理,進一步降低了延遲。

AP圖片

AP圖片

據稱,GPT-4o的語音響應延遲已顯著降低,平均為320毫秒,接近人類對話的反應速度。

演示環節,Murati邀研究主管Mark Chen和後訓練團隊負責人Barret Zoph共同展示了GPT-4o的強大功能,包括解方程、解讀代碼、實時翻譯,甚至能通過視頻識別面部情緒。

1)看圖指導解方程
演示中,Zoph在白板上寫了一個方程式3x+1=4,ChatGPT給他提示,引導他完成每一步解答,識別他的書寫結果,幫助他解出了X的值。

2)解讀屏幕信息
Zoph將一段Python代碼輸入ChatGPT,並讓ChatGPT用一句話總結這段代碼在做什麼。GPT回答無誤,並詳細說明瞭數據是如何被處理的。

隨後,Zoph又運行了這段代碼,GPT能夠準確地描述出所生成圖表的具體含義,包括圖表主題、XY軸信息、峰值水平。

3)實時交替翻譯
GPT還在演示中扮演了翻譯員的角色。應社交媒體X的用戶請求,Murati現場對ChatGPT說起了意大利語,GPT則將她的話翻譯成英語,轉告Zoph和Chen;聽完Murati說的意大利語,GPT再將其翻譯為英文並告訴Chen:「Mark,她(Murati)想知道鯨魚會不會說話,它們會告訴我們什麼?」 

4)通過視頻識別面部情緒
演示中,Zoph將手機舉到自己面前正對著臉,要求ChatGPT檢測他現在的情緒。最初,GPT參考了他之前分享的一張照片,將他識別為「木質表面」。經過第二次嘗試,GPT表示:「你看起來非常的開心,可能還有一點激動,看樣子你應該心情很不錯。」

Zoph贊揚了GPT的回答並表示自己正在進行一場演示,以展示「你有多不可思議」,此時GPT情緒頗為激動地表示:「快別說了!你讓我害羞了。」

這些演示彷彿證實了GPT-4o的特性,其「o」代表著「omni」,象徵著「全能」。

在後續的網絡實測視頻中,官方和用戶還探索出了GPT-4o的花樣玩法。

將老照片中的手寫字轉錄為電子文本。

將老照片中的手寫字轉錄為電子文本。

共享iPad屏幕後,讓GPT實時指導教學幾何題目。

和GPT視頻玩「石頭剪刀布」。

和GPT視頻玩「石頭剪刀布」。

正如Murati說,GPT-4o的發佈意味著OpenAI在大模型的易用性方面邁出了一大步,Ta正在改變人機交互的協作模式。

那麼,AI手機還會遠嗎?

此前有媒體報道透露,蘋果已經與OpenAI達成協議,將在全新操作系統iOS 18中引入ChatGPT技術,以升級Siri的對話體驗。

AP圖片

AP圖片

這不由令人猜想,GPT-4o和Siri將如何結合?OpenAI和蘋果會締造出具有跨時代意義的AI手機嗎?

英偉達高級研究科學家Jim Fan在X平台表示,iOS集成GPT技術可能會有三個層級:
1)放棄Siri。OpenAI為iOS提煉出更小型、純設備上的GPT-4o,並可選擇付費升級以使用雲。
2)將相機或屏幕傳輸到模型中的基礎功能。對神經音頻/視頻編解碼器的芯片級支持。
3)集成iOS系統操作API和智能家居API。Siri快捷方式是時候復活了。

有分析指出,蘋果和OpenAI的合作能夠解決彼此在發展邊緣AI方面的痛點,真正做到各取所需。

目前,有分析預測,蘋果將在6月10日的WWDC大會上官宣和OpenAI的合作夥伴關係,並推出基於蘋果LLM的AI聊天機器人。

AP圖片

AP圖片

令人激動的是,已經有移動端App開始接入GPT-4o了。

用於輔助盲人和弱勢群體日常生活的手機App Be My Eyes嘗試了接入GPT-4o,發現日常決策的效率被大大提高。

AP圖片

AP圖片

宣傳視頻顯示,一名盲人打開Be My Eyes後,能夠通過和GPT-4o對話,讓GPT詳細告訴他眼前的景象,從而快速做出決策。

有網友表示,這是GPT-4o的最佳用例,它將為視障人士創造一個全新的世界。

AP圖片

AP圖片

在所有演示結束後,Murati總結道:「正如大家所見,(如今的ChatGPT)真的很神奇。」




深喉

** 博客文章文責自負,不代表本公司立場 **

Tags:

理文OpenAI

往下看更多文章

朝鮮半島戰雲密布 尹錫悅此時安排新一任駐華大使背後有何部署?

2024年10月17日 15:13 最後更新:15:36

朝鮮半島戰雲密布,連接南北韓路段被北韓爆破了。此時此際,南韓尹錫悅政府卻對中國有了新動作,安排了新一任的南韓駐華大使,此人來頭不少,被尹錫悅提名的正是金大棋,他不僅在李明博政府中擔任經濟首秘和政策室長,也是尹錫悅政府的首任秘書室長,不僅長期居於韓國決策層,還稱得上是尹錫悅的心腹。

尹錫悅政府安排了新一任的南韓駐華大使,分析認為反映南韓意識到搞好中韓關係的重要性。AP圖片

尹錫悅政府安排了新一任的南韓駐華大使,分析認為反映南韓意識到搞好中韓關係的重要性。AP圖片

金大棋曾參與中韓自由貿易協定的簽署以及緩解中韓貿易摩擦等工作,可說是有豐富的對華工作經驗。同時,在韓國總統府看來,金大棋「洞徹中國社會、歷史和文化」,非常關注包括經濟在內的中韓關係問題。韓方期待他能持續發展中韓戰略合作關係,並在「劇變的東亞秩序」中取得相應的外交成果。

國際問題專家認為,尹錫悅這一人事安排,確實是經過一定考慮,也直接反映出尹錫悅的對華政策,確實出現了不小變化。其中,中韓外長在4個月裡3次見面,說明了尹錫悅已經意識到搞好中韓關係的重要性。

中韓外長在4個月裡3次見面。AP圖片

中韓外長在4個月裡3次見面。AP圖片

事實上,金大棋有著兩大優勢,一是專業水準沒問題,他之前在對華工作上有豐富經驗;二是尹錫悅能信任金大棋,意味金大棋能盡可能全面地完成尹錫悅計劃的工作。另外,還有其他情況促使尹錫悅做出更換韓國駐華大使的決定。

今年較早前,現任韓國駐華大使鄭在浩被捲入了職場霸凌風波,引發韓國國內嘩然。根據韓國外交部先前的說法,他們已經收到了舉報,並正在核實,如果發現違規行為,將採取嚴肅處理。無論舉報是否確有其事,鄭在浩恐怕都要受影響,故尹錫悅選擇換人也是遲早的事。

被提名為新任韓國駐華大使的金大棋。

被提名為新任韓國駐華大使的金大棋。

還有,就是韓方提到的「劇變的東亞秩序」。朝鮮半島如今的局勢,身為當事人的南韓不可能沒感覺到,他們要在地區局勢劇變的背景下佔據先機,肯定要與中國保持一定的聯繫,這或許才是尹錫悅「換將」的真正目的。

近日急劇升溫的朝鮮半島局勢,雙方已經不只單純地「放狠話」,而是在軍事上做出了相當危險的行動。

首先,引發這輪局勢重大升級的導火線,是北韓指責南韓使用無人機滲透到平壤上空散發反朝傳單。在北韓看來,這種無人機可用於發動軍事攻擊,認定南韓的行為是重大挑釁。不少媒體都用「最後通牒」來形容北韓一方的聲明,足以反映其嚴重性。

然而,南韓卻另有一套說辭,根據南韓國防部長金龍顯的說法,南韓軍方並沒有參與此事,相關情況仍在調查中,同時參謀部給了另一個可能性,即無人機可能是南韓「民間團體」發射的,但還需進行調查。

但根據北韓的最新說法,他們已經掌握了「確鑿證據」,認定南韓軍方是今次無人機滲透平壤事件的「主謀」,強調發起挑釁者將要付出代價。而北韓還言辭激烈地將南韓稱作「被美國馴養的勢力」,認為美國應該為南韓的一些舉動負責。

北韓激烈的反應不難理解。有其他勢力的飛機飛到了平壤上空並投放反朝傳單,確實能被視為敵意十足的挑釁行動。

北韓剛剛炸毀了連接南北韓的公路。AP圖片

北韓剛剛炸毀了連接南北韓的公路。AP圖片

隨後事態進一步升級。目前,北韓剛剛炸毀了連接南北韓的公路,38線傳來的這聲巨響,毫無疑問地引發了國際震動。韓聯社稱,此舉意味著南北韓之間的陸路通道被「徹底切斷」。對南韓而言,北韓在非軍事區內進行爆破行動,是違反停戰協定的行為,因此進行了還擊。

至於北韓下一步會做什麼,南韓軍方認為,可能是加固防禦工事,還包括建造混凝土隔離牆以及反戰車路障等。毫無疑問,朝鮮半島局勢已伴隨著爆炸巨響再度升溫,這次發生在南北韓軍事分界線附近,下次可能發生在哪?

對此,中方已給了表態。中國外交部發言人毛寧指出,中方作為半島近鄰,關注這一系列事件,半島局勢緊張不符合共同利益,當務之急是避免進一步激化矛盾,中方希望各方能做出努力,推動半島問題政治解決。

中方特意提到自己是半島近鄰,已釋放了明確訊號。意味著對於有可能對中國產生影響的情況,中方是不可能坐視不理的。從基本態度上,中方自然希望半島問題能和平解決,但同時,中方很可能也已經做好了一切準備。

你 或 有 興 趣 的 文 章