深度|凌晨,OpenAI 正式發布 GPT-4o!AI 現在可以和 AI 語音對話了,以及更多免費功能上線

深度|凌晨,OpenAI 正式發布 GPT-4o!AI 現在可以和 AI 語音對話了,以及更多免費功能上線
2024年05月14日 06:09 市場資訊

專題:OpenAI 發布最新旗艦模型GPT-4o 完全免費 語音功能震撼登場

  來源:有新Newin

  凌晨一點,OpenAI 召開了一場春季發布會,主要講了 4 件事:

  • GPT-4o;

  • 免費版 ChatGPT 更多功能;

  • macOS 版 ChatGPT;

  • ChatGPT 新的 UI;

  1. GPT-4o

  1)關于 GPT-4o

  GPT-4o 是 OpenAI 目前最新的旗艦型號,它提供 GPT-4 級別的智能,但速度更快,并改進了其跨文本、語音和視覺的功能。如今,GPT-4o 在理解和討論你共享的圖像方面比任何現有模型都要好得多。

  例如,你現在可以拍攝不同語言的菜單照片,并與 GPT-4o 對話來翻譯它,了解食物的歷史和意義,并獲得建議。

  OpenAI 表示,現在用戶在語音模式下與 ChatGPT 對話的平均延遲為 2.8s(ChatGPT-3.5)以及 5.4s(GPT-4)。

  為了實現這一目標,語音模式是由三個獨立模型組成的管道:一個簡單模型將音頻轉錄為文本,GPT-3.5 或 GPT-4 接收文本并輸出文本,第三個簡單模型將該文本轉換回音頻。這個過程意味著主要智能來源 GPT-4 丟失了大量信息——它無法直接觀察音調、多個說話者或背景噪音,也無法輸出笑聲、歌唱或表達情感。

  下面來看一下 Greg 的現場演示,兩個 GPT-4o 互相對話以及娛樂唱歌 ??

  現場發布會 Murati 完整介紹 GPT-4o :

  2)關于模型性能

  OpenAI 表示,借助 GPT-4o,OpenAI 跨文本、視覺和音頻端到端地訓練了一個新模型,這意味著所有輸入和輸出都由同一神經網絡處理。

  由于 GPT-4o 是 OpenAI 第一個結合所有這些模式的模型,因此仍然只是淺嘗輒止地探索該模型的功能及其局限性。

  以下是 OpenAI 披露的 GPT-4o 模型性能介紹:

  3)未來計劃

  未來,GPT-4o 優化將實現更自然、實時的語音對話,并能夠通過實時視頻與 ChatGPT 進行對話。例如,你可以向 ChatGPT 展示一場現場體育比賽,并要求它向你解釋規則。

  此外,OpenAI 計劃在未來幾周內在 alpha 版中推出具有這些新功能的新語音模式,隨著更廣泛地推廣,Plus 用戶可以搶先體驗。

  為了使先進的 AI 在全球范圍內更容易使用和使用,GPT-4o 的語言功能在質量和速度方面得到了提高。ChatGPT 現在還支持 50 多種語言,包括注冊和登錄、用戶設置等。

  ChatGPT Plus 和 Team 已經可以體驗 GPT-4o,很快就會向企業用戶推出。最后,今天 OpenAI 還開始推出 ChatGPT Free,但有使用限制。Plus 用戶的消息限制將比免費用戶高出 5 倍,而團隊和企業用戶的限制甚至更高。

  2. 免費版更多功能

  OpenAI 表示,將在未來幾周內開始向 ChatGPT 免費用戶推出更多智能和高級工具。使用 GPT-4o 時,ChatGPT 免費用戶現在可以訪問以下功能:

  • 體驗 GPT-4級智能 ;

  • 獲取來自模型和網絡的回復  ;

  • 分析數據并創建圖表 ;

  • 聊聊你拍攝的;

  • 上傳文件,尋求幫助總結、寫作或分析;

  • 發現并使用 GPT和 GPT 商店

  • 使用 Memory打造更有幫助的體驗;

  根據使用情況和需求,免費用戶可以使用 GPT-4o 發送的消息數量會受到限制。當達到限制時,ChatGPT 將自動切換到 GPT-3.5,以便用戶可以繼續對話。

  3. macOS 版應用,簡化工作流

  對于免費和付費用戶,OpenAI 還推出了適用于 macOS 的新版 ChatGPT 桌面應用,該應用旨在無縫集成到你在計算機上執行的任何操作。

  通過簡單的鍵盤快捷鍵(Option + Space),用戶可以立即向 ChatGPT 提問。用戶還可以直接在應用程序中截取屏幕截圖并進行討論。

  現在,用戶可以直接從計算機與 ChatGPT 進行語音對話,從 ChatGPT 發布時提供的語音模式開始,GPT-4o 的新音頻和視頻功能將在未來推出。無論是想為公司集思廣益、準備面試還是想討論一個主題,都可以點擊桌面應用程序右下角的耳機圖標來開始語音對話。 

  從今天開始,OpenAI 將向 Plus 用戶推出 macOS 應用,并將在未來幾周內更廣泛地提供該應用程序。OpenAI 還計劃在今年晚些時候推出 Windows 版本。

  4. ChatGPT 新的 UI

  OpenAI為 ChatGPT 引入了新的外觀和感覺,旨在更加友好和更具對話性。你會注意到新的主屏幕、消息布局等。

  垂直 AI 與代理如何重塑 B2B 價值鏈?增速遠超 SaaS,AI 應用層拐點來臨?硅谷老牌 VC 總結了 10 個 GenAI 初創商業案例與 7 條黃金法則......

海量資訊、精準解讀,盡在新浪財經APP

責任編輯:尉旖涵

VIP課程推薦

加載中...

APP專享直播

1/10

熱門推薦

收起
新浪財經公眾號
新浪財經公眾號

24小時滾動播報最新的財經資訊和視頻,更多粉絲福利掃描二維碼關注(sinafinance)

股市直播

  • 圖文直播間
  • 視頻直播間

7X24小時

  • 04-29 瑞迪智驅 301596 25.92
  • 04-25 歐萊新材 688530 9.6
  • 04-01 宏鑫科技 301539 10.64
  • 03-29 燦芯股份 688691 19.86
  • 03-27 無錫鼎邦 872931 6.2
  • 新浪首頁 語音播報 相關新聞 返回頂部