OpenAI 在周二發(fā)布了 GPT-4,這是一個大型的多模態(tài)模型(可以接受圖像和文本輸入,輸出文本),它在各種專業(yè)和學(xué)術(shù)的基準(zhǔn)測試中展現(xiàn)出了人類水平的表現(xiàn)。
GPT-4 是 OpenAI 在深度學(xué)習(xí)領(lǐng)域的最新成果,也是其 GPT 系列模型的第四代。GPT 系列模型是基于自然語言處理技術(shù)的生成預(yù)訓(xùn)練變換器(generative pre-trained transformer),它們可以根據(jù)大量從互聯(lián)網(wǎng)上收集的文本數(shù)據(jù)來預(yù)測下一個詞或詞片段,并根據(jù)用戶給出的指令來生成技術(shù)或創(chuàng)意作品。
與前一代模型 GPT-3 相比,GPT-4 有了很大的提升和創(chuàng)新。
首先,GPT-4 可以處理圖像輸入,這意味著它可以根據(jù)用戶上傳的圖片來進(jìn)行推理和描述。
其次,GPT-4 的可靠性、創(chuàng)造力和靈活性都有所增強,它可以處理更復(fù)雜和更細(xì)致的指令,并在各種場景中給出更合理和更有用的回答。
最后,GPT-4 的規(guī)模也比 GPT-3 大得多,它支持生成和處理多達(dá) 32,768 個詞片段(約 25,000 個單詞)的文本內(nèi)容。
為了驗證 GPT-4 的能力,OpenAI 讓它參加了一些原本設(shè)計給人類考生的考試,并取得了驚人的成績。例如,在美國統(tǒng)一律師資格考試(Uniform Bar Exam)中,GPT-4 的分?jǐn)?shù)位于前 10% 左右;而 GPT-3.5 的分?jǐn)?shù)則位于后 10% 左右。此外,在法學(xué)院入學(xué)考試(LSAT)、研究生入學(xué)考試(GRE)數(shù)學(xué)部分、以及各種高級放置課程(AP)科目測試中,GPT-4 都表現(xiàn)出了超越或接近人類水平的水準(zhǔn)。
OpenAI 表示,在開發(fā) GPT-4 的過程中,他們重建了整個深度學(xué)習(xí)系統(tǒng),并與微軟 Azure 公司合作設(shè)計了一個專門針對他們工作負(fù)載的超級計算機。他們還花費了六個月時間對 GPT-4 進(jìn)行迭代調(diào)整,并借鑒了他們之前發(fā)布過的對話機器人 ChatGPT 的經(jīng)驗,在事實性、可控性和安全性方面取得了最佳效果(盡管仍然不完美)。
目前,OpenAI 已經(jīng)通過 ChatGPT 和 API (需要排隊等待)向公眾開放了 GPT-4 的文本輸入功能。