ChatGPT是啥?
2022年12月,人工智能聊天機器人ChatGPT刷爆網絡,網友們爭先恐后去領略它的超高情商和巨大威力。參加高考、修改代碼、構思小說......它在廣大網友的“鞭策”下不斷突破自我,甚至可以用一整段程序,為你拼接出一只小狗。那么,ChatGPT是如何煉成的?是否意味著AI已具有人類智能呢?
ChatGPT是啥?
一個超神級別的自然語言生成式AI。
ChatGPT是人工智能公司OpenAI的GPT自然語言生成式模型的最新衍生品,可以進行“你來我往”的多輪聊天。
ChatGPT被業內認為是繼2020年NLP(自然語言處理)預訓練模型——GPT-3之后的“GPT-3.5”。盡管不是傳聞中下一代自然語言生成模型GPT-4,但同樣對NLP以及人工智能領域有重要意義。
一款AI,能有多神呢?
ChatGPT是GPT(或生成式預訓練轉換器)文本生成AI系列的最新發展,根據從互聯網上獲取的大量文本樣本來進行訓練。
一經發布,ChatGPT便在網友的瘋狂“檢測”和“調戲”中表現出各種驚人的能力。OpenAI首席執行官山姆·奧特曼(Sam Altman)表示,自11月30日至12月5日,ChatGPT的用戶數量已突破100萬,需求大于預期。
在廣大網友的不懈努力下,ChatGPT短短幾天之內——
參加了美國高校的入學資格考試(SAT),成績為中等學生水平;
用《坎特伯雷故事集》風格改寫了90年代熱門歌曲《Baby Got Back》;
用《老友記》主角口吻創作了劇本對白;
構思了簡短的偵探小說;
簡要闡釋了經濟學理論;
給出了消除經濟不平等的六點計劃;
與人類進行“心理戰”,猜想人類實際上想讓計算機做什么;
規劃了如何毀滅世界;
生成關鍵詞指導AI作畫;
扮演OpenAI,在系統內構建了ChatGPT套娃,相當于“我”生了一個“我”......
ChatGPT是怎么煉成的?
要想了解ChatGPT,我們首先了解一下GPT。
Generative Pre-trained Transformer是一種基于互聯網可用數據訓練的文本生成深度學習模型。它用于問答、文本摘要生成、機器翻譯、分類、代碼生成和對話AI。
2018年GPT-1誕生,這一年也是 NLP的預訓練模型元年。
它可以:
·自然語言推理:判斷兩個句子的關系;
·問答與常識推理:輸入文章及若干答案,輸出答案的準確率;
·語義相似度識別:判斷兩個句子語義是否相關;
·分類:判斷輸入文本是指定的哪個類別。
發展到GPT-3,系統的聊天能力已經無限接近于人類,甚至有超越之勢。
而相對于GPT3通過海量學習數據進行訓練,ChatGPT又有進步。
它被加入道德原則。
按照預先設計的道德準則,ChatGPT會對不合理或無法回答的提問和請求“說不”。敢于質疑、主動承認錯誤,這樣的“性格”可以不斷提升AI本身對用戶意圖的理解以及結果的準確性。當然,盡管OpenAI非常小心,這種準則也可能被聰明的提問方式繞開。
它學會了從“人類反饋中強化學習”,即Reinforcement Learning from Human Feedback(RLHF)。
ChatGPT 使用“預訓練-微調”的工作范式訓練了一個初始模型:人類AI訓練員提供對話,他們在對話中扮演雙方——用戶和AI助手,AI訓練員可以訪問模型編寫的對話回復,并幫助AI調整回復內容。
被“調教”后的ChatGPT能夠識別惡意信息,識別后拒絕給出有效回答,或記住用戶之前所向它提問的內容,以各種方式組合語境想法,變成一個靈感生成器。
對于AI發展來說,創建一個迭代反饋的閉環至關重要。
除了RLHF,還使用了近端策略優化算法(PPO)微調模型,對整個學習過程進行了數次迭代。上線后,ChatGPT將大量客戶的反饋互動用于AI 的學習,將其變成推動AI進步的關鍵一環。
AI是否已具有人類智能?
討論AI是否已具有真正的“智能”是人類的游戲。
圖靈測試(The Turing test)如今已然成為人工智能領域研究的核心目標之一。它由艾倫·麥席森·圖靈提出,被公認為是人工智能學科興起的標志。圖靈測試將“思想能力”人為定義在功能和實用的范疇,為“智能”設定了條件。
圖靈測試究竟是什么意思?簡單來說,就是把機器關到小黑屋中,讓它和人類聊天對話,然后分辨小黑屋里回答問題的究竟是機器還是人類。如果無法辨別,就說明了機器具有和人一樣等級的智能,通過測試。
而迄今為止,還沒有AI模型能真正通過圖靈測試。
提及GPT-4會有怎樣的優化,ChatGPT給出了以下答案:
ChatGPT:
GPT-4是一個大型語言模型,是目前人工智能領域最先進的技術之一。它能夠在大量訓練數據的基礎上,模擬人類的語言表達能力,并以相似的語言來回答問題。目前,GPT-4還在不斷優化,可能會有以下一些方面的改進:
GPT-4可能會增加更多的訓練數據,以提高它的知識面和準確度。
GPT-4可能會增加更復雜的算法,以提高它的性能和處理能力。
GPT-4可能會增加更多的功能,例如語音合成、圖像識別等,以提高它的應用能力。
GPT-4可能會增加更多的輸入輸出接口,例如聊天機器人、問答系統等,以提高它的使用方便性。
江湖傳言:GPT-4已通過了圖靈測試。
未來,AI是否可以真正具有人類智能?眾說紛紜。也許奇點已然臨近,也許依舊僅為空中樓閣。但不可否認的是,ChatGPT必將引領一場人工智能領域的先鋒革命。