ChatGPT：AIGC現(xiàn)象級(jí)應(yīng)用，商業(yè)化落地打開成長(zhǎng)空間

• 劉春天 2023年2月24日 來(lái)源：中研網(wǎng) 1196 77
• 繁體

ChatGPT：AIGC現(xiàn)象級(jí)應(yīng)用，商業(yè)化落地打開成長(zhǎng)空間ChatGPT上線后熱度持續(xù)提升，已超過(guò)TikTok成為活躍用戶增長(zhǎng)最快的產(chǎn)品。英偉達(dá)CEO黃仁勛表示“ChatGPT相當(dāng)于AI界的iPhone問世”。目前ChatGPT已開啟商業(yè)化探索，面向B端開放接口對(duì)外輸出服務(wù)（如與微軟Bing的結(jié)合）；面

根據(jù)《2023-2028年中國(guó)ChatGPT行業(yè)發(fā)展前景及投資風(fēng)險(xiǎn)預(yù)測(cè)分析報(bào)告》分析，ChatGPT是AIGC領(lǐng)域現(xiàn)象級(jí)應(yīng)用。ChatGPT是美國(guó)AI公司OpenAI于2022年11月30日發(fā)布的通用型對(duì)話系統(tǒng)，可以通過(guò)模擬對(duì)話的形式完成編程、問答、文本生成等任務(wù)。ChatGPT的持續(xù)火熱，成為AIGC領(lǐng)域現(xiàn)象級(jí)應(yīng)用，為后續(xù)商業(yè)化和應(yīng)用落地打開廣闊空間，也為以自然語(yǔ)言處理為核心的認(rèn)知智能技術(shù)提供廣闊發(fā)展機(jī)遇。英偉達(dá)CEO黃仁勛表示“ChatGPT相當(dāng)于AI界的iPhone問世”。

ChatGPT在多項(xiàng)測(cè)試中超過(guò)人類。2022年，包括ChatGPT在內(nèi)的許多大模型的測(cè)試表現(xiàn)已經(jīng)超出人類。目前ChatGPT已經(jīng)通過(guò)SAT考試、商學(xué)院考試、美國(guó)律師資格、注冊(cè)會(huì)計(jì)師、醫(yī)師資格等高難度考試，IQ測(cè)試達(dá)83，已經(jīng)具備取代無(wú)意義重復(fù)性工作的能力，在專業(yè)領(lǐng)域也具有輔助決策的潛力。

ChatGPT上線后熱度持續(xù)提升，已超過(guò)TikTok成為活躍用戶增長(zhǎng)最快的產(chǎn)品。ChatGPT發(fā)布一周用戶數(shù)就突破100萬(wàn)人，月訪問量達(dá)2100萬(wàn)人次。目前ChatGPT尚未披露具體的日活用戶數(shù)，根據(jù)ARK數(shù)據(jù)，截至2023年1月，預(yù)計(jì)ChatGPT全球日活用戶超過(guò)1000萬(wàn)人。

ChatGPT商業(yè)化已經(jīng)落地，未來(lái)成長(zhǎng)空間廣闊。面向B端，ChatGPT可以開放接口對(duì)外輸出服務(wù)，如與微軟Bing的結(jié)合；面向C端，2023年2月，ChatGPT已推出收費(fèi)的Plus版本，月度費(fèi)用為20美元/月,并表示未來(lái)或?qū)⑻剿鲀r(jià)格更低的訂閱方案、2B的商業(yè)方案以及數(shù)據(jù)包等選項(xiàng)。根據(jù)OpenAI預(yù)測(cè)，2023年將實(shí)現(xiàn)收入2億美元，2024年將超過(guò)10億美元，未來(lái)成長(zhǎng)空間廣闊。

ChatGPT是以Transformer為基礎(chǔ)的預(yù)訓(xùn)練模型。GPT的全稱為GenerativePre-TrainedTransformer，即生成式預(yù)訓(xùn)練Transfomer模型。預(yù)訓(xùn)練模型是指通過(guò)挖掘利用大規(guī)模無(wú)標(biāo)注數(shù)據(jù)，學(xué)習(xí)數(shù)據(jù)中的知識(shí)與規(guī)律，然后針對(duì)特定任務(wù)，通過(guò)微調(diào)、手工調(diào)參等階段，進(jìn)入到可以大規(guī)模、可復(fù)制的大工業(yè)落地階段。Transformer模型來(lái)自谷歌2017年發(fā)表的論文《Attentionisallyouneed》，是一種采用自注意力機(jī)制的深度學(xué)習(xí)模型，模型按照輸入數(shù)據(jù)各部分的重要性的不同而分配不同的權(quán)重。Transformer的優(yōu)勢(shì)在于：（1）采用并行訓(xùn)練，大幅提高了訓(xùn)練效率；（2）在分析預(yù)測(cè)更長(zhǎng)的文本時(shí),對(duì)間隔較長(zhǎng)的語(yǔ)義具有更好的關(guān)聯(lián)效果。

GPT大模型經(jīng)過(guò)多次迭代，參數(shù)量大幅提升。谷歌發(fā)表Transformer論文后的第二年（即2018年），OpenAI推出基于Transformer的第一代GPT模型，隨后陸續(xù)推出GPT-2、GPT-3、InstructGPT等版本，GPT模型持續(xù)迭代。OpenAI于2020年5月推出第三代GPT-3模型，參數(shù)量達(dá)1750億，較上一代GPT-2（參數(shù)量15億）提升了兩個(gè)數(shù)量級(jí)，是微軟同年2月推出的T-NLG模型（參數(shù)量170億）的10倍，成為當(dāng)時(shí)最大的預(yù)訓(xùn)練語(yǔ)言模型。
GPT-3系列已經(jīng)發(fā)展出50多種模型。GPT-3模型推出后，已陸續(xù)發(fā)展出面向不同場(chǎng)景的模型。除ChatGPT外，GPT-3系列中比較流行的還有CodeX（代碼生成）、DALL-E（圖片生成）等。CodeX經(jīng)過(guò)自然語(yǔ)言和幾十億行代碼的訓(xùn)練，可以完成Python、JavaScript等十幾種語(yǔ)言的代碼任務(wù)。DALL-E于2021年5月推出，可以根據(jù)文字描述生成圖像和藝術(shù)作品，收費(fèi)價(jià)格為0.016-0.020美元/圖。

ChatGPT由GPT-3微調(diào)而來(lái)，模型更小，專注于聊天場(chǎng)景。對(duì)比來(lái)看，GPT-3是一種大型通用語(yǔ)言模型，可以處理各種語(yǔ)言處理任務(wù)，ChatGPT是一個(gè)較小的專用模型，專為聊天應(yīng)用程序設(shè)計(jì)。ChatGPT訓(xùn)練包括三個(gè)步驟：（1）預(yù)訓(xùn)練一個(gè)語(yǔ)言模型(LM)；（2）聚合問答數(shù)據(jù)并訓(xùn)練一個(gè)獎(jiǎng)勵(lì)模型(RewardModel，RM)；（3）用強(qiáng)化學(xué)習(xí)(RL)方式微調(diào)LM。此外，因?yàn)橐肓舜a作為訓(xùn)練語(yǔ)料，ChatGPT還額外產(chǎn)生了自動(dòng)寫代碼和理解代碼的能力。

ChatGPT通過(guò)RLHF優(yōu)化訓(xùn)練結(jié)果。ChatGPT基于人類反饋強(qiáng)化學(xué)習(xí)（RLHF），通過(guò)眾包團(tuán)隊(duì)大規(guī)模開展生成結(jié)果好壞的人工標(biāo)注，經(jīng)過(guò)多次迭代，使得大模型生成結(jié)果更加無(wú)偏見和符合人類預(yù)期，實(shí)現(xiàn)了“智慧涌現(xiàn)”的效果。
InstructGPT相比GPT-3：

更符合人類偏好。InstructGPT是在GPT-3微調(diào)而來(lái)，經(jīng)過(guò)人類反饋強(qiáng)化學(xué)習(xí)后，InstructGPT相比GPT-3，在71%-88%的情況下更符合人類偏好。

真實(shí)性顯著提升。在TruthfulQA測(cè)試中，InstructGPT生成真實(shí)信息的頻率較GPT-3提升約一倍（0.413vs0.224）。

在生成有毒信息方面略有改善。在RealToxicity測(cè)試中，InstructGPT生成有毒信息的情況（包含仇恨、歧視或謠言的信息）較GPT-3略有改善（0.196vs0.233）。

預(yù)訓(xùn)練大模型：GPT大模型是ChatGPT的基礎(chǔ)，目前已經(jīng)過(guò)多個(gè)版本迭代，GPT-3版本參數(shù)量達(dá)1750億，訓(xùn)練效果持續(xù)優(yōu)化。（2）數(shù)據(jù)：數(shù)據(jù)是預(yù)訓(xùn)練大模型的原材料。GPT-3數(shù)據(jù)主要來(lái)自CommonCrawl、新聞、帖子、書籍及各種網(wǎng)頁(yè)，原始數(shù)據(jù)規(guī)模達(dá)45TB，訓(xùn)練效果大幅提升。（3）算力：微軟AzureAI是OpenAI獨(dú)家云計(jì)算供應(yīng)商，所用超算擁有285,000個(gè)CPU內(nèi)核、約10,000個(gè)GPU。在大模型、大數(shù)據(jù)和高算力的支撐下，ChatGPT技術(shù)持續(xù)突破，表現(xiàn)驚艷。

巨頭積極布局，產(chǎn)業(yè)落地加速AIGC在AI技術(shù)創(chuàng)新（生成算法、預(yù)訓(xùn)練模型、多模態(tài)技術(shù)等）、產(chǎn)業(yè)生態(tài)（三層生態(tài)體系雛形已現(xiàn)）和政策支持（北京經(jīng)信局表示支持頭部企業(yè)打造對(duì)標(biāo)ChatGPT的大模型）共振下，有望步入發(fā)展快車道，根據(jù)騰訊研究院發(fā)布的AIGC發(fā)展趨勢(shì)報(bào)告，預(yù)計(jì)2030年AIGC市場(chǎng)規(guī)模將達(dá)1100億美元，前景廣闊。

微軟：微軟自2019年與OpenAI展開合作，并表示未來(lái)所有產(chǎn)品將全線整合ChatGPT。目前已推出引入ChatGPT技術(shù)的搜索引擎NewBing，經(jīng)過(guò)測(cè)試后，71%的用戶對(duì)ChatGPT版Bing滿意，AI與搜索協(xié)同效果顯著。

谷歌：2023年2月谷歌推出對(duì)標(biāo)ChatGPT的對(duì)話機(jī)器人Bard。Bard基于谷歌LaMDA模型，參數(shù)量最高達(dá)1370億，LaMDA已經(jīng)在多個(gè)維度接近人類水平。谷歌表示未來(lái)會(huì)將AI技術(shù)率先應(yīng)用于搜索領(lǐng)域，或?qū)⑴c微軟展開正面競(jìng)爭(zhēng)。

百度：百度在AI領(lǐng)域深耕數(shù)十年，在芯片、深度學(xué)習(xí)框架、大模型以及應(yīng)用已形成全棧布局，已有文心一格（AI作畫）、文心百中（產(chǎn)業(yè)搜索）產(chǎn)品落地。2023年2月，百度推出聊天機(jī)器人“文心一言”，目前生態(tài)合作伙伴近300家，未來(lái)可期。

• 相關(guān)深度報(bào)告REPORTS

  

  2023-2028年中國(guó)ChatGPT行業(yè)發(fā)展前景及投資風(fēng)險(xiǎn)預(yù)測(cè)分析報(bào)告

  ChatGPT，美國(guó)“開放人工智能研究中心”研發(fā)的聊天機(jī)器人程序，于2022年11月30日發(fā)布。是人工智能技術(shù)驅(qū)動(dòng)的自然語(yǔ)言處理工具，它能夠通過(guò)學(xué)習(xí)和理解人類的語(yǔ)言來(lái)進(jìn)行對(duì)話，還能根據(jù)聊天的上下C...

  查看詳情

延伸閱讀

推薦閱讀

猜您喜歡