每日經(jīng)濟(jì)新聞 2023-03-16 15:35:53
每經(jīng)記者 李少婷 每經(jīng)編輯 楊夏
3月16日下午,文心一言發(fā)布會(huì)在百度科技園舉行,百度創(chuàng)始人李彥宏表示,文心一言是百度十幾年超大規(guī)模的開(kāi)發(fā)投入積累來(lái)的。
李彥宏現(xiàn)場(chǎng)演示了文心一言的多種能力。
“從文心一言的表現(xiàn)看,某種程度上它具有了對(duì)人類(lèi)意圖的理解能力,回答的準(zhǔn)確性、邏輯性、流暢性,都逐漸接近人類(lèi)水平。但整體而言,這類(lèi)大語(yǔ)言模型還遠(yuǎn)未到發(fā)展完善的階段,它們有時(shí)候會(huì)有很驚艷的表現(xiàn),但不少場(chǎng)景下,細(xì)究起來(lái)還有明顯的bug,進(jìn)步空間很大。未來(lái)這段時(shí)間它一定會(huì)飛速發(fā)展,日新月異。”
李彥宏認(rèn)為,人類(lèi)進(jìn)入人工智能時(shí)代,IT技術(shù)的技術(shù)棧發(fā)生了根本性變化。過(guò)去基本分為三層:芯片層,操作系統(tǒng)層和應(yīng)用層。現(xiàn)在可以分為四層:芯片層、框架層、模型層和應(yīng)用層。
“百度是全球?yàn)閿?shù)不多、在這四層進(jìn)行全棧布局的人工智能公司。”李彥宏介紹,文心一言位于模型層。2019年,百度推出了文心大模型ERNIE 1.0。目前,ERNIE 3.0每天接受數(shù)十億次用戶的搜索請(qǐng)求。這讓文心一言能夠基于一個(gè)龐大的、高效的數(shù)據(jù)池,快速地學(xué)習(xí)和改進(jìn)。
“大模型訓(xùn)練堪稱(chēng)暴力美學(xué),需要有大算力、大數(shù)據(jù)和大模型,每一次訓(xùn)練任務(wù)都耗資巨大。”李彥宏介紹,全棧布局的優(yōu)勢(shì)在于,可以在技術(shù)棧的四層架構(gòu)中,實(shí)現(xiàn)端到端優(yōu)化,大幅提升效率。尤其是,框架層和模型層之間,有很強(qiáng)的協(xié)同作用,可以幫助構(gòu)建更高效的模型,并顯著降低成本。事實(shí)上,超大規(guī)模模型的訓(xùn)練和推理,給深度學(xué)習(xí)框架帶來(lái)了很大考驗(yàn)。
李彥宏還表示,芯片、框架、大模型和終端應(yīng)用場(chǎng)景,可以形成一個(gè)高效的反饋閉環(huán),幫助大模型不斷去調(diào)優(yōu)迭代,越做越好。更好的大模型,會(huì)讓用戶體驗(yàn)不斷升級(jí)。
如需轉(zhuǎn)載請(qǐng)與《每日經(jīng)濟(jì)新聞》報(bào)社聯(lián)系。
未經(jīng)《每日經(jīng)濟(jì)新聞》報(bào)社授權(quán),嚴(yán)禁轉(zhuǎn)載或鏡像,違者必究。
讀者熱線:4008890008
特別提醒:如果我們使用了您的圖片,請(qǐng)作者與本站聯(lián)系索取稿酬。如您不希望作品出現(xiàn)在本站,可聯(lián)系我們要求撤下您的作品。
歡迎關(guān)注每日經(jīng)濟(jì)新聞APP