每日經濟新聞 2023-03-16 15:35:53
每經記者 李少婷 每經編輯 楊夏
3月16日下午,文心一言發布會在百度科技園舉行,百度創始人李彥宏表示,文心一言是百度十幾年超大規模的開發投入積累來的。
李彥宏現場演示了文心一言的多種能力。
“從文心一言的表現看,某種程度上它具有了對人類意圖的理解能力,回答的準確性、邏輯性、流暢性,都逐漸接近人類水平。但整體而言,這類大語言模型還遠未到發展完善的階段,它們有時候會有很驚艷的表現,但不少場景下,細究起來還有明顯的bug,進步空間很大。未來這段時間它一定會飛速發展,日新月異。”
李彥宏認為,人類進入人工智能時代,IT技術的技術棧發生了根本性變化。過去基本分為三層:芯片層,操作系統層和應用層?,F在可以分為四層:芯片層、框架層、模型層和應用層。
“百度是全球為數不多、在這四層進行全棧布局的人工智能公司。”李彥宏介紹,文心一言位于模型層。2019年,百度推出了文心大模型ERNIE 1.0。目前,ERNIE 3.0每天接受數十億次用戶的搜索請求。這讓文心一言能夠基于一個龐大的、高效的數據池,快速地學習和改進。
“大模型訓練堪稱暴力美學,需要有大算力、大數據和大模型,每一次訓練任務都耗資巨大。”李彥宏介紹,全棧布局的優勢在于,可以在技術棧的四層架構中,實現端到端優化,大幅提升效率。尤其是,框架層和模型層之間,有很強的協同作用,可以幫助構建更高效的模型,并顯著降低成本。事實上,超大規模模型的訓練和推理,給深度學習框架帶來了很大考驗。
李彥宏還表示,芯片、框架、大模型和終端應用場景,可以形成一個高效的反饋閉環,幫助大模型不斷去調優迭代,越做越好。更好的大模型,會讓用戶體驗不斷升級。
如需轉載請與《每日經濟新聞》報社聯系。
未經《每日經濟新聞》報社授權,嚴禁轉載或鏡像,違者必究。
讀者熱線:4008890008
特別提醒:如果我們使用了您的圖片,請作者與本站聯系索取稿酬。如您不希望作品出現在本站,可聯系我們要求撤下您的作品。
歡迎關注每日經濟新聞APP