新浪科技訊 5月26日午間消息,近日,度小滿正式開(kāi)源國(guó)內(nèi)首個(gè)千億級(jí)中文金融大模型——“軒轅”。軒轅大模型是在1760億參數(shù)的Bloom大模型基礎(chǔ)上訓(xùn)練而來(lái),在金融名詞理解、金融市場(chǎng)評(píng)論、金融數(shù)據(jù)分析和金融新聞理解等任務(wù)上,效果相較于通用大模型大幅提升。
BLOOM (Big Science Language Open-science Open-access Multilingual)是2021年由 1000 多名志愿研究人員在一個(gè)名為“大科學(xué) BigScience”的項(xiàng)目中創(chuàng)建,2022年 7 月 12 日正式發(fā)布。BLOOM 擁有 1760 億個(gè)參數(shù)(決定輸入數(shù)據(jù)如何轉(zhuǎn)換為輸出內(nèi)容的變量),稍多于擁有 1750 億個(gè)參數(shù)的 GPT-3。BLOOM擁有1.61TB文本,包含46種自然語(yǔ)言和13種編程語(yǔ)言。相比Meta發(fā)布的130億參數(shù)的LLaMA(Large Language Model Meta AI)模型,Bloom參數(shù)量更占優(yōu)勢(shì)。
目前,千億級(jí)的軒轅模型已可以在Huggingface中申請(qǐng)下載,面向所有金融機(jī)構(gòu)開(kāi)放。
度小滿CTO許冬亮表示,軒轅大模型是經(jīng)度小滿業(yè)務(wù)場(chǎng)景中積累的金融數(shù)據(jù)訓(xùn)練而來(lái)的,對(duì)金融相關(guān)問(wèn)題的理解比通用大模型更有優(yōu)勢(shì)。我們把大模型能力開(kāi)放給金融機(jī)構(gòu),有利于推動(dòng)大模型在金融行業(yè)的應(yīng)用,降低大模型的應(yīng)用門檻,提升金融行業(yè)智能化水平。
本文轉(zhuǎn)載自新浪科技。本站轉(zhuǎn)載此文目的在于傳遞更多信息,并不代表贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)。如涉及作品內(nèi)容、版權(quán)和其它問(wèn)題,請(qǐng)?jiān)?0日內(nèi)與本網(wǎng)聯(lián)系,我們將在第一時(shí)間刪除內(nèi)容,本網(wǎng)站對(duì)此聲明具有最終解釋權(quán)。