自拍偷拍亚洲一区二区_日本欧美亚洲精品在线观看_日本 欧美 国产中文字幕_午夜中文乱码福利

中國(guó)西藏網(wǎng) > 即時(shí)新聞 > 博覽

彭博針對(duì)金融業(yè)推出大型語(yǔ)言模型BloombergGPT

發(fā)布時(shí)間:2023-04-03 09:03:00來(lái)源: 中國(guó)新聞網(wǎng)

  中新網(wǎng)3月31日電 3月30日,彭博發(fā)布公告稱,推出為金融界打造的大型語(yǔ)言模型(LLM)——BloombergGPT。

  

  圖片來(lái)源:彭博網(wǎng)站截圖

  彭博是一家全球商業(yè)、金融信息和新聞資訊提供商。3月30日,該公司發(fā)布了一篇關(guān)于BloombergGPT開(kāi)發(fā)情況的研究論文,詳細(xì)介紹了這一大規(guī)模生成式人工智能(AI)模型。該大語(yǔ)言模型(LLM)專門針對(duì)各類金融數(shù)據(jù)進(jìn)行訓(xùn)練,以全方位支持金融領(lǐng)域的自然語(yǔ)言處理(NLP)任務(wù)。

  據(jù)彭博微信公眾號(hào)消息,該模型將幫助彭博改進(jìn)現(xiàn)有的金融NLP任務(wù),如市場(chǎng)情緒分析、命名實(shí)體識(shí)別、新聞分類和問(wèn)題回答等。此外,BloombergGPT還將釋放更多新機(jī)遇,調(diào)動(dòng)彭博終端上的海量數(shù)據(jù),將人工智能的潛力帶到金融領(lǐng)域。

  據(jù)介紹,彭博的研究人員開(kāi)創(chuàng)了一種混合訓(xùn)練法,將金融數(shù)據(jù)與通用數(shù)據(jù)集結(jié)合起來(lái)訓(xùn)練模型,以達(dá)到在金融基準(zhǔn)上取得最佳結(jié)果,同時(shí)在通用LLM基準(zhǔn)上也保持足夠的競(jìng)爭(zhēng)力。

  與此同時(shí),彭博的機(jī)器學(xué)習(xí)產(chǎn)品和研究小組和人工智能工程團(tuán)隊(duì)合作,利用彭博在數(shù)據(jù)創(chuàng)建、收集和整理方面的資源,構(gòu)建了迄今為止規(guī)模最大的專業(yè)領(lǐng)域數(shù)據(jù)集之一。

  作為一家金融數(shù)據(jù)公司,彭博的數(shù)據(jù)分析師在四十多年的時(shí)間里收集和維護(hù)了運(yùn)用大量金融用語(yǔ)的文檔。開(kāi)發(fā)團(tuán)隊(duì)從這個(gè)由海量英文金融文檔組成的檔案庫(kù)中,提取并創(chuàng)建了一個(gè)包含3630億詞例(token)的金融數(shù)據(jù)集。這批數(shù)據(jù)又與另一個(gè)包含3450億詞例的公共數(shù)據(jù)集疊加,成為了包含超7000億詞例的大型訓(xùn)練語(yǔ)料庫(kù)。

  彭博的研究團(tuán)隊(duì)利用該語(yǔ)料庫(kù)的一部分內(nèi)容,訓(xùn)練了純解碼器(decoder-only)因果語(yǔ)言模型,包含500億個(gè)參數(shù)。團(tuán)隊(duì)還對(duì)訓(xùn)練出的模型進(jìn)行了基準(zhǔn)測(cè)試。金融領(lǐng)域的NLP任務(wù)采用了一套彭博的自有基準(zhǔn),各類通用NLP任務(wù)則采用市面上流行的基準(zhǔn)。

  彭博稱,BloombergGPT模型在金融任務(wù)上的表現(xiàn)遠(yuǎn)超類似規(guī)模的開(kāi)放模型,而在一般NLP基準(zhǔn)上的表現(xiàn)也達(dá)到甚至超過(guò)平均水平。

  彭博首席技術(shù)官肖恩·愛(ài)德華茲(Shawn Edwards)還表示,“BloombergGPT將使我們能夠處理許多新型的應(yīng)用,不僅比定制化模型的表現(xiàn)更好,而且開(kāi)箱即用,能夠大大縮短上線時(shí)間?!?/p>

(責(zé)編: 王東)

版權(quán)聲明:凡注明“來(lái)源:中國(guó)西藏網(wǎng)”或“中國(guó)西藏網(wǎng)文”的所有作品,版權(quán)歸高原(北京)文化傳播有限公司。任何媒體轉(zhuǎn)載、摘編、引用,須注明來(lái)源中國(guó)西藏網(wǎng)和署著作者名,否則將追究相關(guān)法律責(zé)任。