中國(guó)電信TeleChat大模型重磅發(fā)布,賦能產(chǎn)業(yè)數(shù)字化行業(yè)應(yīng)用

2023年7月6日,世界人工智能大會(huì)在上海世博中心及世博展覽館正式拉開(kāi)帷幕。在中國(guó)電信“算網(wǎng)一體·融創(chuàng)未來(lái)”的分論壇上,中國(guó)電信數(shù)字智能科技分公司(以下簡(jiǎn)稱(chēng):電信智科)正式對(duì)外發(fā)布中國(guó)電信大語(yǔ)言模型TeleChat,并展示了大模型賦能數(shù)據(jù)中臺(tái)、智能客服和智慧政務(wù)三個(gè)方向的產(chǎn)品。

發(fā)布會(huì)現(xiàn)場(chǎng),電信智科副總經(jīng)理何忠江表示,近年來(lái),人工智能開(kāi)始爆發(fā)性增長(zhǎng),并進(jìn)入生成式AI時(shí)代。在這過(guò)程中,人工智能從機(jī)器智能、感知智能轉(zhuǎn)化為認(rèn)知智能,即通過(guò)抽象推理的方式理解自然語(yǔ)言。其中,GPT模型是人工智能技術(shù)發(fā)展變遷的重要代表,作為一種自然語(yǔ)言處理模型,GPT模型通過(guò)在大型文本語(yǔ)料庫(kù)上的訓(xùn)練學(xué)習(xí)到語(yǔ)言模式用于生成自然語(yǔ)言文本,為信息檢索、機(jī)器翻譯和文本摘要等多類(lèi)任務(wù)提供了有效的解決方案。

中國(guó)電信依托云網(wǎng)融合的優(yōu)勢(shì),打造了中國(guó)電信的大語(yǔ)言模型TeleChat。TeleChat使用了大量高質(zhì)量中英文語(yǔ)料進(jìn)行預(yù)訓(xùn)練,并采用了千萬(wàn)級(jí)問(wèn)答數(shù)據(jù)進(jìn)行微調(diào)。同時(shí),設(shè)計(jì)了漸進(jìn)膨脹注意力機(jī)制,用于增加模型的間隔采樣,擴(kuò)大實(shí)際感受野;研發(fā)了自校準(zhǔn)微調(diào)技術(shù),將迭代后相關(guān)性偏差作為強(qiáng)化學(xué)習(xí)的監(jiān)督信號(hào),提升強(qiáng)化學(xué)習(xí)效果;并且利用知識(shí)圖譜協(xié)同增強(qiáng)策略,通過(guò)知識(shí)圖譜增強(qiáng)大模型的預(yù)訓(xùn)練和推理能力,減少大模型幻覺(jué)現(xiàn)象。

此外,以TeleChat為底座的教育版大模型TeleChat-E在全球大模型綜合性考試評(píng)測(cè)榜單C-Eval上排名第七,前幾名包括GP4、ChatGPT等知名大模型。TeleChat-E使用人工收集、標(biāo)注、整理的高質(zhì)量領(lǐng)域數(shù)據(jù)對(duì)TeleChat進(jìn)行持續(xù)效果強(qiáng)化。同時(shí),TeleChat-E對(duì)Transformer Decoder的損失函數(shù)進(jìn)行改進(jìn),使之更加關(guān)注題目答案的生成,提高準(zhǔn)確率。

何忠江指出,通過(guò)大模型機(jī)制,神經(jīng)網(wǎng)絡(luò)已經(jīng)可以愈加擬人化。在當(dāng)下,電信TeleChat大模型正在與千行百業(yè)的信息化解決方案進(jìn)行融合,在諸多行業(yè)實(shí)現(xiàn)商業(yè)化落地。本次論壇重點(diǎn)展示了三個(gè)大模型賦能行業(yè)應(yīng)用的產(chǎn)品。

一是大模型+數(shù)據(jù)中臺(tái)產(chǎn)品。中國(guó)電信演示了將AI能力和數(shù)據(jù)中臺(tái)深度融合,打造AI智能取數(shù)能力,基于大數(shù)據(jù)平臺(tái)生成的可視化圖表。目前已實(shí)現(xiàn)大數(shù)據(jù)中臺(tái)大模型將數(shù)據(jù)平臺(tái)的權(quán)限和脫敏能力打通,使用戶(hù)可以獲取到自己權(quán)限范圍內(nèi)的數(shù)據(jù)表中脫敏后的字段值,比如姓名、電話(huà)號(hào)碼等。當(dāng)進(jìn)入到AI取數(shù)模塊時(shí),用戶(hù)可以根據(jù)自身需求讓大模型生成SQL、可視化圖表和分析報(bào)告。

二是大模型+智能客服產(chǎn)品,TeleChat大模型能夠輔助坐席或用戶(hù)快速獲取文章和材料內(nèi)的信息。在現(xiàn)場(chǎng)演示中可以看到,通過(guò)一站式人機(jī)融合知識(shí)中臺(tái)查看產(chǎn)品介紹材料,再激活大模型懸浮對(duì)話(huà)框,接下來(lái)上傳需要模型理解的文件,即可得到理解后生成的反饋。在TeleChat的幫助下,坐席無(wú)需閱讀全文找答案,既解決了模型幻覺(jué)問(wèn)題,還能夠做到知識(shí)庫(kù)管理權(quán)限隔離。

三是大模型+智慧政務(wù)產(chǎn)品,中國(guó)電信TeleChat大模型依托5G消息,為政務(wù)客戶(hù)提供政務(wù)短信智能化多輪問(wèn)答,進(jìn)行行業(yè)領(lǐng)域的基礎(chǔ)語(yǔ)言模型訓(xùn)練和領(lǐng)域問(wèn)答能力微調(diào),并基于領(lǐng)域問(wèn)題反饋的強(qiáng)化學(xué)習(xí),最終實(shí)現(xiàn)對(duì)行業(yè)領(lǐng)域?qū)I(yè)問(wèn)題的精準(zhǔn)回答和平臺(tái)推送反饋。

人工智能發(fā)展的巨大浪潮中,中國(guó)電信將依托云網(wǎng)融合優(yōu)勢(shì),打造四級(jí)智能算力體系,圍繞行業(yè)應(yīng)用需求,聯(lián)合產(chǎn)業(yè)鏈上下游生態(tài)合作伙伴,為千行百業(yè)量身打造定制化的行業(yè)應(yīng)用大模型,促進(jìn)各行業(yè)數(shù)字化、智能化轉(zhuǎn)型升級(jí),為建設(shè)數(shù)字中國(guó)貢獻(xiàn)電信力量。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。

2023-07-07
中國(guó)電信TeleChat大模型重磅發(fā)布,賦能產(chǎn)業(yè)數(shù)字化行業(yè)應(yīng)用
中國(guó)電信TeleChat大模型重磅發(fā)布,賦能產(chǎn)業(yè)數(shù)字化行業(yè)應(yīng)用,2023年7月6日,世界人工智能大會(huì)在上海世博中心及世博展覽館正式拉開(kāi)帷幕。在中國(guó)電信算網(wǎng)一體融創(chuàng)未

長(zhǎng)按掃碼 閱讀全文