客服機(jī)器人、智能助手、問(wèn)答系統(tǒng)...大模型時(shí)代,想干的有點(diǎn)多。
別急,先考慮好這件「頭等大事」:
如何將企業(yè)數(shù)據(jù)高效接入大模型?
向量數(shù)據(jù)庫(kù),就是數(shù)據(jù)和大模型之間的這座橋。
它把數(shù)據(jù)向量化,然后進(jìn)行存儲(chǔ)和查詢,極大地提升效率、降低成本,解決了大模型預(yù)訓(xùn)練成本高、存在幻覺(jué)、沒(méi)有“長(zhǎng)期記憶”、知識(shí)更新不及時(shí)等問(wèn)題。
用大模型前,如果要拉個(gè)購(gòu)物清單,別忘了它。
剛剛,騰訊云向量數(shù)據(jù)庫(kù)全量開(kāi)放公測(cè)!
這是國(guó)內(nèi)首個(gè)從接入層、計(jì)算層、到存儲(chǔ)層提供全生命周期AI化的向量數(shù)據(jù)庫(kù)。
7月發(fā)布以來(lái),它的應(yīng)用全面加速:
目前,騰訊云向量數(shù)據(jù)庫(kù)已經(jīng)服務(wù)騰訊內(nèi)部40多個(gè)業(yè)務(wù)、數(shù)百家公有云外部客戶,涉及SaaS、工具、教育、游戲等多個(gè)行業(yè),幫助企業(yè)快速落地應(yīng)用。
舉個(gè)例子——
百川智能,除了利用云上算力打造大模型,還聯(lián)合騰訊云向量數(shù)據(jù)庫(kù),搭建基于用戶知識(shí)庫(kù)的智能問(wèn)答演示系統(tǒng),幫助用戶構(gòu)建個(gè)性化的知識(shí)庫(kù)。
同時(shí),還通過(guò)“大模型集成向量數(shù)據(jù)庫(kù)"的模式,一起構(gòu)建AIGC行業(yè)解決方案。
目前,該方案已在百川智能AIGC黑客馬拉松中試水,幫助企業(yè)與個(gè)人開(kāi)發(fā)快速落地大模型應(yīng)用。
騰訊云向量數(shù)據(jù)庫(kù),戰(zhàn)斗力肉眼可見(jiàn):
-高達(dá)100億級(jí)向量檢索規(guī)模,將延遲控制在毫秒級(jí)。從大模型預(yù)訓(xùn)練數(shù)據(jù)的分類、去重到清洗,再大規(guī)模的向量請(qǐng)求都能滿足。
-計(jì)算成本低于行業(yè)水平2倍以上。如果將向量數(shù)據(jù)庫(kù)作為外部知識(shí)庫(kù),用于模型推理,可以將成本降低2-4個(gè)數(shù)量級(jí)。
-最高支持每秒百萬(wàn)次的查詢量(QPS),領(lǐng)先行業(yè)平均水平1.5倍以上,穩(wěn)穩(wěn)hold住企業(yè)的AI查詢峰值請(qǐng)求。
-獨(dú)家集成Embedding功能,對(duì)齊傳統(tǒng)數(shù)據(jù)庫(kù)使用體驗(yàn)。不用再關(guān)注向量的生成過(guò)程,也可以實(shí)現(xiàn)數(shù)據(jù)快速處理,輕松擁抱AGI生態(tài)。
-以前,將數(shù)據(jù)接入大模型需要花1個(gè)月左右,使用騰訊云向量數(shù)據(jù)庫(kù)3天時(shí)間即可完成,極大降低企業(yè)接入成本。
今年來(lái),騰訊云針對(duì)大模型場(chǎng)景,已經(jīng)建立起覆蓋數(shù)據(jù)預(yù)處理、預(yù)訓(xùn)練、精調(diào)、推理等全流程的laaS層基礎(chǔ)設(shè)施、PaaS層計(jì)算平臺(tái)與上層工具的全套解決方案。
用云上基礎(chǔ)設(shè)施加速AIGC全面落地,我們繼續(xù)努力!