大模型催生多樣化數(shù)據(jù)處理數(shù)據(jù)存儲將會出現(xiàn)新要求

2023-05-14 17:13:41 編輯：周蓓瑤來源：

導(dǎo)讀大模型語言已經(jīng)成為近年來備受關(guān)注的一種技術(shù)，以ChatGPT為代表打造的智能語言模型技術(shù)掀起AIGC狂潮。算力就是生產(chǎn)力，數(shù)據(jù)是核心生產(chǎn)要素...

大模型語言已經(jīng)成為近年來備受關(guān)注的一種技術(shù)，以ChatGPT為代表打造的智能語言模型技術(shù)掀起AIGC狂潮。算力就是生產(chǎn)力，數(shù)據(jù)是核心生產(chǎn)要素。大模型語言催生多樣化數(shù)據(jù)處理，為數(shù)據(jù)存儲提出更高要求。首先需要完成基于海量多肽數(shù)據(jù)的訓(xùn)練，其次是要面向海量終端的數(shù)據(jù)應(yīng)用。

大模型在未來可能會被廣泛應(yīng)用于各種不同的行業(yè)，模型類型也會更加全面化，包括文本，圖片，音頻，視頻等等。隨著容量邁進(jìn)，對存儲的架構(gòu)，性能等核心能力會有更高要求。大模型語言需要通過處理大量數(shù)據(jù)反復(fù)迭代，根據(jù)用戶終端輸入的信息做推理答復(fù)。有專家稱：“這相當(dāng)于神經(jīng)網(wǎng)絡(luò)的閉環(huán)的訓(xùn)練。”“海量用戶終端的接入，對數(shù)據(jù)推理和網(wǎng)絡(luò)時延提出高挑戰(zhàn)。”