2025年02月07日 14:58:41
華為AI模型量化相關(guān)專利公布 可減少模型占用內(nèi)存
《科創(chuàng)板日報》7日訊,財聯(lián)社創(chuàng)投通數(shù)據(jù)顯示,華為技術(shù)有限公司申請的“人工智能模型的量化方法、處理系統(tǒng)和量化單元”專利近日公布。摘要顯示,量化單元可以基于運行AI模型的計算設(shè)備的各個計算單元的處理粒度,將量化矩陣分割成多個適用于各個計算單元的處理粒度的分塊量化矩陣。量化單元可以對分塊量化矩陣進行量化處理,以得到量化后的分塊量化矩陣,并存儲在存儲器中,可以減少AI模型占用的內(nèi)存。
收藏
78.03W
我要評論
歡迎您發(fā)表有價值的評論,發(fā)布廣告和不和諧的評論都將會被刪除,您的賬號將禁止評論。
發(fā)表評論
關(guān)聯(lián)話題
4.69W 人關(guān)注
4.82W 人關(guān)注