當前熱門:生成式AI既需要云,也需要數(shù)十億網(wǎng)聯(lián)終端

發(fā)布時間:2023-05-19 14:23:10  |  來源:通信世界全媒體  

高通公司總裁兼CEO 安蒙

生成式AI的創(chuàng)新和發(fā)展速度前所未有,而這僅僅是一個開始。人們使用這項技術的方式、場景和原因?qū)浅V泛,甚至超乎想象。初步估計顯示,生成式AI市場規(guī)模將達到1萬億美元。

生成式AI不僅有望改變?nèi)藗兯阉骱蛣?chuàng)作內(nèi)容的方式,還能夠改善日常生活。借助生成式AI,智能手機能夠成為真正的數(shù)字助手,讓用戶自然地溝通交流,并獲得貼切的回答。PC用戶可以利用這項技術閱讀或撰寫電子郵件、起草文檔和自動創(chuàng)建演示文稿。在駕乘汽車時,對話式車內(nèi)助手可以對汽車充電、購買停車券或在回家途中預訂晚餐提供建議。商店的AI服務臺和智能購物車能夠根據(jù)每周特惠、預算金額和家庭偏好,幫助消費者擬定食譜。


(資料圖片)

為了釋放這項技術的全部潛能并滿足日益增長的需求,生成式AI既需要云,也需要數(shù)十億能夠以低功耗進行高性能AI計算的網(wǎng)聯(lián)終端,如智能手機、PC和汽車。這就是混合AI?;旌螦I計算架構在云端和終端進行分布式處理,能夠優(yōu)化效率并提升整體用戶體驗。

生成式AI處理可以直接在終端側(cè)運行,也可以按需發(fā)送到云端,或者將兩者相結合——無論采取何種方式,對用戶而言都是無縫實現(xiàn)的。

用戶期望擁有與傳統(tǒng)搜索類似的體驗,那就是能夠瞬間顯示搜索結果。要滿足這樣的期望,還要保證服務質(zhì)量,僅利用云端處理的成本太高,尤其是在需求高峰期,因此難以實現(xiàn)規(guī)?;?/p>

數(shù)據(jù)中心能耗高且價格昂貴。據(jù)估計,每一次基于生成式AI的網(wǎng)絡搜索查詢(query),其成本是傳統(tǒng)搜索的10倍。以每天超過100億次查詢計算,每年的增量成本可能達到數(shù)十億美元。網(wǎng)絡搜索只是生成式AI變革多個行業(yè)的眾多方式之一。

除成本外,在云端進行全部推理處理還面臨隱私、可靠性和性能方面的挑戰(zhàn)。當請求進入云端、數(shù)據(jù)離開終端時,就會產(chǎn)生潛在的安全問題。事實上,由于收集和存儲個人數(shù)據(jù)等監(jiān)管和合規(guī)問題導致模型被禁用或暫時禁用的情況已經(jīng)出現(xiàn)。

混合AI勢不可擋。隨著人們不斷探尋使用生成式AI的新方式,對云基礎設施的需求將激增。混合AI處理將是計算的下一次轉(zhuǎn)型,正如我們所看到的從大型主機演進到臺式機,再到今天云和我們手中的終端相結合的模式一樣。

利用高性能、低功耗終端的處理能力,將能夠高效推動生成式AI的規(guī)?;瘮U展。云端和終端將協(xié)同工作,通過強大、高效且高度優(yōu)化的AI功能,打造下一代用戶體驗。


關鍵詞:

 

網(wǎng)站介紹  |  版權說明  |  聯(lián)系我們  |  網(wǎng)站地圖 

星際派備案號:京ICP備2022016840號-16 營業(yè)執(zhí)照公示信息版權所有 郵箱聯(lián)系:920 891 263@qq.com