
智東西(公眾號:zhidxcom)
作者 | ZeR0
編輯 | 漠影
智東西4月16日報道,一場圍繞AI/AR眼鏡的高質量專題技術研討會,今日在上海舉行。當前AI/AR眼鏡面臨何種殘酷現實?主流方案各有哪些利弊?如何破解關鍵技術痛點與產業困局?在今(jin)天的芯原可(ke)穿戴專題技術(shu)探討會(hui)上,來自(zi)產業鏈領先企(qi)業及投資機構(gou)的嘉賓(bin)們圍繞這些議(yi)題進行(xing)了干貨滿滿的觀點(dian)交鋒(feng)。
其中不乏多項熱點問題,包括哪類AI眼鏡更受市場歡迎、哪種交互方式更符合現在的AI眼鏡需求、當前AI眼鏡的主流芯片方案、如何從系統層降低AI眼鏡的整體功耗、如何在AI眼鏡上部署生成式AI、哪類玩家將會占據更多的AI眼鏡市場份額等等。
芯原股(gu)份創始人(ren)、董(dong)事長(chang)兼總(zong)裁戴偉(wei)民在(zai)會上發表致辭。他分享說,芯原股(gu)份在(zai)三年前就幫國際(ji)互聯(lian)網企業做AR眼(yan)鏡的芯片,并關注隱私(si)和(he)加密(mi)問題,當(dang)時他堅持認(ren)為(wei)AR眼(yan)鏡在(zai)2025年會有爆發點。
戴(dai)偉(wei)民(min)還提到DeepSeek帶(dai)來“巧力出奇(qi)跡”的啟發,推動端側AI發展,AI模型不(bu)僅能(neng)塞進手機,也有(you)可能(neng)放在眼鏡中。AR眼鏡的重點包(bao)括超(chao)輕(qing)量和超(chao)低(di)功耗,如果(guo)超(chao)過30克就有(you)問題(ti)。
同時,芯原股份在今(jin)日宣布推出(chu)全新超(chao)低(di)功(gong)耗的GPU IP——GCNano3DVG。該IP具備(bei)3D和2.5D圖形(xing)渲染(ran)功(gong)能,在視覺效果與功(gong)耗效率之(zhi)間(jian)實(shi)現(xian)了平(ping)衡(heng),專(zhuan)為(wei)可穿(chuan)戴設備(bei)及其(qi)他需要動態(tai)圖形(xing)渲染(ran)的緊湊型電池供電設備(bei)而設計,如智能手(shou)表(biao)、智能手(shou)環(huan)、AI/AR眼鏡等。
一、中國有望成為全球最大AR設備市場,DeepSeek推動終端AI爆發
芯原股份首(shou)席戰(zhan)略官、執行副總裁、IP事業部(bu)總經理戴偉(wei)進分享了可穿戴設(she)備的(de)AI交互趨勢,提到中國有(you)望成為全(quan)球最(zui)大的(de)單一(yi)AR設(she)備市場。
AI眼鏡有幾大特點:集成多個傳感器,始終在線收集信息,支持通過自然語言進行類似人與人的實時互動,既支持設備端低功耗人機交互,也支持連接到云端AI服務器,并向長續航、輕重量發展。
當前可穿(chuan)戴AI市(shi)(shi)場快速增長。研究機構GMInsights的(de)統(tong)計顯(xian)示,2024年(nian),全球(qiu)可穿(chuan)戴AI市(shi)(shi)場規模為397億美元,預計2025年(nian)到(dao)2034年(nian)間(jian)CAGR市(shi)(shi)場將達到(dao)27.7%。
根據多家(jia)研究(jiu)機構的(de)報告及公開信(xin)息(xi),2023年全球和(he)中(zhong)(zhong)國(guo)(guo)(guo)AR設備(bei)出(chu)(chu)貨(huo)量(liang)(liang)分別達到50萬臺(tai)和(he)24萬臺(tai),預計2027年出(chu)(chu)貨(huo)量(liang)(liang)將分別超(chao)過1500萬臺(tai)和(he)750萬臺(tai);2025年中(zhong)(zhong)國(guo)(guo)(guo)AR設備(bei)出(chu)(chu)貨(huo)量(liang)(liang)將率先達到百萬臺(tai)水平(ping),占全球出(chu)(chu)貨(huo)量(liang)(liang)的(de)一(yi)半以(yi)上;預計2023-2027年全球出(chu)(chu)貨(huo)量(liang)(liang)復合(he)年增長率為(wei)(wei)135.9%,而中(zhong)(zhong)國(guo)(guo)(guo)的(de)復合(he)年增長率為(wei)(wei)138.6%。中(zhong)(zhong)國(guo)(guo)(guo)有望(wang)成為(wei)(wei)全球最大的(de)單一(yi)AR設備(bei)市(shi)場。
AI眼鏡市場(chang)規模(mo)有(you)望(wang)飆(biao)升至上千(qian)億(yi)元。維深信息(xi)Wellsenn XR數據顯示,2024年全(quan)球AI眼鏡銷(xiao)量(liang)(liang)達到(dao)152萬(wan)副,預計2025年將(jiang)達到(dao)350萬(wan)副,到(dao)2029年將(jiang)達到(dao)6000萬(wan)副,到(dao)2035年可能(neng)達到(dao)14億(yi)副,中(zhong)國(guo)市場(chang)占(zhan)很(hen)大(da)份額(e)。另據IDC報告,2024年國(guo)內(nei)AI眼鏡市場(chang)有(you)望(wang)突破200億(yi)元,預計到(dao)2030年將(jiang)呈(cheng)指數級(ji)增(zeng)長(chang),規模(mo)達到(dao)1200億(yi)元量(liang)(liang)級(ji),復合年增(zeng)長(chang)率為35%。
DeepSeek推動終(zhong)端(duan)AI及應(ying)用爆發,刺激了低參(can)數模型(xing)(xing)的推出,為在終(zhong)端(duan)設備上部署(shu) “小AI大模型(xing)(xing)” 和(he) “小AI模型(xing)(xing)” 提供支持。在2024年(nian)之前,預訓(xun)練模型(xing)(xing)追求更大的參(can)數規模;2025年(nian),大模型(xing)(xing)開始向(xiang)高(gao)參(can)數量和(he)低參(can)數量兩極分化。
AI Agent是一(yi)個能夠(gou)自主(zhu)感知環境、決(jue)策和(he)執行任務的智能系統(tong),通過結(jie)合(he)機器學習、NLP、計(ji)算機視覺(jue)和(he)強化學習。
AI眼(yan)鏡是GPT-4o等多模態大(da)模型的最佳載體之一(yi)。AI+AR可有效(xiao)提升產品智(zhi)能屬性,賦(fu)能語音助手、圖像分析和智(zhi)能導航,為終端用戶(hu)提供智(zhi)能、優質、個(ge)性化的服務。
多模態AI基礎(chu)模型可提(ti)供問答、總(zong)結、實時字幕、內(nei)容創作、零距離學習、場景/物(wu)體識別、動作識別等功能(neng)(neng)。基于(yu)該模型,AR眼鏡能(neng)(neng)夠(gou)捕捉并(bing)記住用戶見過(guo)的場景,實時感(gan)知誰在說(shuo)話及說(shuo)話內(nei)容,并(bing)能(neng)(neng)夠(gou)進行即(ji)時翻譯。
核心AI助手功能包(bao)括實時視(shi)覺(jue)識別、語音交互、場景理解、GPS定(ding)位(wei)、活動識別、AR導航(hang)、個人(ren)生產(chan)力工具、記憶(yi)輔助、健康安全監測等(deng)。
在(zai)(zai)可穿戴設(she)(she)備中,芯原(yuan)低功耗(hao)IP系列提(ti)供了超低功耗(hao)、低延遲、DDR-Less的(de)可穿戴解決方(fang)案(an)。超過(guo)30家手表SoC客戶(hu)(hu)已(yi)獲得芯原(yuan)低功耗(hao)IP的(de)授權。世界(jie)領先的(de)AI/AR客戶(hu)(hu)正與芯原(yuan)在(zai)(zai)AR設(she)(she)備上合作。
VeriHealthi健(jian)(jian)康監測平臺提供(gong)從芯(xin)片設計到軟件系統和(he)基于芯(xin)原IP的參(can)考(kao)應(ying)用(yong)(yong)的一(yi)站(zhan)式健(jian)(jian)康監測平臺和(he)一(yi)站(zhan)式定制(zhi)服務。該平臺提供(gong)各種參(can)考(kao)應(ying)用(yong)(yong)程序,適用(yong)(yong)于手機和(he)iPad的應(ying)用(yong)(yong)程序已經推出。
二、從關鍵零部件看AI/AR眼鏡市場發展,未來將是“贏家通吃”
Omdia高級分析師林麟系統性地分享了AI/AR眼鏡的發展路徑,談到目前業界對AI/AR眼鏡的定義尚未完全統一,這兩類都要(yao)具備智能(neng),Omdia的(de)分類是把不帶(dai)屏(ping)幕的(de)眼(yan)鏡(jing)稱(cheng)作(zuo)AI眼(yan)鏡(jing),把帶(dai)顯示(shi)模塊光學(xue)組件的(de)眼(yan)鏡(jing)稱(cheng)作(zuo)AR眼(yan)鏡(jing)。
他認為其長期方向是AI+AR融合發展:AI提升AR的交互智能(如手勢識別、眼(yan)動(dong)追蹤等(deng)),AR為AI提供虛實融合的顯示載體。
林麟總結說,AI/AR眼鏡硬件快速同質化,進入價格戰,AR眼鏡需憑借光學引擎脫穎而出。軟件上,大模型將是競爭核心,各家在大模型訓練上探索不同方向和側重點,如強化搜索、私人助理、導航、解題等不同功能。此外,AI/AR眼鏡有望成為新的小程序入口端口,卡位意義極其重要。
他預測,AI/AR眼鏡產品雖然現在看起來是“百鏡大戰”,未來可能是一個“贏家通吃”的局面,真正可以存活的品牌可能不會超過5家。
當前AI/AR眼鏡芯片主要有三類:(1)系統級SoC,如高通AR1 Gen1;(2)MCU級SoC+ISP,如恒玄科技BES2500YP、BES2700、BES2800以及展銳W517;(3)MCU,如(ru)富瀚微(wei)MC6350、瑞(rui)芯微(wei)RK3588和RK356X、聚信科技ATS3085。
AI/AR眼鏡(jing)芯片(pian)需(xu)考慮性(xing)能、成本、續航的平(ping)衡。例(li)如先進制程存在價格貴(gui)、功耗高(gao)等問題。
用于AR的顯示技術有LCoS、DLP、LBS、Micro OLED、Micro LED等。其中前三類漸漸用的不多了;自發光的Micro OLED和Micro LED具有優勢,尤其Micro LED因高亮度有望成為未來AR主流顯示屏。在(zai)中國,Micro LED已(yi)經成(cheng)熟,甚至出(chu)現產能過剩的情(qing)況;Micro LED可供選擇的資源也變得多(duo)起來。
Micro LED具有納米級響應速度、100000nits亮度、100000:1對比度、自發光、功耗低、壽命長等優勢,可搭配光波導成像方案,OPPO Air Glass、小米眼鏡等都采用了這種方案。目前用的比較多的是反(fan)射(she)/陣列/幾何光(guang)波導,它的光(guang)學效率比較高,但缺(que)點(dian)是良率較差;中(zhong)國廠(chang)商著力在表面浮雕衍射(she)式(shi)(shi)和體全息衍射(she)式(shi)(shi)光(guang)波導,前者相對比較成熟。
據不嚴謹統計,當前AI/AR眼鏡的AI功能使用頻率還不算高,許多消費者處在使用AI的初級階段。70%的(de)AI/AR眼鏡用戶幾乎不(bu)使用AI功能,或嘗(chang)鮮后不(bu)再使用AI功能;30%的(de)用戶會使用AI功能,這之(zhi)中(zhong),有超過(guo)50%用其作為搜索引擎,有大約30%用來翻譯,還有約20%使用了導航、問天(tian)氣等(deng)其他(ta)功能。
三、AI/AR眼鏡落地有三大技術挑戰,當前成本的大頭是SoC芯片
芯原股(gu)份解決(jue)方(fang)案(an)架構工程師劉(liu)律(lv)宏分享了芯原在緊耦合架構可穿戴子系統解決(jue)方(fang)案(an)上為AI/AR眼鏡優化功(gong)能、續航、重量(liang)方(fang)面的一(yi)些思路。
當前AI/AR眼鏡主要落地于實時翻譯、智能導航、智能教育、AR試穿、AI手術、設備巡檢、智能分揀、AI導游等應用場景,有三大技術難點:(1)重量與電池的極限壓縮;(2)能效比問題;(3)功能、續航與質量的矛盾。
這對多媒體子系統提出三個要求:(1)功能更豐富,支持更多的功能,更強大的算力;(2)續航更持久,包括更低的IP功耗、更高效的數據交互、更低的帶寬需求、更低的外部存儲空間要求;(3)質量輕便,佩戴舒適,面積更小。
芯原(yuan)股(gu)份多(duo)年來(lai)深(shen)耕可(ke)穿戴(dai)(dai)(dai)市場,緊跟市場需(xu)求(qiu)開發適(shi)配的IP和系統,每一個IP也(ye)提(ti)(ti)供(gong)了足夠多(duo)的可(ke)配置(zhi)(zhi)選項(xiang)。針對(dui)可(ke)穿戴(dai)(dai)(dai)產品需(xu)求(qiu),芯原(yuan)提(ti)(ti)供(gong)不(bu)同系列可(ke)配置(zhi)(zhi)小(xiao)面積(ji)、低功耗可(ke)穿戴(dai)(dai)(dai)像素處理(li)IP,已適(shi)配不(bu)同的產品需(xu)求(qiu),還開發了能夠滿足低功耗、低帶寬(kuan)等(deng)需(xu)求(qiu)的系統互聯IP。客戶(hu)可(ke)根(gen)據(ju)產品需(xu)求(qiu)靈活搭配這(zhe)些IP來(lai)搭建可(ke)穿戴(dai)(dai)(dai)方案。
芯原可(ke)(ke)(ke)穿戴(dai)方案基(ji)于緊耦合系(xi)統架構,提供靈(ling)活的(de)硬件(jian)方案和精簡的(de)軟(ruan)件(jian)代(dai)碼和配套,從(cong)三(san)個(ge)層面(mian)上提供支(zhi)持:第(di)一,芯原可(ke)(ke)(ke)穿戴(dai)IP系(xi)列靈(ling)活可(ke)(ke)(ke)配置,可(ke)(ke)(ke)適配不同產品(pin)需求;第(di)二,系(xi)統層面(mian)上FLEXA技(ji)術(shu)、壓縮技(ji)術(shu)等可(ke)(ke)(ke)以更高(gao)效靈(ling)活地連接可(ke)(ke)(ke)穿戴(dai)IP系(xi)列;第(di)三(san),針對可(ke)(ke)(ke)穿戴(dai)應用(yong)的(de)特點,專門定(ding)制(zhi)開發了適配的(de)精簡Lite版IP軟(ruan)件(jian),它(ta)有極小的(de)代(dai)碼、極小的(de)外存空(kong)間(jian)占用(yong)、極低(di)的(de)CPU負載,支(zhi)持RTOS、Linux、安(an)卓多操(cao)作系(xi)統。
例如,在有限的PSRAM帶寬(kuan)、空(kong)(kong)間和(he)簡單控制器等(deng)(deng)限制下,芯原可(ke)穿戴方案(an)幫助某客戶極大減少(shao)(shao)PSRAM訪問,以節省PSRAM帶寬(kuan)和(he)空(kong)(kong)間,從而減少(shao)(shao)系(xi)統功(gong)(gong)耗,并通過DECNano的應用(yong)使用(yong)有損壓縮(suo)技術減少(shao)(shao)部分通路下IP訪問PSRAM的數(shu)據量和(he)數(shu)據空(kong)(kong)間,最終實現系(xi)統性能(neng)、系(xi)統功(gong)(gong)耗、IP交互帶寬(kuan)、PSRAM空(kong)(kong)間等(deng)(deng)指(zhi)標(biao)的顯著(zhu)優化。
芯原極(ji)低功(gong)耗(hao)技術已被(bei)AR/VR產品廣泛(fan)采用,在(zai)極(ji)低功(gong)耗(hao)技術方面(mian)的合(he)作超過(guo)5年,在(zai)IP、ASIC方面(mian)深度(du)合(he)作,可(ke)穿戴(dai)方案已成(cheng)功(gong)落地(di)在(zai)包括AR/VR、智能手表(biao)、AIoT設備等各(ge)種(zhong)可(ke)穿戴(dai)項(xiang)目。
芯原股份NPU IP研發副總裁查凱南(nan)分(fen)享了(le)芯原AI計算IP產品(pin)陣容(rong)。其高(gao)效(xiao)推(tui)理NPU能夠運行1.5B Qwen2、7B Llama2、70B Llama3等模型。
當前AI/AR眼鏡面(mian)臨技術和生態挑戰,在平衡(heng)功(gong)率、性能(neng)、面(mian)積(ji)方面(mian),需探索(suo)如何更(geng)好地擴展 SRAM/DRAM;協同訓(xun)練方面(mian),需探索(suo)從哪里獲得數據來(lai)蒸餾更(geng)小(xiao)的模型(xing),以及如何評估模型(xing)/系統的組合;軟件方面(mian),需探索(suo)機器學(xue)習框(kuang)架是否需要更(geng)改以支持分布(bu)式神經級(ji)聯。
生態(tai)系統方面的(de)(de)挑戰包(bao)括(kuo)不斷變化的(de)(de)模型、多樣化的(de)(de)硬件環境(jing),以及如何讓生態(tai)系統協同工作(zuo)。
芯原股(gu)份片上系(xi)統高級設計總監郝鵬鵬分析了當前AI眼鏡(jing)的(de)芯片方案。從某款(kuan)AI眼鏡(jing)的(de)成本分析來(lai)看,SoC芯片部分仍占成本大頭(tou)。
當前主要(yao)芯片(pian)方(fang)案分三(san)類:
1、大而全:包含CPU/GPU/NPU/ISP/Display,優點是性能(neng)強大、可擴(kuo)展性高、集成度高,缺點是價(jia)格高、功耗難以優化、續航(hang)時(shi)間短、存(cun)在技(ji)術(shu)支持和供貨問題。
2、小而精:突(tu)出某一方面功(gong)能(neng)(neng)(音(yin)頻為主),優點是價格低,缺點是功(gong)能(neng)(neng)單一、需要搭配(pei)其他芯片拓(tuo)展、沒有(you)或只有(you)極(ji)少的AI能(neng)(neng)力。
3、中間:功(gong)能性(xing)能和價格均(jun)處于中流(liu),缺點是仍需搭(da)配其他芯片(pian)實現功(gong)耗的平衡和功(gong)能的加強,AI能力不足,可拓展性(xing)受限。
芯原AI眼鏡芯片設(she)計(ji)(ji)方(fang)案(an)依托芯原IP以及(ji)軟硬件設(she)計(ji)(ji)服務和量產(chan)(chan)平臺,根據(ju)客戶需求實現(xian)個性化定制,通過豐富的(de)高性能IP儲(chu)備(bei)、低功(gong)耗設(she)計(ji)(ji)經驗、一站(zhan)式(shi)軟硬件設(she)計(ji)(ji)量產(chan)(chan)服務,實現(xian)性能、續(xu)航、成(cheng)本的(de)綜(zong)(zong)合衡量,初期(qi)以無顯示或(huo)輕(qing)量級顯示為主,支持實現(xian)超過8小(xiao)時的(de)綜(zong)(zong)合使用時間(jian)、大約30克的(de)重量、端側小(xiao)模型處理能力(li)、1080p圖像處理。
該方案的(de)特點包括:強化(hua)端(duan)側(ce)AI能力,多核異構系(xi)統(tong),層次化(hua)大(da)小核功能設(she)計(ji),細致的(de)電源域劃(hua)分,有針對性的(de)定制。其通訊能力通過獨立CP外掛(gua)實現,優點是(shi)更加靈活,能更好地實現成(cheng)本(ben)和功耗控制。
獨立AI算力是一大重點,有靈活的算力配置,支持單核獨立或多核協同,適合高性能大模型處理,可(ke)實現(xian)視頻(pin)/音(yin)頻(pin)Token生成(cheng)。
其視(shi)頻圖像處(chu)理(li)(li)會有硬件AI-ISP,顯示處(chu)理(li)(li)也通(tong)過嵌入(ru)AI處(chu)理(li)(li)提升分(fen)辨(bian)率。AI-ISP可單獨處(chu)理(li)(li)standby狀態下的視(shi)頻/音(yin)頻輸入(ru),支持輕量級AI處(chu)理(li)(li)和傳感器數據(ju)處(chu)理(li)(li),并通(tong)過自(zi)定義硬件加速、多核DSP、異構Vision Core實現可擴展(zhan)。
對于(yu)要(yao)全天候佩戴的輕量級眼鏡(jing)(jing)來(lai)說(shuo),功(gong)耗是一個非(fei)常重要(yao)的指標。郝鵬鵬分享(xiang)了(le)一個AI眼鏡(jing)(jing)設計實例。根(gen)據AI眼鏡(jing)(jing)的應(ying)用場景不(bu)同(tong),芯(xin)原做了(le)一些大(da)小核和不(bu)同(tong)電源(yuan)域,全芯(xin)片電源(yuan)域超過20個;待機功(gong)耗僅3.8mW;在更低的RTS模式下(xia),功(gong)耗只有(you)5uW;小幅面低幀(zhen)率完全不(bu)需要(yao)DDR,節省了(le)相當大(da)的功(gong)耗。
四、AI/AR眼鏡面臨三類核心痛點,短期需在功能上做取舍
炬芯科技穿(chuan)戴(dai)和感知事業部總(zong)經理張天益進一步探討了智能手(shou)表與眼鏡(jing)的(de)(de)趨勢。當(dang)前炬芯科技Actions 3.0的(de)(de)核心是為電池驅動的(de)(de)端側AI裝置打(da)造低(di)功耗下的(de)(de)大(da)算力。炬芯科技的(de)(de)產品聚焦在音頻四大(da)場景,包括人、電視、電腦、車周邊(bian)應用(yong)場景。
張天益引用(yong)了(le)來(lai)(lai)自市(shi)研機構(gou)Canalys的數據(ju),提到當前(qian)全球可穿戴腕帶市(shi)場穩步增(zeng)長,其(qi)中(zhong)(zhong)中(zhong)(zhong)國智(zhi)能手表市(shi)場增(zeng)勢(shi)強勁,基礎手環(huan)迎來(lai)(lai)復(fu)蘇(su)。
據Canalys統計,2024年全(quan)球(qiu)可穿戴腕帶設備出貨量(liang)1.93億部,同(tong)比增(zeng)長(chang)(chang)4%,連續兩年實現(xian)增(zeng)長(chang)(chang);中(zhong)國市(shi)場(chang)出貨量(liang)占全(quan)球(qiu)30%,同(tong)比增(zeng)長(chang)(chang)20%,第四季(ji)度(du)激增(zeng)50%。基礎手(shou)環是市(shi)場(chang)增(zeng)長(chang)(chang)主要動力,在市(shi)場(chang)調整后(hou)逐漸復蘇(su),吸(xi)引(yin)入(ru)門級用戶,拓展市(shi)場(chang)份額,2024年增(zeng)長(chang)(chang)8%,向商務(wu)、運(yun)動等方向轉(zhuan)型。
據他分享,智能手表有三類痛點:一是運動健康監測精度待提升;二是用戶界面體驗不好,開發門檻高;三是應用生態不完善。“AI+”將智能手表重新打造,帶來健康監測、交互界面、應用生態的迭代升級。
智能眼鏡也有三類核心痛點:一是”不可能三角”矛盾,續航與重量、算力與功耗存在矛盾,難以同時滿足用戶全天候佩戴和高性能需求;二是交互體驗不足,會出現延時長、響應慢等問題,多模態交互成熟度低,生態割裂,影響用戶使用體驗和應用場景拓展;三是未來隱私與倫理爭議,攝像頭引發隱私擔憂,數據安全存在風險,需完善相關法律與倫理規范。
以Meta雷朋(peng)眼(yan)鏡(jing)為例,續航大約(yue)3-4小(xiao)時,如果全程錄像可能(neng)續航只有30分鐘。而如果要做(zuo)到(dao)全天(tian)候(hou)佩戴,續航至少要做(zuo)到(dao)十(shi)幾個小(xiao)時。目前AI眼(yan)鏡(jing)大約(yue)50克的重量也令用戶有些(xie)吃(chi)力(li)的,如果降(jiang)到(dao)30克,大家可能(neng)會比較滿意。但目前的設計還(huan)難以做(zuo)到(dao)兼顧。
基于這些痛點,張天益認為未來3-5年很難做出一個我們想象的AI+AR全功能眼鏡,而是要在一些功能點上做取舍,例如:(1)帶不帶光機和波導;(2)重拍照還是重AI;(3)要不要先聚焦細分市場。
他談道,智能(neng)眼(yan)鏡芯(xin)片(pian)技術路徑覆(fu)蓋ISP/SoC、BT MCU、WiFi等(deng)。炬(ju)芯(xin)提供基于(yu)SRAM模數混合的(de)存(cun)內計算,GEN1 MMSCIM功耗(hao)表(biao)現優勢顯著,相比HiFi DSP,在環境(jing)降(jiang)噪上可將功耗(hao)降(jiang)低98%,在語(yu)音識(shi)別上可將功耗(hao)降(jiang)低93%。
萬有(you)引力(li)(寧波)電子(zi)科技有(you)限公司聯合(he)創始人、芯(xin)片(pian)研發負(fu)責人陳一敏認為,XR會(hui)是(shi)下(xia)(xia)一代通用計算平臺,這也是(shi)萬有(you)引力(li)的使命與愿(yuan)景——為下(xia)(xia)一代空間計算提供完整的端到(dao)端解決方案。
萬有引力成立于2021年,由十幾位硅谷工程師一起回國創辦,目前由220名員工。其業務包括芯片、整機、算法(眼動、手動、SLM等)。據陳一敏分享,萬有引力計劃今年發布X100全功能空間計算MR芯片、VX100 AI/AR眼鏡芯片,下一代XR芯片將在明年推出。
陳一敏說(shuo),AI/AR眼(yan)(yan)鏡(jing)已是公認的(de)最佳多(duo)模態AI數據入(ru)口。AI/AR眼(yan)(yan)鏡(jing)場景(jing)在(zai)2024年非常火爆,重(zhong)量(liang)達到(dao)50克或更(geng)輕,Meta雷朋眼(yan)(yan)鏡(jing)出貨(huo)量(liang)達到(dao)300萬,國內2025年將(jiang)出現(xian)百鏡(jing)大戰。萬有引力的(de)VX100 AI/AR眼(yan)(yan)鏡(jing)芯片將(jiang)兼具小型化(hua)、支持拍照(zhao)與錄像、低功耗、全(quan)天候AI等特點。
他提到在AR芯片關鍵IP上選擇芯原(yuan)IP是基于(yu)(yu)多重考量(liang):首(shou)先,芯原(yuan)有(you)成熟的工具鏈和(he)客(ke)戶(hu)支(zhi)持(chi);其次,芯原(yuan)支(zhi)持(chi)差(cha)異(yi)化定制,有(you)助于(yu)(yu)強化競爭力;第三,芯原(yuan)IP可靠(kao)性高,風險低;第四,芯原(yuan)在XR領域具有(you)市(shi)場影響力,選用芯原(yuan)IP對(dui)客(ke)戶(hu)來說是加分項(xiang),因(yin)為有(you)很多成功案例的背書。
五、AI/AR眼鏡老玩家只是略有領先,行業亟需專用接口標準
圓桌對話以“AI眼鏡(jing)的機遇(yu)與(yu)挑戰”為主題,由(you)芯原股(gu)份戰略投資副總裁(cai)南婧主持。
南婧首(shou)先分享了AI智(zhi)能眼(yan)鏡的(de)四大(da)類:(1)無(wu)(wu)攝像(xiang)(xiang)頭(tou)、無(wu)(wu)顯(xian)示智(zhi)能眼(yan)鏡,如(ru)李未可(ke)Meta Lens;(2)無(wu)(wu)攝像(xiang)(xiang)頭(tou)、帶(dai)顯(xian)示智(zhi)能眼(yan)鏡,如(ru)魅族StarV Air2;(3)帶(dai)攝像(xiang)(xiang)頭(tou)、無(wu)(wu)顯(xian)示智(zhi)能眼(yan)鏡,如(ru)Meta雷朋眼(yan)鏡;(4)帶(dai)攝像(xiang)(xiang)頭(tou)、帶(dai)顯(xian)示智(zhi)能眼(yan)鏡,如(ru)Rokid AI眼(yan)鏡。
哪類AI眼鏡會在短期內更受市場歡迎?Omdia高(gao)級分(fen)析師林麟認為(wei),兩三年內,AI眼鏡肯定要有攝(she)像頭(tou),因(yin)為(wei)很多用戶(hu)有發朋友(you)圈(quan)的需求;顯示短期(qi)內不是剛需,因(yin)為(wei)光學方(fang)案和顯示技術(shu)還不足以達到令(ling)人(ren)滿意的程(cheng)度。
南婧提到當前AI眼鏡的人機交互方式有觸摸、語音、顯示、手勢識別、眼動交互等,但也面臨“不可能三角”的困境——續航、重量、算力難以兼得。哪種人機交互方式會更符合現在的要求?
在恒玄科(ke)技(ji)市(shi)場副(fu)總裁高亢看來,AI眼鏡的(de)(de)輸(shu)入方式應是多(duo)樣的(de)(de),AI眼鏡交互需(xu)要支持較(jiao)大的(de)(de)信息量輸(shu)入,包括無線連接可實現(xian)多(duo)設備協同的(de)(de)多(duo)模態輸(shu)入和輸(shu)出。
炬(ju)芯科(ke)技穿戴和(he)感知事(shi)業部(bu)總(zong)經理張天(tian)益(yi)補充了DeepSeek對這個問題的(de)回(hui)答(da)(da):短期內主打語音交互和(he)輕量顯(xian)示,如果能逐步引入基礎手勢功能會(hui)更(geng)好(hao);長(chang)期應該是一個全彩空間計算+多(duo)模(mo)態(tai)交互。他(ta)覺得(de)這個答(da)(da)案(an)比較中規中矩,認為眼鏡重點是“輕”,有些交互可以(yi)考(kao)慮放到其他(ta)智能設備上(shang)。
第三個問題涉及AI眼鏡芯片:當前AI眼鏡主要有SoC、ISP+MCU、SoC+MCU三類方案,兩年內哪種方案更容易成為AI眼鏡的主流方案?
恒玄科(ke)技市場副總裁高亢、炬芯(xin)科(ke)技穿戴和(he)感知事業部(bu)總經理張(zhang)天益都認為(wei)兩年內ISP+MCU綜合來(lai)看會(hui)是更(geng)優選,能夠提供更(geng)多的想象空間和(he)落地場景,同時考(kao)慮到行業內很(hen)多應用生態跟IP處理器相關,所以SoC也(ye)不會(hui)被(bei)取代。
針對AI眼鏡選擇定制芯片方案還是標準產品芯片方案的問題,芯原股(gu)份執行(xing)副總裁、定制芯片(pian)平(ping)臺事業部總經理汪志偉說,當(dang)前AI眼鏡芯片(pian)方案(an)五花(hua)八門,市場并未形成(cheng)一個標準方案(an),這是因為對AI眼鏡的(de)(de)定義還不明晰,沒有出(chu)現(xian)能讓(rang)大(da)家設計一顆比較通用(yong)的(de)(de)芯片(pian)方案(an)的(de)(de)單一海量(liang)市場。
他比較看(kan)好(hao)兩三年后,找準市場(chang)定位、能夠(gou)把產品定義(yi)好(hao)的(de)公司(si)與(yu)芯(xin)原一起定義(yi)一顆芯(xin)片,解(jie)決重量(liang)和功耗問題,因為目前市場(chang)上沒有一個芯(xin)片能夠(gou)滿足AI眼鏡(jing)低功耗和輕(qing)重量(liang)的(de)需求。芯(xin)原股(gu)份首席戰略官、執(zhi)行(xing)副(fu)總(zong)裁、IP事業(ye)部總(zong)經理戴(dai)偉進補充道,AI眼鏡(jing)行(xing)業(ye)在較長一段時間會(hui)需要定制方案。
現有AI眼鏡產品通常續航僅有2-4小時,針對如何從系統層面降低整體功耗的問題,廣東省橫(heng)琴數字光芯半導體科技有(you)限公司(si)董事(shi)長兼創始人孫雷(lei)分享說,系統功耗與接口密切相關,但在(zai)AI/AR眼鏡領域(yu)缺乏(fa)專用接口標準(zhun)。
據他分享,三片式合(he)光Micro LED+光波導方(fang)案將是(shi)AR在5-10年內(nei)的(de)主(zhu)流方(fang)案,AR設(she)備電池體(ti)積有限,對(dui)重量(liang)、功耗有極致(zhi)要求。MIPI接(jie)口是(shi)為單(dan)片彩色顯示(shi)器(qi)設(she)計的(de)視頻流傳輸規范,在AR眼鏡場景下FPC傳輸距離長(30cm),分辨率(lv)逐(zhu)步提高,從480P(30萬(wan)像素)向1080P(200萬(wan)像素),如(ru)果采(cai)用DSC進行(xing)壓縮,會導致(zhi)顯示(shi)端解碼功耗上(shang)升。
為應對未來發展(zhan)的挑戰,中國亟需建立自(zi)己的行業標(biao)(biao)準(zhun)。為此芯(xin)原和數字(zi)光(guang)芯(xin)合作打造(zao)了AR處理器接(jie)口(kou)標(biao)(biao)準(zhun)(ARPI),適(shi)用(yong)于(yu)三色(se)合光(guang)系統視頻傳(chuan)輸,相比MIPI接(jie)口(kou)方案可節省(sheng)2/3的帶(dai)寬。
近(jin)期大(da)模型在云(yun)端(duan)大(da)規模訓練后,可(ke)通過(guo)模型蒸餾、剪枝壓(ya)縮等手段,在保持(chi)可(ke)用(yong)精度(du)前提下顯著縮小模型體積,使得(de)移(yi)動端(duan)、PC、可(ke)穿戴設備等資源受(shou)限的硬件上(shang)也能進(jin)行推理,滿足實(shi)時性、隱私(si)與安全、成本優化、網絡帶寬與可(ke)用(yong)性等需(xu)求(qiu)。
那么如何在眼鏡形態下部署生成式AI?邊緣計算與云協同的平衡點在哪里?芯原股份首席(xi)戰略官、執行(xing)副總裁、IP事業部(bu)總經(jing)理(li)戴(dai)偉進(jin)認為,眼(yan)鏡只是計算(suan)機(ji)的一個(ge)部(bu)分,它(ta)是和手機(ji)和服務器一起協(xie)同的。
當前“百(bai)鏡(jing)大戰”的(de)(de)玩家,既有(you)小米、vivo這樣的(de)(de)手機廠商(shang),也包括百(bai)度、字節這樣的(de)(de)互聯網大廠,還有(you)Rokid、雷鳥等(deng)專注于做AI/AR眼鏡(jing)的(de)(de)老玩家。
哪一類玩家會占據更多AI眼鏡市場份額?對此,上海道禾源信私募基金管(guan)理(li)(li)有限公司副總經理(li)(li)、董事總經理(li)(li)傅琰琰談道,一個理(li)(li)想型眼鏡公司具備四個特點:有手機(ji)(ji),有端側模型,有云端模型,有IoT生態。她認為(wei)自(zi)帶高算力、帶云端算力的(de)企(qi)業天(tian)然有優勢,傳統硬(ying)(ying)件(jian)廠(chang)商也積累了相當深厚的(de)經驗,預(yu)計(ji)3-5年有大(da)(da)模型、有云端能力的(de)手機(ji)(ji)大(da)(da)廠(chang)的(de)機(ji)(ji)會要大(da)(da)于純互聯網大(da)(da)廠(chang)、純硬(ying)(ying)件(jian)大(da)(da)廠(chang)的(de)機(ji)(ji)會。
她進一(yi)(yi)步補(bu)充說,因為現在(zai)的(de)(de)業態很豐富,如果(guo)這個格局成立的(de)(de)話(hua),那么純硬(ying)件廠需(xu)要快速找到自(zi)己(ji)的(de)(de)合(he)作伙(huo)伴(ban),不斷迭代(dai)產品,當(dang)用戶(hu)心智已經被(bei)完全(quan)占領后,可能還會(hui)有一(yi)(yi)些(xie)(xie)新銳(rui)硬(ying)件廠用一(yi)(yi)些(xie)(xie)特(te)殊方式(shi)解決(jue)一(yi)(yi)類特(te)定(ding)需(xu)求,或(huo)許還會(hui)有一(yi)(yi)些(xie)(xie)創(chuang)業機會(hui)。在(zai)任(ren)何命題(ti)下,時間窗口都(dou)是一(yi)(yi)個很重要的(de)(de)約束條件。
林麟(lin)認為,AI/AR眼(yan)鏡(jing)的(de)老玩家只(zhi)是略有(you)領先(xian),但現階段小(xiao)小(xiao)的(de)領先(xian)不(bu)(bu)代表什(shen)么,很(hen)難依照現有(you)這(zhe)些(xie)公司(si)所取得的(de)成就(jiu),判斷它們將來能夠走到(dao)什(shen)么樣的(de)地步。主觀上,他并(bing)不(bu)(bu)希望再出現手機廠商繼(ji)續獨打天下的(de)場面,反倒希望“三足鼎立”的(de)情況(kuang)能夠持續得盡(jin)可能久一些(xie),讓這(zhe)三類(lei)(lei)不(bu)(bu)同公司(si)做出不(bu)(bu)同類(lei)(lei)型、不(bu)(bu)同特色的(de)產品,這(zhe)對于廣大消費者來說將是福音(yin)。
高亢從(cong)行(xing)業角度出發,談到過去幾年,手(shou)機廠(chang)(chang)商(shang)(shang)在耳機、手(shou)表等(deng)領域取得很(hen)大的(de)領先(xian)優勢(shi),但并(bing)沒有(you)(you)把市場統一(yi)。眼鏡(jing)與手(shou)機廠(chang)(chang)商(shang)(shang)擁有(you)(you)很(hen)大的(de)優勢(shi),如果能夠(gou)找到自己的(de)特(te)點(dian),有(you)(you)可能會出現新(xin)的(de)大玩(wan)家,也有(you)(you)可能到最后,有(you)(you)的(de)手(shou)機廠(chang)(chang)商(shang)(shang)會掉隊,反而單獨的(de)硬(ying)件廠(chang)(chang)商(shang)(shang)或互聯網廠(chang)(chang)商(shang)(shang)會起來(lai)。眼鏡(jing)有(you)(you)趣的(de)地方就在于行(xing)業還(huan)有(you)(you)機會,目前沒有(you)(you)人能夠(gou)遙(yao)遙(yao)領先(xian)、一(yi)統天下(xia)。
結語:AI/AR眼鏡發展迎來關鍵之年
隨著(zhu)科技發展,以AI/AR眼鏡為代(dai)表的(de)(de)(de)(de)智(zhi)能可(ke)穿戴設備正逐(zhu)步(bu)成為連接虛擬與物理世界(jie)的(de)(de)(de)(de)重要載體(ti)(ti)。這些設備可(ke)以實現更(geng)自然的(de)(de)(de)(de)人機交互和越來(lai)越強大的(de)(de)(de)(de)本地(di)AI處(chu)理能力(li),給人們的(de)(de)(de)(de)生(sheng)活及社交方式帶來(lai)了(le)全新的(de)(de)(de)(de)升級體(ti)(ti)驗。
2025年極有可能(neng)成(cheng)為AI/AR眼鏡極具(ju)里程碑(bei)意義的一年。更多大廠及新銳企業的入(ru)局,不僅(jin)能(neng)夠加(jia)速(su)AI/AR眼鏡產品的成(cheng)熟,而(er)且將顯著提升消(xiao)費者的整(zheng)體(ti)認知(zhi)度。誰會成(cheng)為AI/AR眼鏡大戰的階段性(xing)贏(ying)家,產業走向(xiang)令人期(qi)待。