智東西（公眾號：zhidxcom）
編輯?| 程茜
6月30日，由智東西和(he)智東西公開課主(zhu)辦(ban)的GTIC 2022全(quan)(quan)球AIoT智能(neng)家居峰(feng)會（以下簡稱(cheng)AIoT智能(neng)家居峰(feng)會），在線(xian)上成功舉(ju)辦(ban)，在全(quan)(quan)網16個渠道(dao)同步(bu)直播，線(xian)上觀(guan)看人數達到了90多萬人，眾(zhong)多嘉賓的議題都引起(qi)了大家熱烈討論。
8位行業重磅大咖就AIoT智能家(jia)居的技術突破(po)、創新(xin)應(ying)用(yong)和行業展望展開(kai)了精(jing)彩的深度探(tan)討，直擊行業痛(tong)點。
▲恩智(zhi)浦半導體邊緣處理事業(ye)線產品和市場總監林明
恩智浦半導體邊(bian)緣處理(li)事業線產品和市場總監(jian)林明以《恩智浦如何應對AIoT智能家居挑戰：邊(bian)緣智能與Matter》為主題進(jin)行了演(yan)講。
隨著邊(bian)緣智(zhi)(zhi)能(neng)和無線連接等技(ji)術(shu)的(de)發展，智(zhi)(zhi)能(neng)家居(ju)行業不僅出現了巨大的(de)發展和進化的(de)前(qian)景，同時也面臨著諸多挑戰，例如如何提(ti)升用(yong)(yong)戶的(de)體驗(yan)，如何為用(yong)(yong)戶提(ti)供(gong)更智(zhi)(zhi)能(neng)的(de)數(shu)據和控(kong)制服務，如何保護(hu)用(yong)(yong)戶的(de)隱私等等。
在(zai)(zai)這一背(bei)景(jing)下，林明圍(wei)繞(rao)著語(yu)音技術(shu)(shu)、智能視覺等前沿(yan)技術(shu)(shu)以及(ji)通用無線連(lian)接協議Matter，對恩智浦在(zai)(zai)應對智能家居挑戰上的技術(shu)(shu)創新和應用進行了深入講解。
附恩智浦半導體邊緣處理事業線產品和市場總監林明演講實錄
林明：大(da)家好(hao)，我(wo)是林明，來自恩(en)(en)智(zhi)(zhi)(zhi)浦半導體(ti)邊緣(yuan)處理事業部，我(wo)今天跟(gen)大(da)家分享(xiang)的主題是《恩(en)(en)智(zhi)(zhi)(zhi)浦如何應對(dui)AIoT智(zhi)(zhi)(zhi)能家居(ju)的挑戰》，我(wo)會從邊緣(yuan)智(zhi)(zhi)(zhi)能和無(wu)線連接標(biao)(biao)準這兩(liang)個方(fang)面展開，恩(en)(en)智(zhi)(zhi)(zhi)浦的愿景(jing)是用安全(quan)的連接構建一個更智(zhi)(zhi)(zhi)能的世(shi)界，邊緣(yuan)智(zhi)(zhi)(zhi)能和無(wu)線連接標(biao)(biao)準也是其中的兩(liang)個要點。
智能家(jia)居可以(yi)說是(shi)AIoT的(de)(de)一個重要(yao)細(xi)分市(shi)場(chang)，不僅有著(zhu)巨大(da)的(de)(de)市(shi)場(chang)容量和可觀(guan)的(de)(de)年(nian)復合增長(chang)率，同時也推動著(zhu)各種AIoT技術(shu)的(de)(de)發展，包括人工智能、無(wu)線(xian)連接、數據安全，北美、亞太、歐洲(zhou)是(shi)主(zhu)要(yao)的(de)(de)市(shi)場(chang)。
其(qi)中(zhong)，美國(guo)和(he)中(zhong)國(guo)可(ke)以說是(shi)智(zhi)能(neng)家居創(chuang)新(xin)和(he)發(fa)展的主要(yao)市場(chang)，與此同(tong)時，這么重(zhong)要(yao)的市場(chang)和(he)技術推動的力量，智(zhi)能(neng)家居在高速(su)發(fa)展中(zhong)也面臨著越(yue)來越(yue)大(da)的挑(tiao)戰。
從這張典型的(de)(de)智(zhi)能(neng)(neng)(neng)(neng)(neng)家(jia)居全景圖(tu)中，我們可(ke)以看到未來一個(ge)家(jia)里面可(ke)能(neng)(neng)(neng)(neng)(neng)會有(you)100多個(ge)IoT設(she)(she)備，每(mei)個(ge)設(she)(she)備都(dou)需要越(yue)(yue)來越(yue)(yue)大的(de)(de)算(suan)力(li)、處理能(neng)(neng)(neng)(neng)(neng)力(li)和各種(zhong)(zhong)智(zhi)能(neng)(neng)(neng)(neng)(neng)交(jiao)互能(neng)(neng)(neng)(neng)(neng)力(li)，這些設(she)(she)備可(ke)能(neng)(neng)(neng)(neng)(neng)來自幾十家(jia)不(bu)同(tong)的(de)(de)品牌和IoT生(sheng)態系統，也可(ke)能(neng)(neng)(neng)(neng)(neng)運行著十幾種(zhong)(zhong)不(bu)同(tong)的(de)(de)連接(jie)協議，這也導致不(bu)僅設(she)(she)備間(jian)的(de)(de)互操(cao)作會變得非常復雜(za)，也會浪費很多帶寬、算(suan)力(li)和能(neng)(neng)(neng)(neng)(neng)源。
同時，隨著(zhu)各種傳感器數(shu)量(liang)的(de)增(zeng)加(jia)以及數(shu)據(ju)量(liang)的(de)劇(ju)增(zeng)，智能家(jia)居用戶(hu)對隱私(si)和安(an)全(quan)也越(yue)來(lai)越(yue)重視，數(shu)據(ju)、決(jue)策都能在本地(di)進行(xing)處理也變(bian)得越(yue)來(lai)越(yue)重要。
另外(wai)，智(zhi)能(neng)交(jiao)互也是(shi)一個非常重要的產品創新(xin)點(dian)，能(neng)夠(gou)在設備(bei)端(duan)進行語音和視(shi)覺識別(bie)和處理的需求也會越來越多(duo)。愈加復雜的邊緣智(zhi)能(neng)和無線連接技術(shu)也會讓(rang)平臺的設計變得更加復雜。
隨著(zhu)(zhu)人(ren)工智能(neng)和機(ji)器學習技術的(de)(de)(de)成熟(shu)，這些(xie)技術逐漸(jian)應用于智能(neng)家居產品(pin)上，使得產品(pin)帶來的(de)(de)(de)服務(wu)更加舒(shu)適、便(bian)捷(jie)。并(bing)且在(zai)產品(pin)的(de)(de)(de)功能(neng)、性能(neng)以及(ji)人(ren)機(ji)交互(hu)方面，AI都(dou)扮(ban)演著(zhu)(zhu)非常重要(yao)的(de)(de)(de)角(jiao)色。
目(mu)前(qian)，這一技術(shu)的應用可能(neng)(neng)還停(ting)留在語音(yin)交(jiao)互、人臉(lian)識別、手勢識別等簡單的功能(neng)(neng)上，那么，未來如何通(tong)過AI來了(le)解客戶(hu)的使用習慣，更加智能(neng)(neng)地為用戶(hu)提供服務(wu)，這會是一個非常重要的演進方向。
恩智浦是(shi)一家全球領先(xian)的芯片公司，不過，我(wo)們不僅僅提供先(xian)進的芯片，我(wo)們同時會(hui)提供包含軟件在內的一整(zheng)套系(xi)統解(jie)決(jue)方案和平臺。
解決方案(an)中最底(di)層的(de)是(shi)(shi)恩智浦廣泛(fan)而(er)強大的(de)邊(bian)緣處(chu)理(li)和無線連接的(de)產品(pin)組(zu)合，構(gou)建在上面的(de)是(shi)(shi)各類(lei)主(zhu)流操作系統、中間件、軟件算法和各種應用層的(de)實際用例(li)。
最(zui)后是我們和(he)各大IoT云(yun)平臺廠商(shang)的對接。
恩智浦能(neng)夠提(ti)供的(de)產品和服務非常多，因為時間原因，我(wo)現(xian)在從基于AI的(de)視覺(jue)和語音技術以及Matter這兩個(ge)方面進行(xing)介紹(shao)。
2019年，由(you)全球幾家(jia)智能(neng)(neng)家(jia)居(ju)生態巨頭(tou)——亞馬(ma)遜、蘋(pin)果、三(san)星等，聯合(he)包括恩(en)智浦在內的(de)智能(neng)(neng)家(jia)居(ju)芯片供(gong)應商，以及連接(jie)標準聯盟共同發起的(de)基于Wi-Fi和Thread的(de)IP應用層的(de)Matter協議(yi)，可以讓(rang)各個品牌的(de)產品實現完全無縫地互操作。
恩(en)(en)智浦是(shi)(shi)Matter聯盟里(li)面(mian)重(zhong)要的(de)發起者和創(chuang)立者，我們的(de)初衷是(shi)(shi)希望能夠解決之前提(ti)到的(de)，智能家居產品(pin)(pin)無(wu)法(fa)簡單有效(xiao)地實現互操作的(de)挑戰。同時，無(wu)論從無(wu)線(xian)技術(shu)產品(pin)(pin)的(de)豐富程度(du)還是(shi)(shi)軟(ruan)件(jian)生態上的(de)投入來說，恩(en)(en)智浦都(dou)是(shi)(shi)這個聯盟里(li)非常重(zhong)要的(de)領導者。
恩智浦基于Matter推出(chu)了多款產品(pin)(pin)(pin)，我簡單介紹一(yi)下2個(ge)(ge)最新的(de)產品(pin)(pin)(pin)，第一(yi)個(ge)(ge)是(shi)K32W1，是(shi)基于我們即將推出(chu)的(de)低(di)功(gong)耗藍牙和(he)802.15.4雙模(mo)低(di)功(gong)耗MCU，它(ta)能夠支持(chi)ZigBee、藍牙5.3、Thread和(he)Matter協議，同時具有(you)豐富的(de)存(cun)儲(chu)空間和(he)強大的(de)算力(li)，集(ji)成了一(yi)個(ge)(ge)安全模(mo)塊，以及業界頂尖的(de)射頻(pin)性能，適用于各種需(xu)要支持(chi)Matter的(de)節點設備產品(pin)(pin)(pin)。
第二個產品是IW612，恩智(zhi)浦(pu)今年年初推(tui)出的業界(jie)首顆三(san)頻無線SoC，包含(han)了最新(xin)的Wi-Fi 6，藍牙5.2和802.15.4，具有強大的三(san)頻共存(cun)操作(zuo)能力，包含(han)了恩智(zhi)浦(pu)先進的安全模塊EdgeLock，作(zuo)為(wei)單芯片(pian)解決方案(an)，其非(fei)常適合設計、支持(chi)Matter的網(wang)關和邊界(jie)路由器。
恩智浦(pu)在Matter方面的投入遠不止(zhi)這些，我們在網站(zhan)上(shang)提供了非(fei)常豐富(fu)的開源代(dai)碼、應用案例、文檔、培訓、視(shi)頻，大家有興趣的話可(ke)以訪問圖(tu)片(pian)右上(shang)角的網址，可(ke)以得(de)到更多詳細(xi)的信(xin)息。
解決了設(she)備(bei)間(jian)互(hu)操作(zuo)問題后(hou)，恩智浦又是如何應對人(ren)工(gong)智能(neng)(neng)在智能(neng)(neng)家居中的(de)普及(ji)和應用挑戰的(de)？
通常情(qing)況下(xia)，人工(gong)智(zhi)能(neng)和機(ji)器(qi)學習技術(shu)主要是(shi)由數據科學家或者機(ji)器(qi)學習專家來(lai)開發(fa)實(shi)現，這(zhe)個過(guo)程需要大(da)量的人工(gong)智(zhi)能(neng)相關的知識積累，很多智(zhi)能(neng)家居的開發(fa)者并沒有這(zhe)樣的基礎。
早在2018年(nian)，恩智(zhi)浦就推(tui)出了一套(tao)軟件(jian)開(kai)發套(tao)件(jian)eIQ，這個(ge)工具使(shi)得基于MCU和MPU的(de)機(ji)器(qi)學習和應用(yong)開(kai)發變得更加簡(jian)單。該工具有(you)兩個(ge)簡(jian)單的(de)入口，用(yong)戶可以基于自己的(de)數據集(ji)，利用(yong)工具內嵌的(de)各種模型進行選擇，然后(hou)(hou)對模型進行訓(xun)練、優化和裁剪，最后(hou)(hou)部署(shu)到邊(bian)緣處理器(qi)上(shang)。
客(ke)戶(hu)如果有自己的(de)模型，也可以利用eIQ進行(xing)更方便(bian)地部署。
恩智浦花了大量(liang)人力，將(jiang)最常用的(de)各種推理引擎優化后，配置到(dao)恩智浦的(de)MCU和(he)MPU上，同時利用芯片端的(de)硬(ying)件(jian)加速(su)系統，如神經網絡加速(su)模塊(kuai)等，來實現(xian)智能家居中(zhong)各種機器(qi)學習應用的(de)開(kai)發(fa)，這也是這個工具的(de)核(he)心部分。
在具體應用(yong)上(shang)，恩智(zhi)浦在語音(yin)交互(hu)和(he)機器(qi)視覺方面進行(xing)了(le)(le)重(zhong)點投入。恩智(zhi)浦有著多年(nian)的(de)語音(yin)識(shi)別技術和(he)開發經驗，同時(shi)去年(nian)我們還收購了(le)(le)一家(jia)全球(qiu)領(ling)先的(de)語音(yin)和(he)音(yin)頻算(suan)法公司，能夠為客戶提供完整的(de)語音(yin)交互(hu)和(he)語音(yin)識(shi)別解(jie)決方案(an)。
我們提供(gong)的(de)語(yu)(yu)音(yin)交互軟件中，包(bao)含(han)了免費的(de)本(ben)地語(yu)(yu)音(yin)識別(bie)方案（VIT），該方案包(bao)括喚醒詞和(he)(he)語(yu)(yu)音(yin)識別(bie)命令，再加上(shang)VoiceSeeker語(yu)(yu)音(yin)前端處(chu)理(li)，能提供(gong)完整的(de)語(yu)(yu)音(yin)前端處(chu)理(li)套件，包(bao)含(han)波(bo)速成(cheng)型、語(yu)(yu)音(yin)消除和(he)(he)噪(zao)聲消除等功能。
另外(wai)，我(wo)們還有非常(chang)精簡的(de)高性能(neng)喚(huan)醒(xing)詞和語音識別軟件(jian)套(tao)件(jian)VoiceSpot。
如(ru)果客戶(hu)在使用(yong)這些軟(ruan)件時遇(yu)到(dao)困難，我們也會(hui)(hui)提供Turnkey Solutions（交(jiao)鑰匙解決(jue)方案(an)），這個方案(an)里不僅(jin)包含了之前(qian)我們提到(dao)的(de)語音識別(bie)軟(ruan)件，同時會(hui)(hui)為客戶(hu)提供一套完整的(de)包括(kuo)文檔在內的(de)解決(jue)方案(an)和應用(yong)場景，讓(rang)客戶(hu)能夠直接(jie)將整個方案(an)部(bu)署到(dao)產(chan)品中。
在機器(qi)視覺(jue)方(fang)面，恩智浦不僅提供完整(zheng)的解決方(fang)案，同時也(ye)有各(ge)種demo和應(ying)用(yong)場(chang)景。
下圖是我(wo)們所(suo)做的部分機器(qi)視覺應(ying)用(yong)(yong)(yong)案(an)例(li)，其(qi)中(zhong)有一些可以(yi)應(ying)用(yong)(yong)(yong)到智(zhi)能家居產(chan)品中(zhong)，一些可以(yi)應(ying)用(yong)(yong)(yong)到工業中(zhong)。這(zhe)里面(mian)包(bao)括人(ren)臉識(shi)別、人(ren)體檢測、手(shou)勢(shi)識(shi)別、人(ren)體姿勢(shi)識(shi)別，還包(bao)括非常精細化的手(shou)勢(shi)識(shi)別和眼球追蹤。
目前，我(wo)們看到的(de)這(zhe)些案例都是基(ji)于恩(en)智浦(pu)高性能(neng)的(de)MCU產品，實際上這(zhe)些應用都可以擴展(zhan)到恩(en)智浦(pu)MPU產品和低端的(de)低功耗MCU上。
恩智浦推出(chu)的(de)EdgeReady解(jie)決(jue)方案，就包含了之前我(wo)們提(ti)到的(de)語音(yin)技(ji)術(shu)、視覺算法，同時(shi)我(wo)們在完整(zheng)的(de)硬件平臺(tai)上給客戶(hu)提(ti)供(gong)包括人(ren)臉(lian)識(shi)別(bie)(bie)、語音(yin)識(shi)別(bie)(bie)的(de)應用場景，以(yi)及我(wo)們下半年將(jiang)推出(chu)的(de)無接觸式(shi)人(ren)機交互解(jie)決(jue)方案。它可(ke)以(yi)實(shi)現，在一(yi)顆高性能(neng)(neng)MCU上實(shi)現人(ren)臉(lian)識(shi)別(bie)(bie)、手(shou)勢(shi)交互、語音(yin)識(shi)別(bie)(bie)、圖(tu)形顯(xian)示等所有(you)功能(neng)(neng)。
最(zui)后總結一(yi)下(xia)，同時也回應一(yi)下(xia)我(wo)們之(zhi)前(qian)提到的，恩智浦不僅是一(yi)家芯(xin)片公司，更是一(yi)家提供系統解決方案(an)的公司。
我們擁有(you)廣泛的(de)(de)邊緣處(chu)理產(chan)品線，包括(kuo)低端的(de)(de)MCU、高性能(neng)的(de)(de)MCU跨界處(chu)理器(qi)(qi)和應(ying)用處(chu)理器(qi)(qi)，同(tong)時也有(you)無線連接產(chan)品，SDK、軟件、算法(fa)以及完成(cheng)的(de)(de)解(jie)決方案，能(neng)夠(gou)幫助用戶應(ying)對智能(neng)家(jia)居(ju)的(de)(de)挑戰。
我今天的(de)分享就(jiu)到這(zhe)里，謝謝大家(jia)。
