智東西（公眾號(hào)：zhidxcom）
編輯?| 程茜
6月30日，由智東西和智東西公開課主辦的GTIC 2022全球AIoT智能家居峰會(huì)（以下簡(jiǎn)稱AIoT智能家居峰會(huì)），在線上成功舉辦，在全網(wǎng)16個(gè)渠道同步直播，線上觀看人數(shù)達(dá)到了90多萬(wàn)人，眾多嘉賓的議題都引起了大家熱烈討論。
8位行業(yè)重磅大咖就AIoT智能家居的技術(shù)突破、創(chuàng)新應(yīng)用和行業(yè)展望展開了精彩的深度探討，直擊行業(yè)痛點(diǎn)。
▲恩智浦半導(dǎo)體邊緣處理事業(yè)線產(chǎn)品和市場(chǎng)總監(jiān)林明
恩智浦半導(dǎo)體邊緣處理事業(yè)線產(chǎn)品和市場(chǎng)總監(jiān)林明以《恩智浦如何應(yīng)對(duì)AIoT智能家居挑戰(zhàn)：邊緣智能與Matter》為主題進(jìn)行了演講。
隨著邊緣智能和無(wú)線連接等技術(shù)的發(fā)展，智能家居行業(yè)不僅出現(xiàn)了巨大的發(fā)展和進(jìn)化的前景，同時(shí)也面臨著諸多挑戰(zhàn)，例如如何提升用戶的體驗(yàn)，如何為用戶提供更智能的數(shù)據(jù)和控制服務(wù)，如何保護(hù)用戶的隱私等等。
在這一背景下，林明圍繞著語(yǔ)音技術(shù)、智能視覺等前沿技術(shù)以及通用無(wú)線連接協(xié)議Matter，對(duì)恩智浦在應(yīng)對(duì)智能家居挑戰(zhàn)上的技術(shù)創(chuàng)新和應(yīng)用進(jìn)行了深入講解。
附恩智浦半導(dǎo)體邊緣處理事業(yè)線產(chǎn)品和市場(chǎng)總監(jiān)林明演講實(shí)錄
林明：大家好，我是林明，來自恩智浦半導(dǎo)體邊緣處理事業(yè)部，我今天跟大家分享的主題是《恩智浦如何應(yīng)對(duì)AIoT智能家居的挑戰(zhàn)》，我會(huì)從邊緣智能和無(wú)線連接標(biāo)準(zhǔn)這兩個(gè)方面展開，恩智浦的愿景是用安全的連接構(gòu)建一個(gè)更智能的世界，邊緣智能和無(wú)線連接標(biāo)準(zhǔn)也是其中的兩個(gè)要點(diǎn)。
智能家居可以說是AIoT的一個(gè)重要細(xì)分市場(chǎng)，不僅有著巨大的市場(chǎng)容量和可觀的年復(fù)合增長(zhǎng)率，同時(shí)也推動(dòng)著各種AIoT技術(shù)的發(fā)展，包括人工智能、無(wú)線連接、數(shù)據(jù)安全，北美、亞太、歐洲是主要的市場(chǎng)。
其中，美國(guó)和中國(guó)可以說是智能家居創(chuàng)新和發(fā)展的主要市場(chǎng)，與此同時(shí)，這么重要的市場(chǎng)和技術(shù)推動(dòng)的力量，智能家居在高速發(fā)展中也面臨著越來越大的挑戰(zhàn)。
從這張典型的智能家居全景圖中，我們可以看到未來一個(gè)家里面可能會(huì)有100多個(gè)IoT設(shè)備，每個(gè)設(shè)備都需要越來越大的算力、處理能力和各種智能交互能力，這些設(shè)備可能來自幾十家不同的品牌和IoT生態(tài)系統(tǒng)，也可能運(yùn)行著十幾種不同的連接協(xié)議，這也導(dǎo)致不僅設(shè)備間的互操作會(huì)變得非常復(fù)雜，也會(huì)浪費(fèi)很多帶寬、算力和能源。
同時(shí)，隨著各種傳感器數(shù)量的增加以及數(shù)據(jù)量的劇增，智能家居用戶對(duì)隱私和安全也越來越重視，數(shù)據(jù)、決策都能在本地進(jìn)行處理也變得越來越重要。
另外，智能交互也是一個(gè)非常重要的產(chǎn)品創(chuàng)新點(diǎn)，能夠在設(shè)備端進(jìn)行語(yǔ)音和視覺識(shí)別和處理的需求也會(huì)越來越多。愈加復(fù)雜的邊緣智能和無(wú)線連接技術(shù)也會(huì)讓平臺(tái)的設(shè)計(jì)變得更加復(fù)雜。
隨著人工智能和機(jī)器學(xué)習(xí)技術(shù)的成熟，這些技術(shù)逐漸應(yīng)用于智能家居產(chǎn)品上，使得產(chǎn)品帶來的服務(wù)更加舒適、便捷。并且在產(chǎn)品的功能、性能以及人機(jī)交互方面，AI都扮演著非常重要的角色。
目前，這一技術(shù)的應(yīng)用可能還停留在語(yǔ)音交互、人臉識(shí)別、手勢(shì)識(shí)別等簡(jiǎn)單的功能上，那么，未來如何通過AI來了解客戶的使用習(xí)慣，更加智能地為用戶提供服務(wù)，這會(huì)是一個(gè)非常重要的演進(jìn)方向。
恩智浦是一家全球領(lǐng)先的芯片公司，不過，我們不僅僅提供先進(jìn)的芯片，我們同時(shí)會(huì)提供包含軟件在內(nèi)的一整套系統(tǒng)解決方案和平臺(tái)。
解決方案中最底層的是恩智浦廣泛而強(qiáng)大的邊緣處理和無(wú)線連接的產(chǎn)品組合，構(gòu)建在上面的是各類主流操作系統(tǒng)、中間件、軟件算法和各種應(yīng)用層的實(shí)際用例。
最后是我們和各大IoT云平臺(tái)廠商的對(duì)接。
恩智浦能夠提供的產(chǎn)品和服務(wù)非常多，因?yàn)闀r(shí)間原因，我現(xiàn)在從基于AI的視覺和語(yǔ)音技術(shù)以及Matter這兩個(gè)方面進(jìn)行介紹。
2019年，由全球幾家智能家居生態(tài)巨頭——亞馬遜、蘋果、三星等，聯(lián)合包括恩智浦在內(nèi)的智能家居芯片供應(yīng)商，以及連接標(biāo)準(zhǔn)聯(lián)盟共同發(fā)起的基于Wi-Fi和Thread的IP應(yīng)用層的Matter協(xié)議，可以讓各個(gè)品牌的產(chǎn)品實(shí)現(xiàn)完全無(wú)縫地互操作。
恩智浦是Matter聯(lián)盟里面重要的發(fā)起者和創(chuàng)立者，我們的初衷是希望能夠解決之前提到的，智能家居產(chǎn)品無(wú)法簡(jiǎn)單有效地實(shí)現(xiàn)互操作的挑戰(zhàn)。同時(shí)，無(wú)論從無(wú)線技術(shù)產(chǎn)品的豐富程度還是軟件生態(tài)上的投入來說，恩智浦都是這個(gè)聯(lián)盟里非常重要的領(lǐng)導(dǎo)者。
恩智浦基于Matter推出了多款產(chǎn)品，我簡(jiǎn)單介紹一下2個(gè)最新的產(chǎn)品，第一個(gè)是K32W1，是基于我們即將推出的低功耗藍(lán)牙和802.15.4雙模低功耗MCU，它能夠支持ZigBee、藍(lán)牙5.3、Thread和Matter協(xié)議，同時(shí)具有豐富的存儲(chǔ)空間和強(qiáng)大的算力，集成了一個(gè)安全模塊，以及業(yè)界頂尖的射頻性能，適用于各種需要支持Matter的節(jié)點(diǎn)設(shè)備產(chǎn)品。
第二個(gè)產(chǎn)品是IW612，恩智浦今年年初推出的業(yè)界首顆三頻無(wú)線SoC，包含了最新的Wi-Fi 6，藍(lán)牙5.2和802.15.4，具有強(qiáng)大的三頻共存操作能力，包含了恩智浦先進(jìn)的安全模塊EdgeLock，作為單芯片解決方案，其非常適合設(shè)計(jì)、支持Matter的網(wǎng)關(guān)和邊界路由器。
恩智浦在Matter方面的投入遠(yuǎn)不止這些，我們?cè)诰W(wǎng)站上提供了非常豐富的開源代碼、應(yīng)用案例、文檔、培訓(xùn)、視頻，大家有興趣的話可以訪問圖片右上角的網(wǎng)址，可以得到更多詳細(xì)的信息。
解決了設(shè)備間互操作問題后，恩智浦又是如何應(yīng)對(duì)人工智能在智能家居中的普及和應(yīng)用挑戰(zhàn)的？
通常情況下，人工智能和機(jī)器學(xué)習(xí)技術(shù)主要是由數(shù)據(jù)科學(xué)家或者機(jī)器學(xué)習(xí)專家來開發(fā)實(shí)現(xiàn)，這個(gè)過程需要大量的人工智能相關(guān)的知識(shí)積累，很多智能家居的開發(fā)者并沒有這樣的基礎(chǔ)。
早在2018年，恩智浦就推出了一套軟件開發(fā)套件eIQ，這個(gè)工具使得基于MCU和MPU的機(jī)器學(xué)習(xí)和應(yīng)用開發(fā)變得更加簡(jiǎn)單。該工具有兩個(gè)簡(jiǎn)單的入口，用戶可以基于自己的數(shù)據(jù)集，利用工具內(nèi)嵌的各種模型進(jìn)行選擇，然后對(duì)模型進(jìn)行訓(xùn)練、優(yōu)化和裁剪，最后部署到邊緣處理器上。
客戶如果有自己的模型，也可以利用eIQ進(jìn)行更方便地部署。
恩智浦花了大量人力，將最常用的各種推理引擎優(yōu)化后，配置到恩智浦的MCU和MPU上，同時(shí)利用芯片端的硬件加速系統(tǒng)，如神經(jīng)網(wǎng)絡(luò)加速模塊等，來實(shí)現(xiàn)智能家居中各種機(jī)器學(xué)習(xí)應(yīng)用的開發(fā)，這也是這個(gè)工具的核心部分。
在具體應(yīng)用上，恩智浦在語(yǔ)音交互和機(jī)器視覺方面進(jìn)行了重點(diǎn)投入。恩智浦有著多年的語(yǔ)音識(shí)別技術(shù)和開發(fā)經(jīng)驗(yàn)，同時(shí)去年我們還收購(gòu)了一家全球領(lǐng)先的語(yǔ)音和音頻算法公司，能夠?yàn)榭蛻籼峁┩暾恼Z(yǔ)音交互和語(yǔ)音識(shí)別解決方案。
我們提供的語(yǔ)音交互軟件中，包含了免費(fèi)的本地語(yǔ)音識(shí)別方案（VIT），該方案包括喚醒詞和語(yǔ)音識(shí)別命令，再加上VoiceSeeker語(yǔ)音前端處理，能提供完整的語(yǔ)音前端處理套件，包含波速成型、語(yǔ)音消除和噪聲消除等功能。
另外，我們還有非常精簡(jiǎn)的高性能喚醒詞和語(yǔ)音識(shí)別軟件套件VoiceSpot。
如果客戶在使用這些軟件時(shí)遇到困難，我們也會(huì)提供Turnkey Solutions（交鑰匙解決方案），這個(gè)方案里不僅包含了之前我們提到的語(yǔ)音識(shí)別軟件，同時(shí)會(huì)為客戶提供一套完整的包括文檔在內(nèi)的解決方案和應(yīng)用場(chǎng)景，讓客戶能夠直接將整個(gè)方案部署到產(chǎn)品中。
在機(jī)器視覺方面，恩智浦不僅提供完整的解決方案，同時(shí)也有各種demo和應(yīng)用場(chǎng)景。
下圖是我們所做的部分機(jī)器視覺應(yīng)用案例，其中有一些可以應(yīng)用到智能家居產(chǎn)品中，一些可以應(yīng)用到工業(yè)中。這里面包括人臉識(shí)別、人體檢測(cè)、手勢(shì)識(shí)別、人體姿勢(shì)識(shí)別，還包括非常精細(xì)化的手勢(shì)識(shí)別和眼球追蹤。
目前，我們看到的這些案例都是基于恩智浦高性能的MCU產(chǎn)品，實(shí)際上這些應(yīng)用都可以擴(kuò)展到恩智浦MPU產(chǎn)品和低端的低功耗MCU上。
恩智浦推出的EdgeReady解決方案，就包含了之前我們提到的語(yǔ)音技術(shù)、視覺算法，同時(shí)我們?cè)谕暾挠布脚_(tái)上給客戶提供包括人臉識(shí)別、語(yǔ)音識(shí)別的應(yīng)用場(chǎng)景，以及我們下半年將推出的無(wú)接觸式人機(jī)交互解決方案。它可以實(shí)現(xiàn)，在一顆高性能MCU上實(shí)現(xiàn)人臉識(shí)別、手勢(shì)交互、語(yǔ)音識(shí)別、圖形顯示等所有功能。
最后總結(jié)一下，同時(shí)也回應(yīng)一下我們之前提到的，恩智浦不僅是一家芯片公司，更是一家提供系統(tǒng)解決方案的公司。
我們擁有廣泛的邊緣處理產(chǎn)品線，包括低端的MCU、高性能的MCU跨界處理器和應(yīng)用處理器，同時(shí)也有無(wú)線連接產(chǎn)品，SDK、軟件、算法以及完成的解決方案，能夠幫助用戶應(yīng)對(duì)智能家居的挑戰(zhàn)。
我今天的分享就到這里，謝謝大家。
