智能家居創(chuàng)建和采用邊緣AI解決方案的令人信服的理由是什么?

智能家居人機(jī)交互需要多模式方法
正如我們之前所討論的,針對智能手機(jī)和汽車應(yīng)用的基于邊緣AI的解決方案主要側(cè)重于攝像機(jī)視覺應(yīng)用。但是,在智能家居中,多模式人機(jī)交互界面是在連接設(shè)備的新時代增強(qiáng)用戶體驗的關(guān)鍵要素。以機(jī)頂盒為例,此應(yīng)用將需要視頻AI,也許是如前所述的視頻增強(qiáng)形式。它還需要語音AI能夠通過語音命令來識別正在看電視的人,并相應(yīng)地配置體驗。例如,讓選擇喜歡的節(jié)目變得更加容易。甚至可能需要視覺AI,并且需要帶有內(nèi)置攝像頭,以便遠(yuǎn)程與家庭成員聊天時提供增強(qiáng)而直觀的視頻會議體驗。
理想的解決方案是以智能家居為中心的SoC(系統(tǒng)級芯片,System-on-a-Chip),它可以支持高性能視頻、語音和視覺處理以及集成的AI加速器。 Synaptics VS600 SoC系列就是這種解決方案的一個示例。這種方法不僅經(jīng)過優(yōu)化,可以滿足智能家居應(yīng)用對多模式AI性能的要求,而且還可以將所有這些功能集成到單個芯片中,從而使以消費者市場價格出售的普通家用產(chǎn)品都可以使用。
這個需要的解決方案從一個SOC平臺開始,該平臺集成了多種類型的處理器引擎:CPU、NPU、GPU和ISP,以及與高性能相機(jī)和顯示器的掛鉤。這種架構(gòu)實現(xiàn)了高度安全、低成本推理和實時多模式性能的理想組合。Synaptics Edge AI系列是一系列SoC,每個SoC都高度針對其給定的消費類應(yīng)用。該系列中的每個SoC都集成了所需的處理內(nèi)核以及該應(yīng)用程序的適當(dāng)級別的集成AI性能。
完整的堆棧工具方法可簡化AI開發(fā)
如我們所見,成本/性能之間的權(quán)衡對于成功將邊緣AI擴(kuò)展到更多應(yīng)用至關(guān)重要。在競爭激烈的消費電子領(lǐng)域、上市時間和差異化也至關(guān)重要。為了應(yīng)對邊緣AI廣泛傳播的挑戰(zhàn),需要采用全棧方法,其中包括將AI創(chuàng)新引入邊緣 AI SoC的必要開發(fā)工具。
最重要的是,所需的工具集應(yīng)該與龐大且不斷增長的AI開發(fā)人員用戶社區(qū)兼容。例如,該工具包將使開發(fā)人員能夠?qū)胧褂眯袠I(yè)標(biāo)準(zhǔn)框架(例如TensorFlow,TensorFlow Lite,Caffe和ONNX)創(chuàng)建的模型。這使開發(fā)人員能夠利用現(xiàn)有的AI創(chuàng)新,并使他們迅速而輕松地在目標(biāo)SoC上工作。
讓我們使用我們前面討論的個人家庭瑜伽教練應(yīng)用。該應(yīng)用所基于的AI模型將是人體姿勢估計模型,這是一種行業(yè)標(biāo)準(zhǔn)的概念,用于檢測用戶在攝像機(jī)視線中的相對骨骼位置。如果AI開發(fā)人員自己使用行業(yè)標(biāo)準(zhǔn)工具(例如TensorFlow lite)創(chuàng)建的人體姿勢估計模型的實現(xiàn),則他們將使用該工具包將其導(dǎo)入以在所需的SoC上使用。

當(dāng)開發(fā)人員準(zhǔn)備就緒時,該工具應(yīng)使他們能夠針對將在其上運行的所選處理器優(yōu)化其AI模型的性能。開發(fā)人員可以選擇使用開放框架,例如TensorFlow或TensorFlow Lite,但是在使用它們時要牢記目標(biāo)處理器的功能。或者他們可以再次使用特定于SoC的工具,例如Synaptics的SyNAP工具,該工具支持專門針對VS600 SoC中的處理器進(jìn)行優(yōu)化。在我們的示例中,開發(fā)人員可以使用SyNAP優(yōu)化功能來配置其身體姿勢估計模型,例如,使其能夠以每秒30幀的速度在VS600 SoC上實時運行。
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
- 1 深圳無人車4月報告:1259臺車上路,從"跑起來"到"跑通宵",這座城市做對了什么?
- 2 重慶印發(fā)《智能網(wǎng)聯(lián)汽車高速公路測試管理細(xì)則(試行)》:放行L3+上高速:自動駕駛的“科目三”終于開考了
- 3 深圳一季度近萬億GDP答卷:多產(chǎn)業(yè)高增長,專家狂贊高質(zhì)量競爭力
- 4 浙江電信“四新”升級!
- 5 哈啰砸2億搶跑長沙自動駕駛Robotaxi:一個“掃碼騎單車”的巨頭,要讓你“掃碼坐無人車”了?
- 6 每年“新增一個經(jīng)濟(jì)大市”!中西部第一大省,雄心曝光
- 7 每個火箭背后都有一座想轉(zhuǎn)型的城市
- 8 廈門智交會上的“深圳序廳”:2400條路、2000臺車、866萬單,鵬城如何定義無人車的“中國方案” ?
- 9 西安“押注”2030年:1500輛無人車上路、年產(chǎn)155萬輛新能源車!一座古城的“未來交通豪賭”?
- 10 干掉舊金山!青島靠9.9元無人車和一座“來電島”逆襲全球第一城:新石器、九識、白犀牛、菜鳥、滴滴、貨拉拉誰能笑到最后?
- 高級軟件工程師 廣東省/深圳市
- 自動化高級工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)(光器件) 北京市/海淀區(qū)
- 激光器高級銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市


分享









