提供技术支持-TXC晶振-晶振厂家-32.768K,石英晶体振荡器厂家销售-NDK振荡器正规代理商

手機站手機站 在線留言 收藏本站 網站地圖 會員登錄 會員注冊

歡迎來到深圳康比電子有限公司官方網站

24小時加盟熱線0755-27876201
康比電子秉承維護客戶利益為宗旨
當前位置首頁 » 行業動態 » Renesas采用RA8D1 MCUs的圖形和視覺AI應用

Renesas采用RA8D1 MCUs的圖形和視覺AI應用

返回列表 來源:*** 查看手機網址
掃一掃!Renesas采用RA8D1 MCUs的圖形和視覺AI應用掃一掃!
瀏覽:- 發布日期:2024-03-13 10:22:24【
分享到:
Renesas采用RA8D1 MCUs的圖形和視覺AI應用
視覺人工智能(即計算機視覺)是指允許系統感知和解釋視覺數據并根據對這些數據的分析做出自主決策的技術。這些系統通常具有用于獲取視覺數據的相機傳感器,該視覺數據作為輸入激活提供給在大型圖像數據集上訓練的神經網絡以識別圖像。視覺人工智能可以支持許多應用,例如用于故障檢測的工業機器視覺、自動駕駛汽車、安全應用中的人臉識別、圖像分類、對象檢測和跟蹤、醫療成像、交通管理、路況監控、客戶熱圖生成等。
在我之前的博客中,利用業界最強大的Arm MCUs為您的邊緣AI應用提供動力》中,我討論了采用Cortex的強大RA8系列MCU的一些關鍵性能優勢®-M85內核和氦氣使其非常適合語音和視覺AI應用。如上所述,石英晶振更高性能的MCU以及更適合終端設備中使用的資源受限的MCU的瘦神經網絡模型的出現,使這些邊緣AI應用成為可能。
在這篇博客中,我將討論一個基于RA8D1支持圖形的MCU采用相同的Cortex-M85內核,并使用氦氣來加速神經網絡。RA8D1 MCUs提供了高級圖形功能、傳感器接口、大內存和強大的Cortex-M85內核的獨特組合,用于加速視覺人工智能神經網絡,使其非常適合這些視覺人工智能應用。
Renesas瑞薩進口晶振已經成功展示了氦的性能提升,在各種AI/ML用例中,氦的性能比Cortex-M7 MCU有顯著提高,在某些情況下提高了3.6倍以上。
其中一個用例是與視覺人工智能解決方案的領先提供商Plumerai合作開發的人員檢測應用程序。這種基于攝像頭的人工智能解決方案已經移植并優化用于支持氦氣的手臂®皮質®-M85內核,成功展示了RA8D1設備的性能和圖形功能。
與Cortex-M7內核相比,該應用通過氦加速實現了3.6倍的性能提升和13.6fps幀速率,這對于沒有硬件加速的MCU來說是一個強大的性能。演示平臺以640x480分辨率從基于OV7740圖像傳感器的攝像機捕捉實時圖像,并在連接的800x480 LCD上顯示檢測結果。該軟件可以檢測和跟蹤攝像機幀內的每個人,即使部分被遮擋也是如此,并在實時攝像機顯示器上顯示每個檢測到的人周圍繪制的邊界框。

Renesas RA8D1 MCUs

Renesas采用RA8D1 MCUs的圖形和視覺AI應用

Plumerai人員檢測軟件使用多層卷積神經網絡,使用超過3200萬張標記圖像進行訓練。占總延遲大部分的層是氦加速層,例如Conv2D和全連接層,以及深度卷積和轉置卷積層。
相機模塊提供YUV422格式的圖像,該圖像被轉換為RGB565格式以在LCD屏幕上顯示。集成在RA8D1上的2D圖形引擎以256x192的分辨率調整RGB565的大小并將其轉換為ABGR8888,以輸入到神經網絡中。然后,該軟件將ARBG8888格式轉換為神經網絡模型輸入格式,并運行人員檢測推斷功能。RA8D1上的圖形LCD控制器和2D繪圖引擎用于將相機輸入渲染到LCD屏幕上,并在檢測到的人周圍繪制邊界框并顯示幀速率。人員檢測軟件使用大約1.2MB的閃存和320KB的SRAM,包括用于256x192 ABGR8888輸入圖像的內存。
Renesas RA8D1 MCUs-1
基準測試是為了比較Plumerai的人員檢測解決方案以及使用Arm的CMSIS-NN內核運行TFMicro的相同神經網絡的延遲。此外,對于Cortex-M85,禁用氦氣(MVE)的兩種解決方案的性能也進行了基準測試。該基準測試數據顯示了純推理性能,并且不包括圖形功能的延遲,例如圖像格式轉換。

Renesas RA8D1 MCUs-2

Renesas RA8D1 MCUs-3

Renesas采用RA8D1 MCUs的圖形和視覺AI應用

該應用程序充分利用了RA8D1上的所有可用資源:
高性能480MHz處理器
氦用于神經網絡加速
用于存儲模型權重和輸入激活的大型閃存和SRAM
用于捕獲輸入圖像/視頻的相機接口
顯示人員檢測結果的顯示界面
瑞薩石英晶振還展示了基于RA8D1設備的多模態語音和視覺AI解決方案,該解決方案集成了視覺喚醒詞和人臉檢測和識別以及說話人識別。RA8D1 MCUswith Helium可以顯著提高神經網絡性能,而無需任何額外的硬件加速,從而為實現AI和機器學習用例提供了一種低成本、低功耗的選擇。
瑞薩RA8D1微控制器組采用業界首款基于Arm的32位圖形支持微控制器(MCU)®皮質®-M85(CM85)內核,在480 MHz時提供超過3000個內核點的突破性性能和卓越的圖形功能,支持高分辨率顯示和視覺AI應用。這些是通用MCU器件,適用于工業自動化、家用電器、智能家居、消費電子、樓宇/家庭自動化和醫療/保健細分市場中的各種高性能和計算密集型應用。
RA8D1 MCUs貼片晶振集成了高性能CM85內核和大容量存儲器以及豐富的外設集,包括具有并行RGB和MIPI-DSI接口的高分辨率TFT-LCD控制器、2D繪圖引擎、16位攝像頭接口和多個外部存儲器接口,針對各種圖形和視覺AI應用的需求進行了優化。這些MCU提供176和224引腳封裝。類似安全元素的功能內置了高級加密安全IP、不可變存儲、真正的安全啟動和篡改保護,可實現真正安全的物聯網。

RA8D1 MCUs由靈活的軟件包和一套全面的硬件和軟件開發工具提供全面支持。

編碼 品牌 描述 頻率
603-25-173JA4I8 Renesas晶振 CRYSTAL 25.0000MHZ 12PF SMD 25 MHz
603-25-150JA4I Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz
603-38.88-7JA4I Renesas晶振 CRYSTAL 38.8800MHZ 12PF SMD 38.88 MHz
603-40-48JA4I Renesas晶振 CRYSTAL 40.0000MHZ 12PF SMD 40 MHz
603-25-173JA4I Renesas晶振 CRYSTAL 25.0000MHZ 12PF SMD 25 MHz
603-25-150JA4I8 Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz
603-38.88-7JA4I8 Renesas晶振 CRYSTAL 38.8800MHZ 12PF SMD 38.88 MHz
603-40-48JA4I8 Renesas晶振 CRYSTAL 40.0000MHZ 12PF SMD 40 MHz
278-24.8832-3SA2I Renesas晶振 CRYSTAL 24.8330MHZ 10PF SMD 24.833 MHz
278-24.8832-3SA2I8 Renesas晶振 CRYSTAL 24.8330MHZ 10PF SMD 24.833 MHz
278-25.78125-1SA2I Renesas晶振 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
278-25-336SA2I Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
278-25-336SA2I8 Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
278-2578125-1SA2I8 康比電子 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
495-24.8832-2JB4I Renesas晶振 CRYSTAL 24.8830MHZ 10PF SMD 24.883 MHz
495-24.8832-2JB4I8 Renesas晶振 CRYSTAL 24.8830MHZ 10PF SMD 24.883 MHz
495-25.78125-2JB4I Renesas晶振 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
495-25-141JB4I Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
495-25-141JB4I8 Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
495-2578125-2JB4I8 Renesas晶振 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
603-24-127JA4I Renesas晶振 CRYSTAL 24.0000MHZ 12PF SMD 24 MHz
603-24-127JA4I8 Renesas晶振 CRYSTAL 24.0000MHZ 12PF SMD 24 MHz
603-25-150JA4C Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz
603-25-150JA4C8 Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz

快速通道
pass
+ 快速通道

主站蜘蛛池模板: 宁波明驰同步带有限公司 | 山东胜王水处理设备有限公司,反渗透设备,纯净水设备,污水处理设备,SWS系列全自动钠离子交换器,纯净水设备报价,活性碳过滤器,多介质过滤器 | 压力蒸汽灭菌器_脉动真空灭菌器_环氧乙烷灭菌器_等离子灭菌器_广州市科洋 | 玉米加工机械_玉米加工设备_玉米深加工机械_玉米糁加工设备--滑县鑫丰粮油机械有限公司 | 暖家乐散热器_天津市暖家乐金属制品有限公司 | 烟气在线监测系统_VOCs在线监测_分析仪「杭州世驰科技」 | 企好网 - 中国B2B产业互联网践行者|百度爱采购官方授权一级服务商 | 熊猫家装-装修公司,上海装修、室内设计、家装、别墅装修、办公室装修、全屋定制就上熊猫家装 | 江西佛像厂 江西法器厂 江西抚州东乡江弘法器有限公司 东乡江弘法器厂 佛像厂 法器厂 | 深圳市大业激光成型技术有限公司| 矿用三环链|锻打/焊接三环链|矿车万能环|三环链销子-济宁卓力工矿设备有限公司 | 山东日兴新材料股份有限公司 | 长沙广告设计公司|长沙广告制作|湖南户外广告制作|商业美陈就找湖南盛翔文化传媒有限公司老品牌高品质 | 锌铝合金压铸-深圳压铸加工-铝挤压拉伸-压铸模具厂-广东誉格精密技术有限公司 | 交通标志牌-交通标牌-铝圆牌-铝三角片-铝滑槽-公路警示指示牌-方牌-高速道路反光牌毛坯-交通设施安全警示标识牌-路名指示限速限高牌-厂家加工交通标牌铝板半成品毛坯-上海吕盟铝业有限公司 | 免费的动态思维导图软件,脑图大师,思维导图制作软件 - 万彩脑图大师官网 | 童程童美少儿编程培训课程 - 上市公司缔造少儿编程专业化品牌20年 | 上海物业管理_写字楼物业管理_厂房物业管理_上海企福物业管理有限公司 | 玉米加工机械_玉米加工设备_玉米深加工机械_玉米糁加工设备--滑县鑫丰粮油机械有限公司 | 学校直饮水机-反渗透纯水设备-家用净水器厂家-广州颖圣能源设备 学校洗碗机-郑州洗碗机厂家-商用洗碗机-郑州旭申环保科技有限公司 | 江寒必恋术在线阅读_江寒必恋术免费下载 - 江寒必恋术电子书 | 托普云农-数字农业综合服务商-官方网站 | 均高生物科技(上海)有限公司-二十年专注于均质·乳化·粉碎·分散工艺 | 潍坊博发动力设备有限公司 | 席高设计型地板官网_拼花地板_高端木地板定制专家_轻奢地板 | 机械智能停车设备_智能机械式立体停车库_立体车库停车设备租赁_山东科博机械车库 | 深圳市佳顺优印印刷有限公司,佳顺优印,画册印刷,海报印刷,封套印刷,手提袋印刷,包装盒印刷,彩盒印刷,无碳纸印刷,不干胶印刷,信封印刷,便笺印刷,笔记本印刷,台历印刷,挂历印刷,国际会展中心附近印刷厂,宝安印刷厂,宝安教材印刷厂 | 专业提供医疗器械,医疗设备,进口国产医疗设备,医疗耗材采购,医疗设备厂家等医疗器械信息-上海聚慕医疗器械有限公司 | 一体化净水器设备-浸没式膜水处理设备-智慧水务-超滤膜-模块化净水设备-浙江华晨环保有限公司 | 科衣洛定制衣柜,书柜,厨柜,衣帽间,电视柜,酒柜,餐厅柜,门厅柜,鞋柜——科衣洛全屋定制官网 | 湖南视频会议设备厂家|长沙视频会议设备安装型号齐全找湖南日恒智能工程有限公司 | 宁波科迈尔工程机械有限公司-履带,底盘 | 青岛熔喷过滤芯_青岛过滤器生产厂家_青岛净水滤料厂家_青岛净达过滤技术有限公司 | 双合金_注塑机_螺杆|炮筒|料管|料筒-广东海驰德塑胶机械有限公司 | 纸袋机|多层纸袋机|高速纸袋机|无锡市天天友情机械有限公司 | 气胀轴丨安全夹头丨电磁制动器丨纠偏系统丨磁粉离合器丨张力控制器厂家- 东莞天机通信科技有限公司 | 随州网站建设_随州建站公司_随州SEO优化排名_随州网络公司-随州市金思维网络科技有限公司 | 在线播放国产精品|哔咔漫画破解版永久vip兑换码|免费黄漫画|女被黄漫扒衣服软件|91精品麻豆 | 景德镇水流星陶瓷文化传播有限公司 | 联智通达_工控一体机_工业触摸一体机_工业一体机_工业触控一体机_POS机主板_工控主板_国产化主板_RK3588主板厂商-联智通达 | 水表_智能电表_抄表软件_ic卡水控机_电磁水表厂家-深圳市华熙仪数码科技有限公司 |