提供技术支持-TXC晶振-晶振厂家-32.768K,石英晶体振荡器厂家销售-NDK振荡器正规代理商

手機站手機站 在線留言 收藏本站 網站地圖 會員登錄 會員注冊

歡迎來到深圳康比電子有限公司官方網站

24小時加盟熱線0755-27876201
康比電子秉承維護客戶利益為宗旨
當前位置首頁 » 行業動態 » Renesas采用RA8D1 MCUs的圖形和視覺AI應用

Renesas采用RA8D1 MCUs的圖形和視覺AI應用

返回列表 來源:*** 查看手機網址
掃一掃!Renesas采用RA8D1 MCUs的圖形和視覺AI應用掃一掃!
瀏覽:- 發布日期:2024-03-13 10:22:24【
分享到:
Renesas采用RA8D1 MCUs的圖形和視覺AI應用
視覺人工智能(即計算機視覺)是指允許系統感知和解釋視覺數據并根據對這些數據的分析做出自主決策的技術。這些系統通常具有用于獲取視覺數據的相機傳感器,該視覺數據作為輸入激活提供給在大型圖像數據集上訓練的神經網絡以識別圖像。視覺人工智能可以支持許多應用,例如用于故障檢測的工業機器視覺、自動駕駛汽車、安全應用中的人臉識別、圖像分類、對象檢測和跟蹤、醫療成像、交通管理、路況監控、客戶熱圖生成等。
在我之前的博客中,利用業界最強大的Arm MCUs為您的邊緣AI應用提供動力》中,我討論了采用Cortex的強大RA8系列MCU的一些關鍵性能優勢®-M85內核和氦氣使其非常適合語音和視覺AI應用。如上所述,石英晶振更高性能的MCU以及更適合終端設備中使用的資源受限的MCU的瘦神經網絡模型的出現,使這些邊緣AI應用成為可能。
在這篇博客中,我將討論一個基于RA8D1支持圖形的MCU采用相同的Cortex-M85內核,并使用氦氣來加速神經網絡。RA8D1 MCUs提供了高級圖形功能、傳感器接口、大內存和強大的Cortex-M85內核的獨特組合,用于加速視覺人工智能神經網絡,使其非常適合這些視覺人工智能應用。
Renesas瑞薩進口晶振已經成功展示了氦的性能提升,在各種AI/ML用例中,氦的性能比Cortex-M7 MCU有顯著提高,在某些情況下提高了3.6倍以上。
其中一個用例是與視覺人工智能解決方案的領先提供商Plumerai合作開發的人員檢測應用程序。這種基于攝像頭的人工智能解決方案已經移植并優化用于支持氦氣的手臂®皮質®-M85內核,成功展示了RA8D1設備的性能和圖形功能。
與Cortex-M7內核相比,該應用通過氦加速實現了3.6倍的性能提升和13.6fps幀速率,這對于沒有硬件加速的MCU來說是一個強大的性能。演示平臺以640x480分辨率從基于OV7740圖像傳感器的攝像機捕捉實時圖像,并在連接的800x480 LCD上顯示檢測結果。該軟件可以檢測和跟蹤攝像機幀內的每個人,即使部分被遮擋也是如此,并在實時攝像機顯示器上顯示每個檢測到的人周圍繪制的邊界框。

Renesas RA8D1 MCUs

Renesas采用RA8D1 MCUs的圖形和視覺AI應用

Plumerai人員檢測軟件使用多層卷積神經網絡,使用超過3200萬張標記圖像進行訓練。占總延遲大部分的層是氦加速層,例如Conv2D和全連接層,以及深度卷積和轉置卷積層。
相機模塊提供YUV422格式的圖像,該圖像被轉換為RGB565格式以在LCD屏幕上顯示。集成在RA8D1上的2D圖形引擎以256x192的分辨率調整RGB565的大小并將其轉換為ABGR8888,以輸入到神經網絡中。然后,該軟件將ARBG8888格式轉換為神經網絡模型輸入格式,并運行人員檢測推斷功能。RA8D1上的圖形LCD控制器和2D繪圖引擎用于將相機輸入渲染到LCD屏幕上,并在檢測到的人周圍繪制邊界框并顯示幀速率。人員檢測軟件使用大約1.2MB的閃存和320KB的SRAM,包括用于256x192 ABGR8888輸入圖像的內存。
Renesas RA8D1 MCUs-1
基準測試是為了比較Plumerai的人員檢測解決方案以及使用Arm的CMSIS-NN內核運行TFMicro的相同神經網絡的延遲。此外,對于Cortex-M85,禁用氦氣(MVE)的兩種解決方案的性能也進行了基準測試。該基準測試數據顯示了純推理性能,并且不包括圖形功能的延遲,例如圖像格式轉換。

Renesas RA8D1 MCUs-2

Renesas RA8D1 MCUs-3

Renesas采用RA8D1 MCUs的圖形和視覺AI應用

該應用程序充分利用了RA8D1上的所有可用資源:
高性能480MHz處理器
氦用于神經網絡加速
用于存儲模型權重和輸入激活的大型閃存和SRAM
用于捕獲輸入圖像/視頻的相機接口
顯示人員檢測結果的顯示界面
瑞薩石英晶振還展示了基于RA8D1設備的多模態語音和視覺AI解決方案,該解決方案集成了視覺喚醒詞和人臉檢測和識別以及說話人識別。RA8D1 MCUswith Helium可以顯著提高神經網絡性能,而無需任何額外的硬件加速,從而為實現AI和機器學習用例提供了一種低成本、低功耗的選擇。
瑞薩RA8D1微控制器組采用業界首款基于Arm的32位圖形支持微控制器(MCU)®皮質®-M85(CM85)內核,在480 MHz時提供超過3000個內核點的突破性性能和卓越的圖形功能,支持高分辨率顯示和視覺AI應用。這些是通用MCU器件,適用于工業自動化、家用電器、智能家居、消費電子、樓宇/家庭自動化和醫療/保健細分市場中的各種高性能和計算密集型應用。
RA8D1 MCUs貼片晶振集成了高性能CM85內核和大容量存儲器以及豐富的外設集,包括具有并行RGB和MIPI-DSI接口的高分辨率TFT-LCD控制器、2D繪圖引擎、16位攝像頭接口和多個外部存儲器接口,針對各種圖形和視覺AI應用的需求進行了優化。這些MCU提供176和224引腳封裝。類似安全元素的功能內置了高級加密安全IP、不可變存儲、真正的安全啟動和篡改保護,可實現真正安全的物聯網。

RA8D1 MCUs由靈活的軟件包和一套全面的硬件和軟件開發工具提供全面支持。

編碼 品牌 描述 頻率
603-25-173JA4I8 Renesas晶振 CRYSTAL 25.0000MHZ 12PF SMD 25 MHz
603-25-150JA4I Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz
603-38.88-7JA4I Renesas晶振 CRYSTAL 38.8800MHZ 12PF SMD 38.88 MHz
603-40-48JA4I Renesas晶振 CRYSTAL 40.0000MHZ 12PF SMD 40 MHz
603-25-173JA4I Renesas晶振 CRYSTAL 25.0000MHZ 12PF SMD 25 MHz
603-25-150JA4I8 Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz
603-38.88-7JA4I8 Renesas晶振 CRYSTAL 38.8800MHZ 12PF SMD 38.88 MHz
603-40-48JA4I8 Renesas晶振 CRYSTAL 40.0000MHZ 12PF SMD 40 MHz
278-24.8832-3SA2I Renesas晶振 CRYSTAL 24.8330MHZ 10PF SMD 24.833 MHz
278-24.8832-3SA2I8 Renesas晶振 CRYSTAL 24.8330MHZ 10PF SMD 24.833 MHz
278-25.78125-1SA2I Renesas晶振 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
278-25-336SA2I Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
278-25-336SA2I8 Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
278-2578125-1SA2I8 康比電子 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
495-24.8832-2JB4I Renesas晶振 CRYSTAL 24.8830MHZ 10PF SMD 24.883 MHz
495-24.8832-2JB4I8 Renesas晶振 CRYSTAL 24.8830MHZ 10PF SMD 24.883 MHz
495-25.78125-2JB4I Renesas晶振 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
495-25-141JB4I Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
495-25-141JB4I8 Renesas晶振 CRYSTAL 25.0000MHZ 10PF SMD 25 MHz
495-2578125-2JB4I8 Renesas晶振 CRYSTAL 25.7810MHZ 10PF SMD 25.781 MHz
603-24-127JA4I Renesas晶振 CRYSTAL 24.0000MHZ 12PF SMD 24 MHz
603-24-127JA4I8 Renesas晶振 CRYSTAL 24.0000MHZ 12PF SMD 24 MHz
603-25-150JA4C Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz
603-25-150JA4C8 Renesas晶振 CRYSTAL 25.0000MHZ 8PF SMD 25 MHz

快速通道
pass
+ 快速通道

主站蜘蛛池模板: 深圳社区邦家政公司-保姆_月嫂_育儿嫂 _早教育婴师_家政钟点工_家政培训_家政加盟- 社区邦优质生活服务 专业、标准化、便捷、安心,一站式家庭服务平台,服务专业有保障 ! | 油漆颜料砂磨机,油墨水砂磨机,水性涂料砂磨机-常州市奥能达机械设备有限公司 | 气胀轴丨安全夹头丨电磁制动器丨纠偏系统丨磁粉离合器丨张力控制器厂家- 东莞天机通信科技有限公司 | 深圳激光焊锡机-全自动点胶机设备-全自动激光焊锡机厂家-深圳创精锐 | 铁谷网-垂直于铸造产业链服务平台、原材料采购网、行业资讯网 | 木业信息网[www.wood186.com]全国木业建材服务平台 | 水电站泵站LCU控制屏_发电机保护_变压器保护_逆功率保护_防孤岛保护装置_ 电力微机保护网 | 粮食烘干机|玉米烘干机|稻谷烘干机|小麦烘干机|大型连续烘干塔|500吨连续烘干塔|钢板仓|-郑州新光矿山机械制造有限公司 | 数据采集卡_北京科尔特兴业测控技术研究所 | 消泡剂厂家-水处理消泡剂-有机硅消泡剂-广东广州多美多消泡剂厂家 | 南京样本设计,彩页制作,宣传册设计,画册设计印刷,包装设计公司,南京台历制作 | 江苏德邦化学工业集团有限公司 | 聊城钢管厂,无缝钢管厂家-山东旺耀金属制品有限公司 | 五凌汽配-轮胎螺丝|中心螺丝|小螺丝|轮胎螺栓|扭力杆螺丝|高强度紧固件|螺丝螺母|汽车配件 | 热熔钻孔机【优质厂家】_多年热熔钻设备研发制造经验 | 山西配电柜,高低压成套柜,太原高低压柜,山西开关柜,箱变壳体_山西雷隆电柜电气设备有限公司 | 铸铁型材_灰铁棒_球铁棒_圆铁棒生产厂家★河北起昌精密装备制造有限公司 | 永康微网站建设、永康手机网站建设、永康营销型网站建设、永康外贸网站建设、永康网站托管、永康网络公司—英汇网络 - 永康市英汇网络技术有限公司 | 中国焊接协会网站—中国焊接信息网;焊接行业最权威访问量最大的专业网站:焊接信息、焊接材料,焊接机器,焊接设备,焊机,焊材,辅助设备,焊机配件,仪器仪表,电动工具,钎焊,送丝机,表面处理,自动化专机,焊锡丝,助焊剂 | 河间市天一密封材料有限公司-回转窑密封设备,除尘过滤袋 | 沈阳东鹰实业有限公司【官网】-聚氨酯清扫器-胶带输送机保护装置 | 注塑模具厂,注塑模具加工,塑胶模具加工-东莞世邦塑胶官网 | 威学一百-专注国际学校择校备考-DSE-A-level-雅思-托福-OSSD-港澳台联考-AP-IGCSE-IB-AMC-多邻国-PTE-SAT-SSAT-小语种(如日语,韩语,德语,法语,西班牙语,意大利语,俄语,泰语)等考试培训,为出国留学学生提供个性化定制性学习方案,线下实体面授+线上网络课程, 提供一对一,小班课等多种班型 | 苏州交通设施_道路划线_停车场划线_厂区划线_环氧地坪厂家-推荐【飞扬市政交通设施公司】专注交通设施8年! | 芜湖净水设备-纯水设备-无负压供水设备-不锈钢水箱-芜湖市百川给水设备有限责任公司 | 全自动|电加热配液罐,浓缩器厂家-森博百科 | 宁波华路德|交通信号灯|交通信号机|太阳能信号灯|交通警示灯|交通信号灯厂家 | 泡沫混凝土垫层填充厂家,发泡混凝土垫层填充,轻质混凝土垫层填充厂家,深圳市鸿奥建材发展有限公司 | 览众房车,房车, 房车厂家, 房车价格, 房车图片,, 四驱房车, 皮卡房车, 越野房车, 依维柯房车, 国产房车, 自动挡房车, | 专业无机盐,化工产品检测公司,水处理剂检测公司,第三方水质检测机构—准诺检测 | 西安泰富西玛电机有限公司总部-电机-高压电机-西玛电机-西安西玛电机-泰富西玛电机-西安电机厂-西玛电机销售 | 新中式家具,广东新中式家具,广州新中式家具,佛山新中式家具,顺德新中式家具,乐从新中式家具,新中式家具厂家直销--唐明雅居 | 氢能展,氢能展会,燃料电池展,加氢设备_氢气储运_制氢设备_氢燃料汽车_加氢站成套设备 | 云德律师事务所_全国律师服务咨询服务企业 | 专业无机盐,化工产品检测公司,水处理剂检测公司,第三方水质检测机构—准诺检测 | 上饶环亚电脑会计培训学校--电脑学校|上饶电脑学校|上饶电脑培训|会计培训|上饶会计培训|上饶县会计培训|广丰会计培训|玉山会计培训|横峰会计培训|上饶网店培训 上进电缆(嘉兴)股份有限公司官网 - 光伏电缆|防火电缆|电力电缆|铝合金电缆专业生产厂家 | 南京空压机出租,发电机租赁,南京牧德田空压机租赁回收公司 | 微行科技(MicroX):半导体装备核心供应商-超高真空炉 | 南京三维动画制作公司,企业视频制作,视频拍摄,FLASH动画设计,宣传片拍摄,广告片制作 | 智能试剂柜-疾控|高校实验室|医院药品智能试剂管理柜-北京晶品赛思 | 质检报告_COC_CE认证_LFGB测试_REACH_FCC_FDA-冠通检测 |