Ameya360代理:瑞萨电子AI加持的触控和手势识别

发布时间:2022-07-29 10:07
作者:Ameya360
来源:网络
阅读量:2184

    随着电容式触控界面的广泛采用,传统机械按键正在退出历史舞台。用户设计非常好的控制面板现在已经可以支持触摸和手势识别。电容式触控技术能支持设备接受手指和手势的高级操作。通过手指和手势的动作来操作机器已经成为现实,毕竟手势是人类交流最自然的方式之一。在与智能终端产品交互时,也是如此。这都归功于嵌入式计算设备如微控制器和微处理器的巨大发展,使得通过智能传感器实现手势识别成为可能。

    触控屏的使用现在已不仅限于智能手机,它已经扩展到对稳定性和对安全要求更高的工业领域。要想实现这样一个通过感应手指触摸就知道你想要什么的智能界面,已经非常容易了。AutoML还有其他嵌入式AI/ML工具都已经支持基于触控的拖放分析了。

    手势识别可以进一步改善人机交互的体验并且可以运用到多个场景,例如触控屏、相机或外围设备。手势识别是无触摸用户界面(TUI)的基础,即在无触摸的情况下控制设备,无需触摸屏幕、开关或操作按钮。在人机交互方面,使用手势是最直观、最自然的。基于视觉的手势识别技术采用摄像头和运动传感器来跟踪用户的运动。设备中的运动传感器可以跟踪和识别手势,将其作为主要的输入源。随着用于捕捉手势的传感器的发展,一个值得关注的应用是AI虚拟鼠标,它可以通过设备内置的摄像头跟踪手指移动、识别手势、执行鼠标操作:操作滚轮、移动光标。除此之外,使用手势还有助于管理和监控需要安全操作但人手又难以触及的设备,还可以应用于AR和VR环境、手语识别、游戏等多种场景。

    嵌入式手势识别是一种无接触的人机交互方式(HMI)。它们旨在搭配触控屏、摄像头等设备来一起加强人机交互的体验。目前,手势识别和触控,都被用于人机交互(HCI)或物联网(IoT)情况下的人机交互。

    人工智能(AI)和机器学习为通过实时分析来执行更智能任务奠定了基础,在人机互动应用中也呈现了很好的效果。同时,物联网给这些任务的运行提供了基础的支撑。人工智能通过机器学习提供决策能力,物联网提供设备连接和数据共享能力,二者的结合还能进一步扩展能力圈,比如基于用户交互、网络服务和其他相关设备的自主学习。

    人工智能(AI)可以进一步优化手势识别和触控的用户体验,帮助预测用户的屏幕操作来加快互动响应。其它案例研究进一步表明,人工智能还能提高IoT设备对手势识别的准确性。

    在构建支持手势识别和触控交互的方案时,为有效解决电气和射频噪声问题,选择合适的设备来做整体硬件设计是非常关键的,因为准确度是方案的核心。高级相机、智能手表、可穿戴设备或数据传输手套都是这类手势和触控技术可以运用的设备,以及相关AI算法的最佳用武之地。在各种应用场景下,瑞萨都能提供丰富的硬件支持。

    随着电容式触控和手势操作场景的扩展,面板的灵敏度和抗噪性,也已成为实现精确控制和复杂操作的关键要求。还有对防水、防尘和对环境温度变化耐受性的要求。在此之上,开发时间和成本也是需要面对的挑战。

    瑞萨电子的第二代电容触控解决方案可以帮助用户设计出更先进的控制装置。并且我们提供用户友好的开发环境,降低开发门槛,帮助用户加快对电容式触控和3D手势识别方案的开发。

    e-AI×3D手势识别:瑞萨方案助力各种应用

    Renesas QE工具支持“3D手势识别”帮助客户开发基于嵌入式人工智能(AI)的手势应用。开发AI应用往往需要许多复杂的知识背景,Renesas QE工具可以帮助嵌入式工程师无需专门的AI知识背景也能顺利和便捷地开发AI应用。

    使能“3D手势识别”

    在开发智能手势识别应用的过程中,有三个关键环节。

    1、记录(训练)

    在电容式传感器上大量做出你希望系统识别的手势,得到用于注册的数据,把它们显示在列表中。从列表中删除错误的识别数据;对应的,列表也要支持新数据的导入。

Ameya360代理:瑞萨电子AI加持的触控和手势识别

    2、AI生成

    创建AI的过程(数据预处理、深度学习,把训练好的神经网络模型转换为C代码),Renesas QE工具对手势识别做了优化和自动处理。虽然人工智能的自动创建很难很复杂,但Renesas QE已经可以实现手势识别这个细分应用的全过程自动化。

Ameya360代理:瑞萨电子AI加持的触控和手势识别

    3、监控和调整

    用户可以在真实设备上检查和调整AI模型的准确度。如果手势没有被正确识别,可通过工具的“添加数据”按钮,立即导入新的训练数据,来让AI算法做自动优化调整。

Ameya360代理:瑞萨电子AI加持的触控和手势识别

    技术的发展在不断解决手势识别准确性方面的各种挑战。比如用户接触不善导致的传感器感知数据质量不好,物体遮挡造成的视觉采集不完整,以及照明不足的影响。进一步的挑战来源于视觉和感官数据混在一起导致数据集合的错误匹配。因此需要分开处理后再合并,这也导致了响应速度变慢。

(备注:文章来源于网络,信息仅供参考,不代表本网站观点,如有侵权请联系删除!)

在线留言询价

相关阅读
瑞萨电子与航盛电子达成合作共识,签订合作伙伴协议
解决方案 | 瑞萨三合一驱动单元方案,助力电动车轻盈启航
  如今,电动汽车驱动器正在从传统的分布式系统过渡到集中式架构。  在传统的电动汽车设计中,逆变器、车载充电器、DC/DC转换器等关键部件往往采用分布式布局,各自独立工作,通过复杂的线束相互连接。这种设计方式不仅繁杂笨重,且维护起来也异常复杂。在这种情况下,X-in-1技术应用而生。X-in-1技术是一种动力传动系统的集成技术,‌旨在将多个动力传动组件集成到单一的系统中,‌以提高整体性能、‌减少体积和重量。‌  基于X-in-1技术,瑞萨推出三合一电动汽车单元解决方案,该方案将多个分布式系统集成到一个实体中,包括车载充电器,牵引电机控制,以及DC/DC转换器。这种集成极大简化了车辆组装难度,同时也降低了系统成本。  该方案采用适用于HEV/EV电机控制的高端车载微控制器RH850/C1M作为核心控制。RH850/C1M的内部旋转变压器/数字转换器(RDC2)和增强电机控制单元(EMU2)可降低CPU负载,只需与CPU进行少量交互即可有效控制电机。在MCU供电方面,方案采用RAA270000KFT电源管理IC。其包含两个集成的电流模式DC/DC转换器、四个低压差线性稳压器和两个线性跟踪器,实现了稳压器的过压、欠压检测等多种检测和诊断功能。  在负载电源转换的设计中,本方案采用PFC+LLC架构,并搭载TP65H035G4WS 650V 35mΩ氮化镓FET、RBA250N10CHPF-4UA02 MOSFET、ISL28214运算放大器以及ISL81802双通道同步降压控制器。  其中,ISL81802是一款双通道同步降压控制器,采用峰值电流模式控制,两个输出具有相位交错功能。每个输出都有配备了电压调节器、电流监视器和平均电流调节器,以提供独立的平均电压和电流控制。内部锁相环(PLL)振荡器可确保100kHz至1MHz的精确频率设置,并且振荡器可与外部时钟信号同步,以实现频率同步和相位交错并联应用。  在牵引逆变器的设计上,本方案采用RBA250N10CHPF-4UA02 MOSFET和ISL78434半桥NMOS FET驱动器。ISL78434半桥NMOS FET驱动器具有双独立输入,可分别用于控制高侧和低侧驱动器,能够为每个栅极驱动器提供独立的拉电流和灌电流引脚。  随着电动汽车市场竞争的加剧,X-in-1技术的应用将变得更加广泛。在这一背景下,瑞萨将继续凭借其在微控制器(MCU)、电源管理IC、模拟与混合信号IC以及连接等领域的深厚积累,积极应对市场挑战,为电动汽车制造商提供全面的技术支持与产品服务。
2024-09-27 13:52 阅读量:697
瑞萨电子 RRH62000一体式集成传感器模块
瑞萨Wi-Fi 6连接的零售秤
  在当下的各大零售环境中,大量的POS终端、库存管理设备、客户服务终端设备不断涌现,这些设备都需要稳定快速的无线连接。Wi-Fi 6,也被称为IEEE 802.11ax,作为下一代无线网络标准,以其高容量和低延迟的特性,越来越成为零售业的首选。  为了满足规模零售行业设备对高性能无线连接的需求,瑞萨设计了一款结合RZ/G2M SMARC模块和Wi-Fi 6模块的零售秤解决方案。  系统框图  主要器件介绍  Wi-Fi 6 PCIe模块  瑞萨即用型Wi-Fi 6 M.2模块,包含所有必需的组件,即插即用,方便用户快速部署和使用。  在此方案的Wi-Fi 6 PCIe模块当中,很重要的一个器件是CL8040 Wi-Fi 6芯片。双Wi-Fi 6无线收发,4T4R架构,支持高达4.8Gbps的速率,确保高速、流畅的数据传输。双独立无线电,可灵活配置为接入点、客户端、AP/CLI、连接+专用频谱智能引擎,满足多种应用需求。可通过双通道PCIe 3.0接口与主机连接。高集成度设计,将双MAC、双PHY、模拟和RFIC集成在一个封装中,无需昂贵的外部内存,降低系统成本。  在考虑了WiFi 6的技术之外,该模块还兼容2.4GHz和5GHz双频,可满足不同应用场景的无线连接需求,扩大应用范围。  借助RAA808013 DC/DC Buck转换器,将3.3V电源转换为1.8V和0.9V,分别为Wi-Fi 6基带处理器和其他子系统供电。Enable和PowerGood信号用于管理和监控电源状态,确保电源按顺序启动。双Buck转换器确保系统稳定供电,并通过使能和状态监控信号实现精确的电源管理。  采用紧凑的M.2 Type E外形设计,Wi-Fi 6 PCIe模块中具有灵活的接口支持:1)高速PCIe 3.0接口,可与MPU进行高速数据通信;2)I2C提供额外的外围设备连接能力。  串行接口EEPROM R1EX24xxx系列用于存储配置数据和固件。  SMARC模块  在SMARC模块部分,微处理单元(MPU)的核心是RZ/G2M,RZ/G2M基于双核 Arm® Cortex®-A57 (1.5GHz)和四核 Arm® Cortex®-A53 (1.2GHz) CPU,具有更高性能的处理性能,且配备3D图形和4K视频编码器/解码器。  微处理单元上具有PCIe接口,用于与Wi-Fi 6模块进行高速数据通信,确保网络性能。  ISL80030是高效的单片同步降压DC/DC转换器,负责将输入电压转换为稳定的3.3V电压(VDDQ33),为整个SMARC模块提供电源。  ISL88002电压监控器及复位集成电路可在需要时对MPU进行复位操作,确保系统稳定启动。ISL88002极低功耗160nA电压监控器,可帮助监控各种应用中的电源电压。  结论  Wi-Fi 6技术的引入,为零售行业提供了高性能的无线连接解决方案。瑞萨的零售秤解决方案,结合RZ/G2M SMARC模块和Wi-Fi 6模块,满足了规模零售环境对高容量、低延迟和高安全性的需求。通过这一创新解决方案,零售行业能够提升运营效率和客户体验,实现更高的商业价值。
2024-08-06 10:05 阅读量:540
  • 一周热料
  • 紧缺物料秒杀
型号 品牌 询价
TL431ACLPR Texas Instruments
BD71847AMWV-E2 ROHM Semiconductor
MC33074DR2G onsemi
RB751G-40T2R ROHM Semiconductor
CDZVT2R20B ROHM Semiconductor
型号 品牌 抢购
BU33JA2MNVX-CTL ROHM Semiconductor
ESR03EZPJ151 ROHM Semiconductor
STM32F429IGT6 STMicroelectronics
IPZ40N04S5L4R8ATMA1 Infineon Technologies
BP3621 ROHM Semiconductor
TPS63050YFFR Texas Instruments
热门标签
ROHM
Aavid
Averlogic
开发板
SUSUMU
NXP
PCB
传感器
半导体
相关百科
关于我们
AMEYA360微信服务号 AMEYA360微信服务号
AMEYA360商城(www.ameya360.com)上线于2011年,现 有超过3500家优质供应商,收录600万种产品型号数据,100 多万种元器件库存可供选购,产品覆盖MCU+存储器+电源芯 片+IGBT+MOS管+运放+射频蓝牙+传感器+电阻电容电感+ 连接器等多个领域,平台主营业务涵盖电子元器件现货销售、 BOM配单及提供产品配套资料等,为广大客户提供一站式购 销服务。