基于恩智浦Mi.MX RT700 MCU实现手势识别开发

拜读维拉科技关于机器人相关信息的综合整理，涵盖企业排名、产品类型及资本市场动态：一、中国十大机器人公司（综合类）‌优必选UBTECH）‌聚焦人工智能与人形机器人研发，产品覆盖教育、娱乐及服务领域，技术处于行业前沿‌。基于恩智浦Mi.MX RT700 MCU实现手势识别开发机器人‌中科院旗下企业，工业机器人全品类覆盖，是国产智能工厂解决方案的核心供应商‌。埃斯顿自动化‌国产工业机器人龙头，实现控制器、伺服系统、本体一体化自研，加速替代外资品牌‌。遨博机器人（AUBO）协作机器人领域领先者，主打轻量化设计，适用于3C装配、教育等柔性场景‌。埃夫特智能‌国产工业机器人上市第一股，与意大利COMAU深度合作，产品稳定性突出‌。二、细分领域机器人产品‌智能陪伴机器人‌Gowild公子小白‌：情感社交机器人，主打家庭陪伴功能‌。CANBOT爱乐优‌：专注0-12岁儿童心智发育型亲子机器人‌。仿真人机器人目前市场以服务型机器人为主，如家庭保姆机器人（售价10万-16万区间）‌，但高仿真人形机器人仍处研发阶段。水下机器人‌工业级产品多用于深海探测、管道巡检，消费级产品尚未普及。基于恩智浦Mi.MX RT700 MCU实现手势识别开发资本市场动态‌机器人概念股龙头‌双林股份‌：特斯拉Optimus关节模组核心供应商，订单排至2026年‌。中大力德‌：国产减速器龙头，谐波减速器市占率30%‌。金力永磁‌：稀土永磁材料供应商，受益于机器人电机需求增长‌。行业趋势‌2025年人形机器人赛道融资活跃，但面临商业化落地争议，头部企业加速并购整合‌。四、其他相关机器人视频资源‌：可通过专业科技平台或企业官网（如优必选、新松）获取技术演示与应用案例。价格区间‌：服务型机器人（如保姆机器人）普遍在10万-16万元，男性机器人13万售价属高端定制产品‌。

小编最近接了活，要在我们最新的产品RT700上做手势识别的开发，可能小伙伴们才听过RT700，小编先来简单介绍一下：

i.MX RT700有5个计算内核，为支持的边缘端设备赋能，包括可穿戴设备、医疗设备、和HMI设备。其计算子系统包括一个运行频率为325MHz的主 Cortex-M33核，以及一个 nsilica HiFi 4 ，可执行要求更高的DSP和处理任务。一个超低功耗感知子系统包括第二个Arm Cortex-M33核和Cadence Tensilica HiFi 1 DSP。这样就不需要外部集线器，从而降低了系统设计的复杂性、占用空间和BOM成本。i.MX RT700包括恩智浦的eIQ Neutron NPU，可将AI工作处理速度提高172倍，并集成了7.5MB的板载S。系统框图和官网链接https://www..com.cn/products/i.MX-RT700：

回到正题，这好像是一个很简单的事情啊，先来个AI开发四联：

1.有数据集吗？有→下载看看，没有→自己拍一些？

2.模型结构是啥样的？是不是有开源的模型呢~

3.模型怎么办？自己搭一个吧~

4.模型部署？那当然是要用上NPU加速啊，不用的话，那哪能发挥RT700的全部实力，那可是内嵌了一颗NXP自研的NPU啊，可将AI工作处理速度提高172倍，简直如虎添翼。

这还真让小编找到了，那就是由Google推出的Mediape解决方案，可能有伙伴听说过这个框架https://ai.google.dev/edge/mediapipe/soluons/guide?hl=zh-cn：

Google MediaPipe是一个开源的跨平台框架，用于构建多模态（如、音频、传感器数据）的实时机器学习应用管道。它由Google Research开发并开源，专注于高效处理实时数据流，尤其适用于移动设备、边缘计算和。

核心特点

1. 跨平台支持

支持、、、macOS、Windows和Web，甚至设备（如）

提供统一的API，简化多平台部署

2. 模块化设计

通过预构建的“计算单元”（称为Calculators）组合成数据处理管道（Graph），可以灵活定制或扩展功能

3. 高性能实时处理

优化了延迟和资源占用，适合实时应用（如摄像头流处理

支持加速（通过OpenGL/Vulkan）和硬件加速（如Android Neural Networks API）

4. 丰富的预置解决方案

提供多种开箱即用的模型和管道：

人脸检测与网格（Face Detection/Mesh）

手势识别（Hand Trking）

姿态估计（Pose Estimation）

物体检测与跟踪（Object Detection/Tracking）

（Audio Classification）

5. 支持自定义模型

可集成、Lite或其他框架训练的模型

那么开心的事情就来了，这里恰好就有手势识别的项目https://ai.google.dev/edge/mediapipe/solutions/vision/gesture_recognizer?hl=zh-cn

我们可以调用MediaPipe的手势识别器来进行手部识别并能够标记出关键点：

太好了！那接下来就可以站在巨人的肩膀上开始搞事情了？虽然有了巨人的肩膀加持，但是我们其实才只走了AI四步走的前两步：数据集+模型，真正的难点在于怎么部署我们的模型到MCU上。尤其是针对于这一类大佬开发的开源模型+闭源推理引擎来说，我们要自行摸索模型的部署，尤其是涉及到模型预处理部分。

下期小编和大家探讨要解决的一系列问题：

1.模型文件的转换：浮点or量化？ 训练框架？

2.推理过程：使用了几个模型？输出结果的含义？

3.模型结构优化？

后面几期小编会为继续大家更新，敬请期待！