请选择 进入手机版 | 继续访问电脑版
返回官网官方微博

麦步社区-论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

搜索
热搜: MAI 表盘
查看: 9844|回复: 14

结合麦步手表开发手语识别手套

[复制链接]

214

主题

2514

帖子

3万

麦力

麦步团队

精华
1
阅读权限
200
在线时间
812 小时

麦步手表用户麦步工业测评协会

发表于 2016-7-28 11:05:34 | 显示全部楼层 |阅读模式
这个是韶关学院几位同学的一个参赛项目,来自论坛用户 龍坤楊,通过结合麦步手表与弯曲度传感器、无线传输模块、语音合成模块等开源硬件,实现了手势识别、翻译的功能,如果与其他设备联动后,也可以实现通过手套比划手势来控制智能小车、控制台灯开关等功能,具体效果开发团队制作了一个视频:


项目的思路如下:分为四个部分,手套部分、智能手表部分、主控台部分和上位机部分。

手套部分上有五个弯曲度传感器,以STM32作为主控芯片,将每个手指配上一个弯曲度传感器,这样就能检测没跟手指的弯曲程度,最后通过NRF24L01将弯曲度信息发送给控制台部分。

手表部分,我们使用的是麦步智能手表,手表上自带三轴传感器数据,并且程序开源。相比较我们常用的三轴传感器MPU6050来说,实在是So easy了,用过的朋友都知道,各种卡尔曼滤波和融合算法实在是太繁琐,我们为了提高我们的项目效率和精准度,我们使用了麦步智能手表内的三轴数据传感器,将三轴数据读出来后,再通过Web request向控制台部分的ESP8266 WIFI模块发送三轴数据。

控制台部分,控制台部分集成了NRF24l01无线传输模块、ESP8266 WIFI模块和SYN6288语音合成模块。将收到的弯曲度传感器数据和三轴传感器的数据进行姿势的比较识别。最后通过SYN6288语音合成模块将手势意义翻译出来。

上位机部分,上位机部分将控制台部分的各个数据显示出来,同时将手势意义翻译出来。

系统结构图如下图所示

系统结构图.jpg

各个部分如图二、图三所示

手套部分.jpg

控制台部分与手套部分合照.jpg

上位机部分.jpg

弯曲度传感器因为某宝家卖的比较贵,一根就要100多,所以团队选择了自己制作,用上了静电袋作为中间介质,当静电袋受到弯曲时,电阻值就会变化,有能力的朋友可以参考下面的图自己DIY

自制弯曲度传感器步骤一.jpg

自制弯曲度传感器步骤二.jpg

自制弯曲度传感器步骤三.jpg


手套的各个使用场景如下图所示

手势语义识别

手势翻译.jpg
联动控制小车

手势控制小车.jpg

联动控制台灯
手势控制台灯.jpg



感谢arduino中文社区的 龍坤楊 同学贡献出这个好玩的项目。

无线控制智能小车的创意在网上已经很多,并不新鲜了,但是结合手势识别来进行操控的例子就比较新颖了。希望这个项目对大家能有所启发,一起开动脑洞,发挥DIY精神,折腾出更有意思的玩法。


5

主题

108

帖子

751

麦力

精华
0
阅读权限
30
在线时间
20 小时

麦步工业测评协会

发表于 2016-7-30 00:20:03 | 显示全部楼层
不明觉厉
回复

使用道具 举报

4

主题

1260

帖子

8967

麦力

精华
0
阅读权限
80
在线时间
156 小时

麦步手表用户

发表于 2016-7-30 08:07:22 | 显示全部楼层
这个真是太牛了~~~,可以开发实物了

23

主题

1532

帖子

9071

麦力

精华
0
阅读权限
80
在线时间
103 小时

发表于 2016-7-31 11:54:56 | 显示全部楼层
:D高大上
回复

使用道具 举报

12

主题

68

帖子

2994

麦力

精华
0
阅读权限
50
在线时间
194 小时

发表于 2016-8-4 12:12:46 | 显示全部楼层
不明觉厉;P
回复

使用道具 举报

50

主题

1286

帖子

385

麦力

精华
0
阅读权限
80
在线时间
668 小时

麦步手表用户

发表于 2016-8-21 10:42:13 | 显示全部楼层
略屌略屌略屌略屌

50

主题

1286

帖子

385

麦力

精华
0
阅读权限
80
在线时间
668 小时

麦步手表用户

发表于 2016-8-21 10:42:25 | 显示全部楼层
赞一个赞一个

5

主题

235

帖子

1787

麦力

精华
0
阅读权限
50
在线时间
42 小时

麦步手表用户

发表于 2016-8-22 17:00:11 | 显示全部楼层
创意真好
回复

使用道具 举报

0

主题

32

帖子

620

麦力

精华
0
阅读权限
30
在线时间
20 小时

麦步增强版用户

发表于 2016-8-26 09:06:40 | 显示全部楼层
高端大气上档次

13

主题

133

帖子

1320

麦力

精华
0
阅读权限
50
在线时间
40 小时

发表于 2016-10-1 18:27:47 | 显示全部楼层
这个不得不说,6666666666666,太牛了!
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|麦步官方论坛 ( 粤ICP备12052190号  

GMT+8, 2024-4-19 07:46 , Processed in 0.092569 second(s), 32 queries .

Powered by Discuz! X3.2

© 2012-2021 Comsenz Inc.

快速回复 返回顶部 返回列表