中文的手语识别 - Githubissues

ZoomQuiet commented 6 years ago

建议[HL2CN] Hand Language to Chinese 手语识别

背景

专用帖: 对中文编程的质疑, 困惑, 批评, 吐槽中阐述的:

中文编程努力方向从根上有偏离

分析

想解决辅助普遍人快速进入编程世界, 将界面中文其实并不能解决问题
反而, 通过编程, 将普通人带入编程福利世界:
- 可以用自然的语言/行为来控制电脑可以控制的
这才是扩大电脑使用人群,提高人民互联网幸福感的方向吧

建议

聋哑人和正常人的交流很重要, 也很常见

手语, 又是全球通用的, 一共就两种变种
但是, 手语言的学习和使用,又比英文还要困难
那么, 提供一套兼容全球手语的双向翻译器/或是简单的识别器
- 立即可以为上千万聋哑人获得更多的电脑控制权
- 结合 IFTTT 以及 Home 类似智能家庭控制器
- 完全可以形成一个嵌入专用硬件的产业了

方案

参考: 解除好友2：暗网 (豆瓣)

技术上已经没有什么问题
普通的电脑摄像头/webcam 捕捉手部动作
- 通过边缘处理, 抽象出骨架的动作
- 对比手语单词的关键动作结点, 进行简单的查询匹配
- 即可识别主要单词, 加上模糊查询, 统计分析, 精确率就可以提升
初期, 也可以配合专有手套通过其它信号装置更加敏感的捕捉到行为特征:
- 颜色
- 红外灯
- NFC
- 近场雷达
- 次声波
- ...
关键可以用任何语言来混杂完成...

4b5ent1 commented 6 years ago

挺好，我就很想闭着眼睛编程。

4b5ent1 commented 6 years ago

据我所知，手语有很多象形语素在里面，这跟中文的产生，本质上是一致的。盲文的情况不太了解，书上见到的大多是基于字母的转译。

nobodxbodon commented 6 years ago

手语输入也需转换为中文吧? 就如同语音输入也需转换为中文

ZoomQuiet commented 6 years ago

@absente 是也乎,(￣▽￣)

Google 就有专门的盲人/聋哑人工程师协助来解决特殊人群的搜索问题
另外, 这种自动转化目标不一定一定要是编程
- 加速人群间的交流
- 甚至于, 可以直接提供给有稿件的 CCTV
- 可以自动形成手语翻译, 节省人工...

@nobodxbodon 嗯哼...

之前说过, 手语是世界通用的
转换过来的文字可以是任何语言:
- 因为手语的结构非常接近中文
- 也是用尽可能少的基本元素来串接组合为新词
- 所以, 使用手语言的无法在哪个国家
- 本质上其思维习惯是近中文的...
- 这直接带来使用动力,而不是编程这种目标模糊的行为...

nobodxbodon commented 5 years ago

相对手语, 也许语音输入适用的人群广的多. 之前看到此贴, 找了一下发现国外已有类似工具开发: Speaking in code: how to program by voice

nobodxbodon commented 4 years ago

组内似乎没有手语用户。如无打算实施，将暂时关闭。

ccl-private commented 4 years ago

@ZoomQuiet 你还有在研究中文手语识别吗？

ZoomQuiet commented 4 years ago

ccl notifications@github.com 于2019年12月24日周二下午5:20写道：

@ZoomQuiet 你还有在研究中文手语识别吗？

没有, 毕竟现在哑语有国际标准...

— You are receiving this because you were mentioned. Reply to this email directly, view it on GitHub, or unsubscribe.

-- life is pathetic, go Pythonic! 人生苦短, Python当歌! 俺: http://zoomquiet.io 授: http://creativecommons.org/licenses/by-sa/2.5/cn/ 怒: 冗余不做,日子甭过!备份不做,十恶不赦! KM keep growing environment culture which promoting organization learning!

program-in-chinese / overview

中文的手语识别 #96

背景

分析

建议

方案