查看: 1010|回复: 1
打印 上一主题 下一主题

[实业产业] 加拿大研制3D交互式手套 未来或用手势作曲

[复制链接]
markq    

511

主题

1

听众

1万

积分

资深设计师

Rank: 7Rank: 7Rank: 7

纳金币
15839
精华
0

最佳新人 活跃会员 热心会员 灌水之王 突出贡献

跳转到指定楼层
楼主
发表于 2012-2-22 14:35:02 |只看该作者 |倒序浏览
    有些人喜欢边说话边打手势。借助加拿大研究人员研制的一种特殊手套,未来他们或许能够用手势说话甚至谱曲。
  新式“手语”。加拿大不列颠哥伦比亚大学的电子和计算机工程教授悉尼?费尔斯研制出一种3D交互式手套,戴上它,使用者做出的各种手势可合成为乐曲或一段话。他们在温哥华参加美国科学促进会年会时展示了相关成果。
  在英语体系中,以元音结尾的音节叫做开音节,以辅音结尾的音节叫做闭音节。人说开音节时喉咙和嘴唇会张开,研究人员力图通过程序复制出人说话时喉咙和舌头的位移,从而达到用手势说话。
  手套上有3D位置传感器,可以追踪手势信号,然后传至电脑。根据设计好的程序,两只手的不同手势代表不同声音片段。比如,右手握紧代表辅音,张开代表元音;左手控制音节的长短;右手抬起时代表高声调,处于水平位置时是平声调。
  3D交互费尔斯等人给这个项目取名“电子口技表演者”。演示视频中,一名研究人员戴上特制手套,一会儿把手指相对或张开,一会儿挥动手臂,随着手势变化,与电脑相连的扬声器中传出高低起伏的不同声音。另一段视频中,一名戴着手套的女歌唱家边演唱边做手势,于是,清唱演变成一段配乐演唱。
    手套基于3D交互输入技术研制。研究显示,手势不仅由骨骼肌肉驱动,而且受人的信念、意识的驱使,是涉及人的思维活动的高级行为。在虚拟现实系统中,手是用户模型中十分重要的动作与感知关系模型,而手势则是3D交互任务和技术的手段。
  费尔斯先前开发出“手套交谈”系统,采用神经网络将用户手势转换成手势语言参数,通过语言合成器合成为语言输出。
  实际应用:研究人员说,他们的研究初衷是帮助失去语言能力的人“说话”。
  加拿大电视网19日援引研究人员的话报道,“它让传统意义上不能讲话的人发出声音,但又不同于手语,因为使用者不必特意去学习手势的含义”。
  随着研究的深入,他们为它赋予音乐才能,“让人们用手势唱歌”。
  这项技术现阶段还存在不足,比如,说出带有情感色彩的词时,它的声音还不够拟人,而是像机器人讲话。此外,学习如何操作需要大约100小时。
  费尔斯说,这项发明未来的应用还包括引入生物力学模型,挪动重型机械设备等。
分享到: QQ好友和群QQ好友和群 腾讯微博腾讯微博 腾讯朋友腾讯朋友 微信微信
转播转播0 分享淘帖0 收藏收藏0 支持支持0 反对反对0
回复

使用道具 举报

2508

主题

2

听众

3万

积分

资深设计师

Rank: 7Rank: 7Rank: 7

纳金币
32806
精华
12

最佳新人 活跃会员 热心会员 灌水之王 突出贡献

沙发
发表于 2012-8-25 10:11:52 |只看该作者
挺厉害的嘛~~
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

手机版|纳金网 ( 闽ICP备2021016425号-2/3

GMT+8, 2024-11-25 01:07 , Processed in 0.088338 second(s), 31 queries .

Powered by Discuz!-创意设计 X2.5

© 2008-2019 Narkii Inc.

回顶部