手势识别技术开放SDK为开发者提供了怎样的机遇?
2013-04-26 15:41
435 查看
我们曾从多个方面对人机交互的方式进行了研究,比如场景:地铁中,公交上,大街上等等,唯一目的是我们希望app能够给用户带来不一样的体验。我们对智能设备的人机触摸交互还在研究中,而无需触摸,基于手势的交互方式已经吸引了众多开发者的目光。
英国ABI分析师Joshua Flood表示2012年售出的移动设备中,有2700万使用了手势识别技术,到2017年,这个数字预计会达到6亿。其实这一点,现在已经不是什么新鲜事了,开发者可以有多个选择来把类似功能整合进自己的app中,但他们能不能充分利用该项技术的优势就是另一回事了。我们先来看看当前比较热门的几项交互技术。
Leap Motion
Leap Motion是当前非常火的一款体感控制器,可以及时追踪10个手指的动作,能实现0.01 毫米级别的动作捕捉。目前,Leap Motion官网仍继续接受美国以及全球消费者的订单。2013年2月27日之前预购价69.99美元,2月27日以后售价上调至79.99美元,约合人民币500元。
Leap Motion体感控制器支持Windows 7、Windows 8以及Mac OS X 10.7及10.8,该设备功能类似Kinect,可以在PC及Mac上通过手势控制电脑。
Leap Motion能做什么?
Leap Motion的体感控制技术能让用户通过双手直接控制电脑,包括页面移动、缩放、旋转、精准控制、隔空书写以及玩游戏等。视频中我们可以看到,用户可以灵活地操纵飞机的飞行方向。
4月22日地球日,Google 推出桌面版 Google Earth 7.1,添加了对Leap Motion 3D 控制的支持,你可以用手势玩转地球。
衍生的应用商店
除了提供设备、技术外,Leap还为开发者提供了一个平台。该公司发布了名为Airspace的应用商店,包括游戏、音乐、教育、艺术等分类。Leap为开发者提供了完整的SDK,简单的app提交指南,资源库,以及全方位的团队支持,Leap期望开发者借助这个平台开发出鼓舞人心的app。
目前,迪斯尼、Autodesk等公司已宣称部分旗下软件、游戏支持Leap Motion,其中包括赛车游戏《Wreck-It Ralph: Sugar Rush Speedway》、Autodesk的Maya插件及其他应用、切绳子等,另外流行的事件管理器Clear Mac版同样支持Leap Motion体感动作操控。
前不久,华硕和惠普已经与eap Motion达成合作协议,将在自己的部分设备上集成 Leap Motion传感器技术。
今天有消息称,因需要展开新一轮的产品测试,Leap Motion发售时间由原定的5月13日推迟到7月22 号。
目前,Leap Motion已经面向开发者推出了自己的SDK,欢迎开发者加入到这个引领未来交互趋势的平台,开发者可以通过在官网上发送邮件获得SDK和获得最新数据。https://www.leapmotion.com/developers
Fleksy
提起Leap Motion,我们还会想到跟Fleksy的相关的一项技术。
Fleksy是款免费的iOS 键盘app,曾在2013CES上大受关注,这款键盘app保持了Qwerty的常规布局,但界面更为简洁,因为用户的特殊性,所以去除了一些不太实际的界面元素,比如返回键和删除键,用前滑和后滑的手势输入代替。重要的一点,Fleksy算的上是“盲打”键盘,尤其适用于有视力障碍的人,用户不用费眼力去准确输入每个字母,Fleksy超强的文本预测能力(智能联想)可以猜想出你想要输入哪个单词,拼错了单词或者在键盘范围之外点击并不是太大问题,这款app都筛选出你想要的单词。因此用户可以凭着直觉和对键盘布局的记忆完成输入。
文本输入是用户体验中非常重要的一部分。虽然触屏智能手机提供了前所未有的用户体验,但输入时还得紧盯手机虚拟键盘以防出错,我们也能时常听到用户对触屏输入方式的抱怨。在全触屏智能机出现之前,我们凭借对手机键盘的熟悉还可以实现盲打, 但在全触屏智能机出现后,文本输入似乎给人机交互设计带来了一定障碍。
在结合了Leap Motion的体感控制技术后,Fleksy背后的公司Syntellia研制出了隔空打字系统,在现实生活中展示了科幻的概念。视频演示:http://cn.engadget.com/2013/03/11/leap-motion-fleksy-type-on-air/
在这段视频中它向我们展示了一段隔空打字的操作,伴随着Fleksy强大的纠错功能,我们看到演示者打出的“kalr tgw ltsp”被强大的输入法纠正为正确的“make the leap”,极具科幻风格。
Syntellia最近已经面向iOS开发者公开了Fleksy SDK,允许开发者将Fleksy UI整合进第三方app。Fleksy键盘支持传统的打字输入和简单的手势操作,以帮助用户完成大量输入任务,同时还支持标点和空格输入。
Syntellia的愿景是提供一个营收分享解决方案,可以把Fleksy keyboard作为一个附件组件卖给用户,Verdelis说:“这个方案非常受拥有大量用户的app的欢迎,他们也正在寻找货币化的解决方案。”尽管Leap Motion的开发项目主要关注桌面电脑市场,但是Leap Motion的发言人表示移动市场也是他们长期战略部署中的一部分。
相关阅读:神奇输入法Fleksy iOS SDK本周将免费开放
PointGrab
我们可以使用手势来控制笔记本电脑,视频游戏机和电视。那么,为什么不用手势控制我们频繁使用的手机呢?PointGrab已经针对移动游戏和移动App开发者推出了免费的SDK。
此前,微软通过PointGrab的手势控制技术实现了对Xbox的操控,现在PointGrab使用更多不同的手势来控制用户的游戏和App,以达到解放用户双手的目的。这些手势简单易学,甚至比单击、缩放的输入机制更为自然。
PointGrab的技术使用运动检测算法,通过相机对用户双手确定X和Y坐标。PointGrab CEO表示该软件可以检测到17英尺外的手指操控。
PointGrab的技术已经广泛应用于智能手机和平板电脑、PC以及电视等,比如英特尔超级本、三星高级智能电视和平板电脑、富士通平板电脑以及华硕平板设备上。下边是段简单的视频:
PointGrab Ltd.表示三星设备、宏基设备以及iOS设备的开发者都可以用到该技术的SDK。PointGrab的软件允许开发者创建可以识别并回应用户手势动作的app,包括猛击、拖放以及缩放等。
游戏体验方面,增加了另一个空间维度,PointGrab VP表示玩家可以用身体来控制游戏,如果你做了一款愤怒的小鸟之类的游戏,你也可以离开屏幕进行操作。
PointGrab还特别开发了一款名为CamMe 的app来印证自己的技术,这款app可以识别用户一些简单的动作,比如可以识别用户举手和微笑,从而在不接触设备的时候为用户拍摄照片。PointGrab另一款app PlungaShot还在开发中,目前仅有一个简单的demo。
PointGrab VP Asaaf Gad说:“我们清楚很多人对此技术仍有怀疑,但是越来越多的开发者会印证我们的技术。”
相关阅读:PointGrab将面向移动开发者推出免费SDK
MYO
MYO是加拿大创业公司Thalmic Labs推出的一款可远程控制电脑(兼容Mac和Windows电脑)、智能手机等数码产品的手势控制臂带。
用户戴上这款臂环后就只要动动手指或者手,就能操作科技产品,与之发生互动。MYO可以佩戴在任何一条胳膊的肘关节上方,利用传感器探测用户肌肉的电流变化。再通过低功率的蓝牙设备与其他电子产品进行无线连接,从而实现远程操作的目的。
看看通过MYO,我们可以与设备实现哪些交互。
MYO预计售价为149美元(折合人民币为930元),今年年底首发25000部,2014年接受第二批预订。
目前,Thalmic Labs还没有向开发者开放其SDK。
所以,基于手势控制的app机会有多大呢?ABI调研人员Flood表示他对此并不感到吃惊。Flood说:“很多公司都为开发者提供了手势识别SDK,他们可能有这种能力,但是用户需要时间来适应这种人机交互方式。”
他还表示这种基于手势的app会加快用户手机的耗电速度,让前置摄像头长时间处于打开状态会降低电池的寿命。
任何一项技术有其自身的高明之处,但也都存在一定风险和弊端,开发者在紧跟技术潮流的同时,也要正确取舍,扬长避短。
英国ABI分析师Joshua Flood表示2012年售出的移动设备中,有2700万使用了手势识别技术,到2017年,这个数字预计会达到6亿。其实这一点,现在已经不是什么新鲜事了,开发者可以有多个选择来把类似功能整合进自己的app中,但他们能不能充分利用该项技术的优势就是另一回事了。我们先来看看当前比较热门的几项交互技术。
Leap Motion
Leap Motion是当前非常火的一款体感控制器,可以及时追踪10个手指的动作,能实现0.01 毫米级别的动作捕捉。目前,Leap Motion官网仍继续接受美国以及全球消费者的订单。2013年2月27日之前预购价69.99美元,2月27日以后售价上调至79.99美元,约合人民币500元。
Leap Motion体感控制器支持Windows 7、Windows 8以及Mac OS X 10.7及10.8,该设备功能类似Kinect,可以在PC及Mac上通过手势控制电脑。
Leap Motion能做什么?
Leap Motion的体感控制技术能让用户通过双手直接控制电脑,包括页面移动、缩放、旋转、精准控制、隔空书写以及玩游戏等。视频中我们可以看到,用户可以灵活地操纵飞机的飞行方向。
4月22日地球日,Google 推出桌面版 Google Earth 7.1,添加了对Leap Motion 3D 控制的支持,你可以用手势玩转地球。
衍生的应用商店
除了提供设备、技术外,Leap还为开发者提供了一个平台。该公司发布了名为Airspace的应用商店,包括游戏、音乐、教育、艺术等分类。Leap为开发者提供了完整的SDK,简单的app提交指南,资源库,以及全方位的团队支持,Leap期望开发者借助这个平台开发出鼓舞人心的app。
目前,迪斯尼、Autodesk等公司已宣称部分旗下软件、游戏支持Leap Motion,其中包括赛车游戏《Wreck-It Ralph: Sugar Rush Speedway》、Autodesk的Maya插件及其他应用、切绳子等,另外流行的事件管理器Clear Mac版同样支持Leap Motion体感动作操控。
前不久,华硕和惠普已经与eap Motion达成合作协议,将在自己的部分设备上集成 Leap Motion传感器技术。
今天有消息称,因需要展开新一轮的产品测试,Leap Motion发售时间由原定的5月13日推迟到7月22 号。
目前,Leap Motion已经面向开发者推出了自己的SDK,欢迎开发者加入到这个引领未来交互趋势的平台,开发者可以通过在官网上发送邮件获得SDK和获得最新数据。https://www.leapmotion.com/developers
Fleksy
提起Leap Motion,我们还会想到跟Fleksy的相关的一项技术。
Fleksy是款免费的iOS 键盘app,曾在2013CES上大受关注,这款键盘app保持了Qwerty的常规布局,但界面更为简洁,因为用户的特殊性,所以去除了一些不太实际的界面元素,比如返回键和删除键,用前滑和后滑的手势输入代替。重要的一点,Fleksy算的上是“盲打”键盘,尤其适用于有视力障碍的人,用户不用费眼力去准确输入每个字母,Fleksy超强的文本预测能力(智能联想)可以猜想出你想要输入哪个单词,拼错了单词或者在键盘范围之外点击并不是太大问题,这款app都筛选出你想要的单词。因此用户可以凭着直觉和对键盘布局的记忆完成输入。
文本输入是用户体验中非常重要的一部分。虽然触屏智能手机提供了前所未有的用户体验,但输入时还得紧盯手机虚拟键盘以防出错,我们也能时常听到用户对触屏输入方式的抱怨。在全触屏智能机出现之前,我们凭借对手机键盘的熟悉还可以实现盲打, 但在全触屏智能机出现后,文本输入似乎给人机交互设计带来了一定障碍。
在结合了Leap Motion的体感控制技术后,Fleksy背后的公司Syntellia研制出了隔空打字系统,在现实生活中展示了科幻的概念。视频演示:http://cn.engadget.com/2013/03/11/leap-motion-fleksy-type-on-air/
在这段视频中它向我们展示了一段隔空打字的操作,伴随着Fleksy强大的纠错功能,我们看到演示者打出的“kalr tgw ltsp”被强大的输入法纠正为正确的“make the leap”,极具科幻风格。
Syntellia最近已经面向iOS开发者公开了Fleksy SDK,允许开发者将Fleksy UI整合进第三方app。Fleksy键盘支持传统的打字输入和简单的手势操作,以帮助用户完成大量输入任务,同时还支持标点和空格输入。
Syntellia的愿景是提供一个营收分享解决方案,可以把Fleksy keyboard作为一个附件组件卖给用户,Verdelis说:“这个方案非常受拥有大量用户的app的欢迎,他们也正在寻找货币化的解决方案。”尽管Leap Motion的开发项目主要关注桌面电脑市场,但是Leap Motion的发言人表示移动市场也是他们长期战略部署中的一部分。
相关阅读:神奇输入法Fleksy iOS SDK本周将免费开放
PointGrab
我们可以使用手势来控制笔记本电脑,视频游戏机和电视。那么,为什么不用手势控制我们频繁使用的手机呢?PointGrab已经针对移动游戏和移动App开发者推出了免费的SDK。
此前,微软通过PointGrab的手势控制技术实现了对Xbox的操控,现在PointGrab使用更多不同的手势来控制用户的游戏和App,以达到解放用户双手的目的。这些手势简单易学,甚至比单击、缩放的输入机制更为自然。
PointGrab的技术使用运动检测算法,通过相机对用户双手确定X和Y坐标。PointGrab CEO表示该软件可以检测到17英尺外的手指操控。
PointGrab的技术已经广泛应用于智能手机和平板电脑、PC以及电视等,比如英特尔超级本、三星高级智能电视和平板电脑、富士通平板电脑以及华硕平板设备上。下边是段简单的视频:
PointGrab Ltd.表示三星设备、宏基设备以及iOS设备的开发者都可以用到该技术的SDK。PointGrab的软件允许开发者创建可以识别并回应用户手势动作的app,包括猛击、拖放以及缩放等。
游戏体验方面,增加了另一个空间维度,PointGrab VP表示玩家可以用身体来控制游戏,如果你做了一款愤怒的小鸟之类的游戏,你也可以离开屏幕进行操作。
PointGrab还特别开发了一款名为CamMe 的app来印证自己的技术,这款app可以识别用户一些简单的动作,比如可以识别用户举手和微笑,从而在不接触设备的时候为用户拍摄照片。PointGrab另一款app PlungaShot还在开发中,目前仅有一个简单的demo。
PointGrab VP Asaaf Gad说:“我们清楚很多人对此技术仍有怀疑,但是越来越多的开发者会印证我们的技术。”
相关阅读:PointGrab将面向移动开发者推出免费SDK
MYO
MYO是加拿大创业公司Thalmic Labs推出的一款可远程控制电脑(兼容Mac和Windows电脑)、智能手机等数码产品的手势控制臂带。
用户戴上这款臂环后就只要动动手指或者手,就能操作科技产品,与之发生互动。MYO可以佩戴在任何一条胳膊的肘关节上方,利用传感器探测用户肌肉的电流变化。再通过低功率的蓝牙设备与其他电子产品进行无线连接,从而实现远程操作的目的。
看看通过MYO,我们可以与设备实现哪些交互。
MYO预计售价为149美元(折合人民币为930元),今年年底首发25000部,2014年接受第二批预订。
目前,Thalmic Labs还没有向开发者开放其SDK。
所以,基于手势控制的app机会有多大呢?ABI调研人员Flood表示他对此并不感到吃惊。Flood说:“很多公司都为开发者提供了手势识别SDK,他们可能有这种能力,但是用户需要时间来适应这种人机交互方式。”
他还表示这种基于手势的app会加快用户手机的耗电速度,让前置摄像头长时间处于打开状态会降低电池的寿命。
任何一项技术有其自身的高明之处,但也都存在一定风险和弊端,开发者在紧跟技术潮流的同时,也要正确取舍,扬长避短。
相关文章推荐
- 转~程序猿福利,有免费开放的人脸识别技术SDK!
- 微信JS-SDK是微信公众平台面向网页开发者提供的基于微信内的网页开发工具包。
- 百度语音识别开放平台SDK使用方法
- Android图像识别扫名片识别技术SDK
- [译]Kinect for Windows SDK开发入门(十一):手势识别 下:基本手势识别
- 腾讯AR开放平台今日正式开放,提供识别、追踪、展现等多项能力
- android手势识别(转) http://www.eoeandroid.com/thread-229581-1-1.html (出处: eoe 移动开发者论坛)
- 谷歌图像识别API向所有开发者开放
- android学习笔记---47-android_手势识别技术的实现,手势库的创建
- 提供手机视频通话SDK技术服务
- [译]Kinect for Windows SDK开发入门(十):手势识别 上:基本概念
- 百度语音识别开放平台SDK使用方法
- 微软开放技术开发了适用于 Windows Azure 移动服务的开源 Android SDK
- 证件护照阅读机的识别技术SDK
- 湿指纹识别技术 – 机遇与挑战并存
- 微软开放技术开发了适用于 Windows Azure 移动服务的开源 Android SDK
- 百度语音识别开放平台SDK使用方法
- 人脸识别人证比对技术SDK
- [译]Kinect for Windows SDK开发入门(十):手势识别 上:基本概念
- 微软开放技术开发了适用于 Windows Azure 移动服务的开源 Android SDK