说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

从手势识别到增强现实,开发实感应用该了解的技术细节

HTML文档下载 WORD文档下载 PDF文档下载
英特尔® 实感™ 技术集手势识别、3D脸部识别、3D增强现实等功能于一身。今年10月,英特尔发布了基于Windows 8操作系统的Intel® RealSense™ SDK Gold版。为了进一步了解其中的开发要诀,我们采访了其技术支持团队。

体感技术作为未来人机交互的新形式,得到了科技巨头的普遍重视,无论是微软的Kinect,还是谷歌的研究项目Tango,都希望在人机交互上获得突破式创新,引领用户体验变革。在这些技术中,英特尔® 实感技术(Intel® RealSense)也是是需要重点关注的技术之一。

英特尔® 实感技术提供了业界第一款且是尺寸最小的PC端集成式前置3D摄像头,并提供了软件开发工具包 (Intel® RealSense™ SDK,简称SDK)。它的功能强大,RGB分辨率为1080P,深度分辨率达到VGA,功能上囊括了手势识别、3D脸部识别、3D增强现实、语音识别、Unity工具集、物体追踪、表情侦测、背景移除、浏览器支持等。功能与性能都为业界领先。

今年年底,随着集成有英特尔® 实感摄像头的一体机和超极本的上市,用户可以亲身体验由英特尔® 实感技术带来的全新人机互动。作为行业的技术先锋之一,英特尔在硬件创新的同时,积极推动软件应用的开发并培育生态系统,力求在产品上市的第一时间,能够有丰富的软件应用供用户使用。为此,英特尔亦设立了强大的技术支持团队帮助ISV和独立开发者的开发工作。

我们曾在8月对英特尔® 实感™ 技术支持团队做了一期《近匠》专访,为了进一步了解英特尔® 实感技术,以及软件开发过程中的技术支持模式,我们采访了英特尔® 实感技术支持团队,以及从2012年底便开始接触英特尔® 实感™ 技术的广州同声科技团队


CSDN请问今年10月发布的 SDK都集成了哪些功能?它是否可以向后兼容2013年的CreativeSenz3D* 摄像头?

实感技术支持团队:10月英特尔发布了基于Windows 8操作系统的Intel® RealSense™ SDK Gold版,供开发者下载使用。该版本SDK集成了手势识别、3D脸部识别、3D增强现实、语音识别、Unity工具集、物体追踪、表情侦测、背景移除、浏览器支持等功能。相较于9月发布的Beta版,该Gold版的功能性与稳定性都得到了极大的提升。

由于2014实感摄像头与2013 CreativeSenz3D*摄像头的硬件差异较大,新版本的 SDK 只支持2014实感摄像头,并不支持2013 CreativeSenz3D* 摄像头。对于手头没有集成了实感摄像头设备的开发者,英特尔还提供相应的外置开发摄像头以供调试,并在SDK官网可以找到相应的订购链接。

CSDN请问实感技术可以实现3D手势识别么?相对于市面上的一些类似解决方案,优势在哪儿?具体为开发者提供了哪些功能?

实感技术支持团队:英特尔® 实感技术的手势识别基于二维图像与深度信息的准确映射,为开发者提供高精度3D识别。英特尔® 实感技术的手势识别可覆盖人手的22个关节点,并且支持双手识别,因此PC端的手势控制辨识准确,操控性好。为了方便开发者,SDK还预先定义了常用手势,如胜利V手势、OK手势、竖大拇指、握拳、手掌张开、再见、挥手等。此外手势识别还提供轮廓模式(contourmode),这一模式下,CPU利用率大幅降低,可满足低功耗需求。


CSDN请问3D脸部识别功能与传统的2D脸部识别相比,能力有哪些提升?

实感技术支持团队:英特尔® 实感技术的3D脸部识别,精确度与可靠性优于2D脸部识别。2D脸部识别基于2D平面图像特征点辨识,普通的照片也可能蒙混过关。然而3D脸部识别由于在2D平面图像的基础上增加了对深度信息的计算分析,辨识复杂度提升的同时可靠性也获得增强。只有当用户本人出现在摄像头前才能通过辨识,二维图片则无法蒙混过关。

英特尔® 实感技术支持78个脸部特征点,即使脸部被部分遮蔽或头部偏转,也可以准确识别。


脸部识别演示(普通状态与部分遮挡)

CSDN请问您认为3D脸部识别功能,在PC端和移动端均有哪些应用场景?还可以与哪些设备已有的功能进行结合?

实感技术支持团队:借助3D脸部识别,一些传统的线上线下服务将会更加安全可靠,用户体验也更人性化及定制化。

比如,随着网络安全形势恶化,在线网站的账号密码规则越来越复杂,使得用户难以记住。3D脸部识别可以减轻网站及用户对账号密码的依赖,令身份验证过程更轻松简捷。3D脸部识别可以获知用户的个性化特征,如年龄、性别、表情等,并可根据这些特征做针对性的内容推送或定制化服务。

3D脸部识别还可与手势、语音、指纹等功能结合,进一步提升安全性与用户辨识度。相信在不久的未来,脸部识别作为新的用户身份标识,将改善互联网服务的身份验证环节。

CSDNRealSenseSDK集成了MetaioAR技术,现在AR技术的难点和AR应用的开发难点在于什么?另一方面,对于开发者来说,这个AR应用的市场前景如何?

实感技术支持团队:增强现实(AugmentedReality,简称AR)技术的难点在于对物体、图像的辨识与追踪,尤其是无标签(markerless)的辨识与追踪。市面上的一些AR技术多基于标签辨识,开发者需要设置特定的标签作为辨识点,这样虽然降低了技术难度,但实际性能与用户体验却不甚理想。英特尔® 实感技术提供3D/2D无标签的AR功能,可降低开发的技术门槛与工作量。AR应用的开发难点在于应用的创意与互动体验创新。如何令虚拟与现实完美结合,如何设计流畅、自然的应用场景,将是开发者的着力点。

AR应用未来在浸入式协作应用模式方面拥有广阔市场,尤其是游戏、教育、娱乐等领域。目前,Qualcomm、谷歌等科技巨头均发力于AR技术,可以预见AR技术与创意应用将呈现爆发式发展势头,改变PC与移动设备上的互动场景,丰富用户对虚拟世界的感知。

CSDN在今年秋季的英特尔® 信息技术峰会(IDF)上,英特尔曾表示在今年年底将会有集成实感摄像头的产品上市。请问现在有哪些值得推荐的产品和应用方案?

实感技术支持团队:今年年底,集成有业界第一款且最小的英特尔® 实感摄像头的一体机和超极本将上市。英特尔在推动硬件创新的同时,积极联合ISV与软件开发人员开发相适应的软件应用。

我们在中国区与很多ISV进行紧密合作,如腾讯、百度、虹软等一些大型 ISV,还有像广州同声、乾行讯科、触角、云创新等这样的中小型ISV。产品范围覆盖了游戏、工具、教育等各个方面。这些应用完美配合实感摄像头的功能特性,将带给PC用户更佳的人机交互体验。

我们还组织了2014英特尔® RealSense™ 应用挑战赛,旨在提供一个迸发创意比拼技术的更大舞台,鼓励广大的软件开发人员利用实感摄像头以及SDK的特性,开发出创新的应用。

即将于今年底上市的集成了实感摄像头的一体机、超极本等产品,将预装一部分应用。用户在买到产品的第一时间,可享受到实感技术带来的使用乐趣。

明年英特尔还将发布后置型实感摄像头的产品,以及适用于Windows* 及Android* 操作系统的SDK。届时,英特尔® 实感技术产品线将全面覆盖前置、后置摄像头以及Windows、Android操作系统。


CSDN能否介绍一下英特尔® 实感技术在中国的技术支持团队?

实感技术支持团队:英特尔软件与解决方案事业部(SSG)合作伙伴关系部(DRD)在中国区有专门的团队来支持实感技术的应用拓展并培育生态系统。我们有客户经理会和客户探讨实感技术的合作前景,也有专门的技术支持工程师团队培训客户掌握实感技术,帮助客户进行实感技术的评估及项目启动的技术部署,及时解决客户在开发过程中遇到的技术问题。

我们的团队分布在上海、北京、深圳、成都、广州等互联网创业公司云集的前沿阵地,与客户密切合作,帮助客户完成基于实感技术的应用开发,并在市场推广、OEM合作等方面提供鼎力协助。


RealSense上海及北京技术团队

英特尔® 实感技术带来的应用创新不仅仅局限于软件层面,这里我们要介绍一个案例,帮助开发者扩展创新想象力。

广州同声公司(TheBestSync, 简称TBS)与英特尔公司合作,基于实感技术开发出体感控制公仔机“趣抓”。传统上,公仔机使用控制杆操作机械爪,用户不能完全体验到抓公仔的乐趣。使用实感技术的“趣抓”,通过手势控制机械爪的移动和抓取动作,令用户有身临其境的感觉。“趣抓”一经面世便得到业界、媒体及玩家的追捧,而这也是英特尔® 实感技术在用户体验创新领域的成功案例。

CSDN请介绍一下你们从事实感应用开发的团队。

广州同声:TBS成立于2011年,主要从事体感控制、增强现实、虚拟现实等方面的应用开发。我们从2012年底开始接触英特尔® 实感技术。在两年的开发过程中,我们在各个应用领域做了深入的探索,开发出多款基于实感技术的应用,其中包括体感工具PIC、游戏类的Findingbbb与BBBGoal、体感互动视频编辑系统PIVIDEO、娱乐类的JOY、体感控制机器人等等。我们也是英特尔公司组织的面向全球开发者的感知计算/实感技术大赛的积极参赛者,连续参加了3届,曾获得Grand Prize Winner和Third Prize Winner等奖项。

CSDN在今年英特尔公司举办的深圳IDF上,你们展出了一款整合了实感技术的公仔机。可以分享一些使用实感技术开发的经验么?

广州同声:在深圳IDF上,英特尔公司的CEO科再奇先生演示的体感公仔机叫“趣抓”,是TBS基于实感技术开发并获得专利的一款智能娱乐产品,现已进行第一阶段试产并投放市场。我们的三位同事仅用了3天时间就将一台普通的公仔机改装成了可以实现体感控制的“趣抓”原型机。如此的高效率得益于基于实感SDK开发的体感映射工具PIC。在开发过程中,我们感受到实感技术的识别精确度高,令产品容错性更好,实感SDK灵活稳定,令调试难度大幅降低。在产品开发及测试阶段,英特尔软件合作伙伴关系部给予了大力支持,帮助我们及时解决技术问题并提供许多建设性意见,在产品市场化阶段,也提供了鼎力协助。此外,“趣抓”更融合了互联网社交流行元素,进一步革新了游戏的玩法。11月1日起“趣抓”在广州启动了市场测试。

了解更多英特尔技术与资讯,请关注英特尔®开发人员专区

10款最佳CSS/jQuery开源图片说明 创业者应避免对投资者说的五句话 直接拿来用!最火的iOS开源项目(二) 西部数据Pat Wilkison:云计算市场是创新热点 猎豹浏览器发布手机版:PM谈开发理念 成为伟大开发者的“九步曲” 使用GPU构建更便宜的Google神经网络 Facebook与Yahoo!的“火花”:系统间实时数据流管理工具 视金钱如粪土?Yahoo!又要买了,梅姐的算盘是这样打的 MySQL手册不再遵循GPL协议:MySQL走向闭源前兆? 扁平化设计会扼杀人们的创造力吗? 又一巨头涉足移动视频分享领域:传雅虎欲收购短视频应用Qwiki 史上最牛:主要靠三消游戏IPO King也许会是第一家 乐视超级电视预约启动 1小时预约近1.4万台 王坚:未来一年阿里云会有很大变化 梁胜:开源并不是做好软件的唯一方式 如何为IE 10编写特定的样式 MySQL手册许可证更改乃是Bug惹得祸 开源世界高峰论坛首批演讲议题公布 测试工程师的心灵鸡汤:谦虚、不沉默、有危机感、不断努力 高德地图API“沿图有你,晒出你的LBS应用”活动拉开帷幕! 谁能找出Windows 8.1的安全漏洞,就将获得微软10万美元奖金! 【直击美国云计算】Facebook分享数据中心新网络架构Fabric 【直击美国云计算】OCP发起产业界的Maker运动 红帽刘长春:开源是推动云计算和大数据发展的重要力量 【直击美国云计算】出货量达x86的20多倍 ARM或将成为数据中心主角 孙小群:将SAP HANA打造为开放的PaaS平台 GitHub推出重大改进:强调速度、内容和交互性 如何打造测试工程师精英团队? 如何做个有“钱”途的测试工程师? 苹果开始关注企业移动化 iOS 7的10大办公功能 给点建议,做什么都打不起精神.学习也学习不进去,我看我要完蛋了都22了什么都不会 菜鸟问题:编译报错(WINDOWS.H already included),急! 数据绑定问题 关于组件ProgID的疑惑: RealPlayer的最新版本是什么? 哪里可以下载? 请教调试问题? 急!我的weblogic的控制台怎么不让进行create操作? 好郁悶啊﹐大家幫幫我﹗ jsp中的select VC中如何打包 在文本中输入,在下拉框中动态显示,大家多帮忙! 寻找算法!! 参与有分了!! 各位大哥,有关软件测试的好书或好的网站能给小妹介绍一下么? 谢谢各位先!! 学习打不起精神.也不刻苦.天天玩,我看我要完蛋了. 软件发布,KindDiary日记软件 PowerBuilder 中Datawindow和Report的本质区别是什么,什么时候该用Report? MEMO字段在SQLSERVER里应为什么类型? 在vc++中client和server端的socket连接断掉了,server端如何能够立刻就知道,而不需server端send的时侯才发觉。 学习c++,到底要看那些方面的书?我现在在看vc++技术内幕,essential c++,effective c++,大家说还应该看什么书? 在VC下使用ODBC绑定时间数据时的问题的解决! 如何动态更改主窗口的菜单? asp编程主题显示,若是汉字则为前15个字,若是字符则前25个,怎么编码?谢谢! 用VBA如何去读服务器上的DOC文档? 一个小而急手的问题 请问哪里有检测IP包的软件? 从网上邻居连接nt时在小窗口中输入用户名和口令的过程如何在程序中实现? 请问:wise的注册吗怎么设置?偶在注册码是不是在第四步--〉对话框--〉注册信息/序列号里,添加了一个编辑文本,但里面就不知道该怎么版了 //牛虻 java applet怎样存取本地文件?我没有更多的分,但我尽己所能 请问:怎么用java执行web页中的javascript脚本? 请问:如何给分?急! 调用动态链结库的错误(BCB调VC的动态链结库)! 兄弟们,ExpressBars 4.1 那里有下的。 请问连接adoconnection的问题? 请大家谈谈自己的学习经验!!现在很多技术,很多书,有些人说:你应该看什么什么书,说了一大堆。我都晕了,不知道自己应该掌握什么? KindDiary日记软件 我想买一块视频采集卡,可否给点意见!!!!! 如何获得对话框中莫个控件地句柄 奇文共欣赏,帐号封存,6个月后再见! WIN200 SERVER中做WIN98无盘工作站的方法? 大虾,请问??? 怎样让一个确定表和一个非确定表建立联系? TC下gettext()的用法问题! 怎样使程序最小化时放到右下角去? 在编辑状态下,将DBGrid记录行内容拖到TreeView节点中去,急? 请教各位怎样使用netbeui协议实现Chat功能 小弟是初学ASP,在想自学的愿头下,不知道从何下手,装了PWS软件解释不了ASP代码。赐教! 短信二次开发包 for 诺基亚,感兴趣者请进。。。。 通过MCSD的考试是多看教材呢,还是多做习题库?我还听说多看MSDN也很有帮助. 给几封VC学习的好文章!自己写的最好! 在数据库中追加字段,网络版和单机版有何不同 override与overload的区别? 公约数和最大公约数与公倍数和最小公倍数的操作方法一样吗?请举例说明好吗谢谢请说明基本原理及其公式好吗谢谢 一根长方体的木料,长5m.把它锯成两段后,表面积增加24平方分米.原来这根木料得体积是多少 某项工作,甲单独做4天完成,乙单独做6天完成,若甲先做一天,然后甲乙共同完成此项工作……某项工作,甲单独做4天完成,乙单独做6天完成,若甲先做一天,然后甲乙共同完成此项工作,若甲一共做 一项工程,甲队单独做10天完成,乙队单独做15天完成.现在先甲队做4天以后,剩下由乙队单独完成,乙队还要做多少天? 电机的输出转矩,负载转矩,电磁转矩关系 电导率单位Ms/cm,10s 与μs/cm如何换算 一项工程甲单独做要10天完成.乙单独做要8天完成.现在甲先做4天,剩下工程有乙完成,乙还要做几天? 电动机的转矩, 银行卡定活两便存款能从自动取款机取款吗?其实现在网上银行和手机银行都挺方便的是不是卡里可以不留有活期,用的时候再转是不是就行了?平时存定期是不是还多得点利息. 0.65平方千米和650公顷谁大? 试说明电动机负载改变时,其电磁转矩和电枢电流变化的过程 ? 比10千克少2/5千克是多少千克,多少元增加30%后是52元. 转动惯量的单位是kg*m~2,力矩的单位是N*M,这里面启动加速度的单位应该选哪个呢?启动力矩=转动惯量*启动加速度(忽略其他阻力因素),转动惯量的单位是kg*m~2,力矩的单位是N*M,这里启动加速 1+1等于……多少 cm 28x+25=33x 怎么运算?请说明基本原理及其公式好吗谢谢 有这样的题目:1、5×()=12-(),2、2×(24-_)=10×()怎么计算?请说明基本原理及其公式好吗谢谢 1-m不等于0,那m等于多少? 36千克比多少千克少10% cm的平方与m的平方进率多少 一根长1.5m的长方体木料,底面是正方形,把木料锯成两段后,表面积增加了0.18dm2.求来木料的表面积是多少? 谢谢要公式怎么算公式怎么求 谢谢 36千克比多少少3/5 一项工程,甲工程队单独做40天可以完成,乙工程队单独做80天可以完成,现由甲先单一项工程,甲工程队做40天可以完成,乙工程队单独做80天可以完成,现由甲先单独做10天,然后与乙共同完成了余 一根长方体木料锯成长1.5m的4个长方体,表面积增加了240平方分米.原来这根木料的体积是多少立方米? 比36千克少4分之3是多少千克 求角加速度的所有公式,还有谁能解释角加速度与力矩的关系? 一项工程,如果甲队独做10天完成,如果乙队独做5天能完成这项工程的三分之一,现在两队合作几天完成?算式 某项工作甲单独做4天完成,乙单独做6天完成.某项工作甲单独做4天完成,乙单独做6天完成,若甲先干一天,剩余的由甲、乙两人合做,问完成此项工程时甲一共做了多少小时? 转动惯量与角加速度有什么关系 已知滚珠丝杠的参数和负载,如何选择伺服或计算扭矩?滚珠丝杠M25,负载250KG左右,电机转速大概为10rpm/min. 应用题 某项工作甲独做需要4天完成,乙单独做要6天完成,若甲先做1天,然后甲乙共同完成此项工作.,甲一共做了多少天?解题时要把为什么这么做的原因分析下来 比一个数的六分之一少24的数是12,求这个数用方程来解 已知电机转矩如何计算能得知带动的负载的重量 一件工作,甲单独做需4天完成,乙单独做需6天完成,若乙先做两天,再甲单独做,还需要几天列出算式,在写以下意思 dm的平方是什么面积单位 已知电机与滚珠丝杠参数,如何计算推力?1.电机扭矩:35NM,额定转速1500转2.丝杠螺距10mm,直径80.如何得到在丝杠端产生的推力.一位教授要我按照F = 2* M /(d*tan(A+B)) [M:力矩,D2丝杆中径,A为螺蚊升角,B 一件工作,甲和乙合作需四天完成,甲单独做六天完成,乙单独做()天完成. 有一项工程,甲乙两队合做10天可以完成,如果乙队独做4天,甲队独做6天,那么还剩下这项工程的7/15.甲乙两队单独完成这项共各需多少天? 滚珠丝杠扭矩计算现已知滚珠丝杠的基本额定负荷Ca与C0a,想知道其最大额定转矩是多少 某项工作甲独做需要4天完成,乙单独做要6天完成,若甲先做1天,然后甲乙共同完成此项工作,若设甲一共做了X天,则所列方程为? 一项工程,单独做,甲队要10天完成,乙队要12天完成,丙队要15天完成.现在由甲、乙两队合做4天,(看下面)一项工程,单独做,甲队要10天完成,乙队要12天完成,丙队要15天完成.现在由甲、乙两队合 请问已算出步进电机带动滚珠丝杠上的负载所需8.5kgf.cm力,那么选多大扭矩的步进电机比较合适怎么算的?最好有公式和例子哦,我是说用多少牛米的步进电机哦 什么是定活两便? 如果求18和24的最大公约数6,不通过公约数和最大公约数,直接跳到18和24的分解质因数.即:18÷2=9÷3=324÷2=12÷2=5÷3=218=2×3×324=2×2×3×2如果求6和8的最小公倍24,不通过公倍数和最小公倍数,直接跳 根7.2m长的长方体木料,平均锯成3段,表面积增加24平方dm,这木料体积是多少立方米 负载转矩怎么计算 边长为四分之一dm的正方形的周长是()dm,面积是()平方分米 一根2m长的长方体木料,平均锯成3段,表面积增加24平方dm,这木料体积是多少立方米 比10千克的5分之4少5分之4千克的是( ) 一个圆的直径是6dm,这个圆的周长是()dm,面积是()平方分米一个圆的周长是25.12m,它的面积是()平方米.在一块直径是1m的圆形台布周围缝一条花边,接头处4cm,这条花边长()m 请用一句话简单概括?请说明基本原理及其公式好吗谢谢 80千克比64千克重%之几4米比10米短%之几 28和30,它们的最大公约数和最小公倍数是多少?请说明基本原理是不是28和30的最大公约数是1,最小公倍数是28×30÷1=840 请问1又1/8=9/(),像这种算法是通分,还是约分,怎样运算?请说明基本原理及其公式好吗谢谢 定活两便是什么意思? 一件工程,甲队单独做10天完成,乙队单独做30天完成,现在两队合作.其间甲队休息了2天,乙队休息了8天,(两队不在同一天休息)开始到完工一共用了多少天? 做一项工作,甲用五天完成,乙用四天完成,甲每天可完成这项工作的几分之几 某项工作甲独做需要4天完成,乙单独做要6天完成,若甲先做1天,然后甲乙共同完成此项工作,问甲一共做了多少请把解题过程分析出来 一项工程,甲队独做8天完成,乙队单独做10天完成.现在先由甲队做4天,剩下的由甲乙合作,还要几天 一根长方体的木料长1.5m,把这根木料锯成两段,表面积比原来增加了32平方分米,原来这恨木料的体积是多少立方分米?列式计算, 某项工作甲单独做需要4天完成,乙单独做需要6天完成,若甲先做1天,然后甲乙共同某项工作甲单独做需要4天完成,乙单独做需要6天完成,若甲先做1天,然后甲乙共同完成此项工作,设甲共做
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn