说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

从手势识别到增强现实,开发实感应用该了解的技术细节

HTML文档下载 WORD文档下载 PDF文档下载
英特尔® 实感™ 技术集手势识别、3D脸部识别、3D增强现实等功能于一身。今年10月,英特尔发布了基于Windows 8操作系统的Intel® RealSense™ SDK Gold版。为了进一步了解其中的开发要诀,我们采访了其技术支持团队。

体感技术作为未来人机交互的新形式,得到了科技巨头的普遍重视,无论是微软的Kinect,还是谷歌的研究项目Tango,都希望在人机交互上获得突破式创新,引领用户体验变革。在这些技术中,英特尔® 实感技术(Intel® RealSense)也是是需要重点关注的技术之一。

英特尔® 实感技术提供了业界第一款且是尺寸最小的PC端集成式前置3D摄像头,并提供了软件开发工具包 (Intel® RealSense™ SDK,简称SDK)。它的功能强大,RGB分辨率为1080P,深度分辨率达到VGA,功能上囊括了手势识别、3D脸部识别、3D增强现实、语音识别、Unity工具集、物体追踪、表情侦测、背景移除、浏览器支持等。功能与性能都为业界领先。

今年年底,随着集成有英特尔® 实感摄像头的一体机和超极本的上市,用户可以亲身体验由英特尔® 实感技术带来的全新人机互动。作为行业的技术先锋之一,英特尔在硬件创新的同时,积极推动软件应用的开发并培育生态系统,力求在产品上市的第一时间,能够有丰富的软件应用供用户使用。为此,英特尔亦设立了强大的技术支持团队帮助ISV和独立开发者的开发工作。

我们曾在8月对英特尔® 实感™ 技术支持团队做了一期《近匠》专访,为了进一步了解英特尔® 实感技术,以及软件开发过程中的技术支持模式,我们采访了英特尔® 实感技术支持团队,以及从2012年底便开始接触英特尔® 实感™ 技术的广州同声科技团队


CSDN请问今年10月发布的 SDK都集成了哪些功能?它是否可以向后兼容2013年的CreativeSenz3D* 摄像头?

实感技术支持团队:10月英特尔发布了基于Windows 8操作系统的Intel® RealSense™ SDK Gold版,供开发者下载使用。该版本SDK集成了手势识别、3D脸部识别、3D增强现实、语音识别、Unity工具集、物体追踪、表情侦测、背景移除、浏览器支持等功能。相较于9月发布的Beta版,该Gold版的功能性与稳定性都得到了极大的提升。

由于2014实感摄像头与2013 CreativeSenz3D*摄像头的硬件差异较大,新版本的 SDK 只支持2014实感摄像头,并不支持2013 CreativeSenz3D* 摄像头。对于手头没有集成了实感摄像头设备的开发者,英特尔还提供相应的外置开发摄像头以供调试,并在SDK官网可以找到相应的订购链接。

CSDN请问实感技术可以实现3D手势识别么?相对于市面上的一些类似解决方案,优势在哪儿?具体为开发者提供了哪些功能?

实感技术支持团队:英特尔® 实感技术的手势识别基于二维图像与深度信息的准确映射,为开发者提供高精度3D识别。英特尔® 实感技术的手势识别可覆盖人手的22个关节点,并且支持双手识别,因此PC端的手势控制辨识准确,操控性好。为了方便开发者,SDK还预先定义了常用手势,如胜利V手势、OK手势、竖大拇指、握拳、手掌张开、再见、挥手等。此外手势识别还提供轮廓模式(contourmode),这一模式下,CPU利用率大幅降低,可满足低功耗需求。


CSDN请问3D脸部识别功能与传统的2D脸部识别相比,能力有哪些提升?

实感技术支持团队:英特尔® 实感技术的3D脸部识别,精确度与可靠性优于2D脸部识别。2D脸部识别基于2D平面图像特征点辨识,普通的照片也可能蒙混过关。然而3D脸部识别由于在2D平面图像的基础上增加了对深度信息的计算分析,辨识复杂度提升的同时可靠性也获得增强。只有当用户本人出现在摄像头前才能通过辨识,二维图片则无法蒙混过关。

英特尔® 实感技术支持78个脸部特征点,即使脸部被部分遮蔽或头部偏转,也可以准确识别。


脸部识别演示(普通状态与部分遮挡)

CSDN请问您认为3D脸部识别功能,在PC端和移动端均有哪些应用场景?还可以与哪些设备已有的功能进行结合?

实感技术支持团队:借助3D脸部识别,一些传统的线上线下服务将会更加安全可靠,用户体验也更人性化及定制化。

比如,随着网络安全形势恶化,在线网站的账号密码规则越来越复杂,使得用户难以记住。3D脸部识别可以减轻网站及用户对账号密码的依赖,令身份验证过程更轻松简捷。3D脸部识别可以获知用户的个性化特征,如年龄、性别、表情等,并可根据这些特征做针对性的内容推送或定制化服务。

3D脸部识别还可与手势、语音、指纹等功能结合,进一步提升安全性与用户辨识度。相信在不久的未来,脸部识别作为新的用户身份标识,将改善互联网服务的身份验证环节。

CSDNRealSenseSDK集成了MetaioAR技术,现在AR技术的难点和AR应用的开发难点在于什么?另一方面,对于开发者来说,这个AR应用的市场前景如何?

实感技术支持团队:增强现实(AugmentedReality,简称AR)技术的难点在于对物体、图像的辨识与追踪,尤其是无标签(markerless)的辨识与追踪。市面上的一些AR技术多基于标签辨识,开发者需要设置特定的标签作为辨识点,这样虽然降低了技术难度,但实际性能与用户体验却不甚理想。英特尔® 实感技术提供3D/2D无标签的AR功能,可降低开发的技术门槛与工作量。AR应用的开发难点在于应用的创意与互动体验创新。如何令虚拟与现实完美结合,如何设计流畅、自然的应用场景,将是开发者的着力点。

AR应用未来在浸入式协作应用模式方面拥有广阔市场,尤其是游戏、教育、娱乐等领域。目前,Qualcomm、谷歌等科技巨头均发力于AR技术,可以预见AR技术与创意应用将呈现爆发式发展势头,改变PC与移动设备上的互动场景,丰富用户对虚拟世界的感知。

CSDN在今年秋季的英特尔® 信息技术峰会(IDF)上,英特尔曾表示在今年年底将会有集成实感摄像头的产品上市。请问现在有哪些值得推荐的产品和应用方案?

实感技术支持团队:今年年底,集成有业界第一款且最小的英特尔® 实感摄像头的一体机和超极本将上市。英特尔在推动硬件创新的同时,积极联合ISV与软件开发人员开发相适应的软件应用。

我们在中国区与很多ISV进行紧密合作,如腾讯、百度、虹软等一些大型 ISV,还有像广州同声、乾行讯科、触角、云创新等这样的中小型ISV。产品范围覆盖了游戏、工具、教育等各个方面。这些应用完美配合实感摄像头的功能特性,将带给PC用户更佳的人机交互体验。

我们还组织了2014英特尔® RealSense™ 应用挑战赛,旨在提供一个迸发创意比拼技术的更大舞台,鼓励广大的软件开发人员利用实感摄像头以及SDK的特性,开发出创新的应用。

即将于今年底上市的集成了实感摄像头的一体机、超极本等产品,将预装一部分应用。用户在买到产品的第一时间,可享受到实感技术带来的使用乐趣。

明年英特尔还将发布后置型实感摄像头的产品,以及适用于Windows* 及Android* 操作系统的SDK。届时,英特尔® 实感技术产品线将全面覆盖前置、后置摄像头以及Windows、Android操作系统。


CSDN能否介绍一下英特尔® 实感技术在中国的技术支持团队?

实感技术支持团队:英特尔软件与解决方案事业部(SSG)合作伙伴关系部(DRD)在中国区有专门的团队来支持实感技术的应用拓展并培育生态系统。我们有客户经理会和客户探讨实感技术的合作前景,也有专门的技术支持工程师团队培训客户掌握实感技术,帮助客户进行实感技术的评估及项目启动的技术部署,及时解决客户在开发过程中遇到的技术问题。

我们的团队分布在上海、北京、深圳、成都、广州等互联网创业公司云集的前沿阵地,与客户密切合作,帮助客户完成基于实感技术的应用开发,并在市场推广、OEM合作等方面提供鼎力协助。


RealSense上海及北京技术团队

英特尔® 实感技术带来的应用创新不仅仅局限于软件层面,这里我们要介绍一个案例,帮助开发者扩展创新想象力。

广州同声公司(TheBestSync, 简称TBS)与英特尔公司合作,基于实感技术开发出体感控制公仔机“趣抓”。传统上,公仔机使用控制杆操作机械爪,用户不能完全体验到抓公仔的乐趣。使用实感技术的“趣抓”,通过手势控制机械爪的移动和抓取动作,令用户有身临其境的感觉。“趣抓”一经面世便得到业界、媒体及玩家的追捧,而这也是英特尔® 实感技术在用户体验创新领域的成功案例。

CSDN请介绍一下你们从事实感应用开发的团队。

广州同声:TBS成立于2011年,主要从事体感控制、增强现实、虚拟现实等方面的应用开发。我们从2012年底开始接触英特尔® 实感技术。在两年的开发过程中,我们在各个应用领域做了深入的探索,开发出多款基于实感技术的应用,其中包括体感工具PIC、游戏类的Findingbbb与BBBGoal、体感互动视频编辑系统PIVIDEO、娱乐类的JOY、体感控制机器人等等。我们也是英特尔公司组织的面向全球开发者的感知计算/实感技术大赛的积极参赛者,连续参加了3届,曾获得Grand Prize Winner和Third Prize Winner等奖项。

CSDN在今年英特尔公司举办的深圳IDF上,你们展出了一款整合了实感技术的公仔机。可以分享一些使用实感技术开发的经验么?

广州同声:在深圳IDF上,英特尔公司的CEO科再奇先生演示的体感公仔机叫“趣抓”,是TBS基于实感技术开发并获得专利的一款智能娱乐产品,现已进行第一阶段试产并投放市场。我们的三位同事仅用了3天时间就将一台普通的公仔机改装成了可以实现体感控制的“趣抓”原型机。如此的高效率得益于基于实感SDK开发的体感映射工具PIC。在开发过程中,我们感受到实感技术的识别精确度高,令产品容错性更好,实感SDK灵活稳定,令调试难度大幅降低。在产品开发及测试阶段,英特尔软件合作伙伴关系部给予了大力支持,帮助我们及时解决技术问题并提供许多建设性意见,在产品市场化阶段,也提供了鼎力协助。此外,“趣抓”更融合了互联网社交流行元素,进一步革新了游戏的玩法。11月1日起“趣抓”在广州启动了市场测试。

了解更多英特尔技术与资讯,请关注英特尔®开发人员专区

回顾苹果2013:硬件几乎无突破 热衷收购 敏捷开发流程管理须参考的3个要素 微软潘正磊谈DevOps、Visual Studio 2013新功能、.NET未来 Jail Breaking之后,iOS 7的指纹识别还hold住么? “勇者前线”开发商Gumi获1900万美元融资 工信部发首批10张虚拟运营商牌照 开发者有哪些新机会 【PPT集萃】十位一线专家分享Spark现状与未来 谁主沉浮,亚马逊和思科角力DaaS市场 忆往昔峥嵘岁月稠——看苹果第一代iPhone的“风骚”往事 开源工具链“大牛”的经验分享:HelloGCC 2013精彩演讲回顾 20个超实用的JavaScript技巧及最佳实践 【开源专访】Linux Deepin:做更好用的Linux桌面系统 访Andy Jassy:感受亚马逊AWS生态观,思考国内外云计算差异 站到风口,最先飞起来的能将服务做到极致的IDC 苹果Siri再获一专利:可使用自然语音输入来搜索和标记图片 研发周报:Google抛弃C语言,采用Go语言重写Go编译器 取其精华 IE11里移除和新增的功能 大胆预测亚马逊即将推出的五大产品或服务 移动周报:GitHub章鱼猫中国之行 三星与LG的新动向:同样的物联网 ,不同的玩法 从Twitter到Tinder,看社交媒体在2013年的沉浮 一周消息树:有道周枫和他的“放养”团队、太极助手惹“非议” Netflix:使用大数据驱动商业决策 “中国杯”游戏极限开发大赛报道 回顾2013软件开发:JavaScript领风骚 京东“宙斯杯”创新应用大赛,百万奖金为“你”而等待 12306上的分布式内存数据技术GemFire Canalys:苹果、三星2014年仍统治平板市场 微软压力山大 Google和苹果的下一个战场 回顾2013科技界大事件:Mayer登Vouge杂志、Ballmer离职 《近匠》第03期:移动开发工具访谈,AVOS Cloud——后端的金刚钻 在西单,居然有个MM说。。。。。。。。(真事) 如何判断程序是否使用了MFC库 如何用Canvas将Memo中的内容显示到Image上? 嗨!你去拒绝那个白痴吧,我真受不了他了。我要退分!!! 有全套的ERP源代码为你提供 请问那里有C++builder 6.0的书? 关于函数调用的问题,各位指教 ◎◎◎◎◎◎◎ 关于POP3协议 ◎◎◎◎◎◎◎◎◎ 哪位朋友知道中国移动的网址,可以查询话费和账单的? 各位GG,妹妹对你的爱称是哪个? VC6中基于mfc的一个程序,我想用API函数 ImageNtHeader,却得到如下提示(见内)请问如何解决?? 使用VS.net开发的程序是不是必须在装有.net framework的机器上才可以运行? 如何对内存变量中的xml字符串进行分析操作? VB调用Excel,如何设置单元格中的数字为文本格式 请问成人自考电大与正规大学在招聘时区别大吗? Delphi高手,快来帮忙 我爱西瓜小姐 想看有关VB源码 超级难题啊,痛苦! 局域网下在WIN2000/XP里如何用VB程序自动改变IP? 请招人时自考成人电大与正规大学的差多少呢?急! MDI子窗体显示时有一个明显的由小到大的变化过程,看起来很不舒服,请教该如何解决? 怎样用语句创建NMSMTP控件 局域网下在WIN2000/XP里如何用VB程序自动改变IP? 在Delphi 如何像C++里用extern关键字来引用另外一个单元的全局变量? 对联 谁能帮我出一套关于JSP高级程序员的面试题,并附答案!高分相送,不止这100分 MFC中对文本文件能否以行为单位进行读写 大侠给几篇C程序原代码 到底要怎样才能用好progressbar进度条? 参与者有分! 怎样调用 其它窗体的内的对象的属性?? JSP的应用经验 工具条的问题,求解 我喜欢西瓜小姐 我公司现有固定电话收发电子邮件系统,可收附件,将WORD,HTML文档转换为TXT文本 关于内码问题 远程控制 关于JDBC2.0的问题(50分!!!!) 哪位有高招? 升级BIOS和升级主板? 急!急!急!急!窗口不能关闭. 哥哥姐姐们请帮忙???(急需linux环境下用php+mysql如何实现搜索引擎) 大家赞不赞成开一个Palm技术区?赞成的跟贴,满50个就开。 定义 Dim reader As System.Data.SqlClient.SqlDataReader lvlvlvlylyly请看,你的贴子我加不上了,还查一段程序加在这里了 如何传送monthview1中用户选择的日期到其他窗体里 你该怎么做呢 国内什么样的网站托管好?还是选择国外的? 女网友一定要小心 mschart控件问题 赶快来尝试一下吧! Na2O2和H2SO4反应,H2SO4为什么是冷而稀啊是浓的话方程式是什么? 在焰色反应中 鉴定钾离子时蓝色钴玻璃的作用? 用小苏打片水清洗外阴及阴道口有什么作用?另注:怀孕初期的孕女可否使用? Na2O2与稀硝酸反应的方程式谢谢 可乐密度大还是水的密度大?.实际上我还想问可乐密度大还是七喜密度大0.0\x09求大神帮助 请问:丙烯酰胺对人体的中毒量是多少?(由消化道进入) 酒可以二次蒸馏吗 Na2O2与Na反应生成Na2O的条件是什么? 用小苏打水清洗阴道,会有副作用吗?男女都能用来清洗吗?怎么个配比?不是说能治疗霉菌性阴道炎吗>怎么会有副作用呢/能说的具体点吗> 为了验证突触传递的特点,自选实验器材来设计实验进行探究(有一个图是:轴突→突出囊泡→肌膜 的一个过程画的和课本上描述神经递质的释放图一样就是多标了这几个字样)第一步:第 FeSO4和Na2O2反应生成什么?题目中告诉我FeSO4和Na2O2的比为1:1 饼干里对身体不好的物质中,最多的是不是丙烯酰胺?饼干里对身体不好的物质是不是丙烯酰胺? 关于生物实验原理探究性实验实验原理怎么写啊?比如探究甲状腺激素对小鼠新陈代谢的影响 实验是通过测定小鼠吸进的O2来探究的这个实验实验原理该写甲状腺激素会影响新陈代谢从而影响 聚乙稀和聚丙稀怎么区分?比如用火烧有什么不一样? 丙烯对人体有什么危害 生物实验原理怎么写 Na2O2反应生成什么 丙烯对身体有害吗? 癌细胞的恶性增殖和转移与癌细胞膜成分的改变有关.那到底是什么成分改变呢?癌细胞的恶性增殖和转移与癌细胞膜成分的改变有关.具体是哪些成分改变?为什么这些成分改变就会引起癌细胞 原理比如:单一变量、等量最适……还有什么? 到底有没有聚乙烯酰胺?听说是从聚丙烯酰胺中提炼出来的 也是洗煤厂 污水处理什么用的 可是在百度上总查不到关于聚乙烯酰胺的信息啊.不会吧。。 我爸说的啊 他厂子里产的这个 神经纤维膜经去极化,反极化,负极化后,钾钠离子换了位置,那后面怎么换回来使钠在外,钾在内? 糖尿病患者为什么尿量增多尿中有糖 钾离子氢离子醋酸根离子氯离子共存吗? 癌细胞为什么能无限增殖?最新的理论是什么 散聚的读音六年 Hi 怎样鉴别亚硝酸钠和硝酸钾 Fe2O3和浓H2SO4加热会反应吗 吡嗪酰胺怎么读法 向a 体积0.05m o l l 的醋酸中加入b 体积0.05m o l l 的K O H 中,a >b则醋酸和醋酸根离子与钾离...向a 体积0.05m o l l 的醋酸中加入b 体积0.05m o l l 的K O H 中,a >b则醋酸和醋酸根离子与钾离子的关 Fe2O3与H2SO4反应的离子方程式 请你设计一个小探究实验,证明蝗虫呼吸时气体进入身体的结构在胸部和腹部,而不在头部.(实验设计题) 哪种食品中含亚硝酸钾和亚硝酸钠 Fe2O3、K2Cr2O2、H2SO4反应的方程式 可乐与水的密度一样吗? 测量可乐的密度只有橡皮筋、细线、石块、刻度尺和足够的水.(1)推导出测量可乐密度的数学表达式;(2)说明测量步骤 淘米水的妙用 阅读答案 NA2SO4 加什么 发生什么反应生成H2SO4应该不能用酸吧 H2SO4就是强酸了 不是强酸置弱酸吗?那要怎么反应? 丙酮为什么能使蛋白质变性?是什么官能团参与反应? 淘米水的妙用的答案啊~! Na2O2+H2SO4+KMnO4反应中哪个为还原剂 GUS染色中,丙酮固定的作用是什么,是沉积蛋白吗?强酸、强碱、有机溶剂都可以使蛋白变性,但是我的问题是gus染色中丙酮的作用,如果也是让蛋白变性,那变性的蛋白没有了酶活,怎么和底 水开久了会产生亚硝酸盐,喝了对人体有害是吗?那么煲汤的水不是也开很久吗?还有外面煮拉面的水啊什么的不是一直都在滚吗?是不是都有害? 为什么NO不能和浓H2SO4或Na2O2反应被氧化? 为什么尿液经常会是黄色的? 淘米水的妙用 怎样鉴定钾离子 用六亚硝基合钴络离子现象 方程式 新鲜蔬菜最好不要隔夜食用,彩业中的硝酸盐容易变为亚硝酸盐,危害人体健康.这句话对不对呢?是一道判断题,请各位高手们帮忙解答,谢谢! 淘米水可以干什么? 大量存在会干扰钾离子的鉴定的离子是 为什么会经常尿黄,尿热呢? 癌细胞的转移为什么与细胞膜上糖蛋白的减少有关? 1、除去食盐中的杂质氯化钙和硫酸钠的方程式2、除去食盐中的杂质氯化钙 为什么我的尿经常是黄色的?本人有一年的前列腺炎,现在是慢性的了.最近小便总是黄色,我很郁闷.我不尿频,但是小便时还会变黄,这是为什么?我想去做尿检,有用麻?我喝好多水,还经常打打篮 癌细胞转移与细胞膜上糖蛋白减少有关,构成糖蛋白的多糖和蛋白质共有的元素是? kcl,k2so4都属于钾盐,都含有钾离子,怎样鉴定钾离子 > 尿黄,为什么? 细胞膜上糖蛋白的减少属于癌细胞物理\化学还是生物条件 谁能够告诉我钾离子除了焰色反应还可以用什么方法鉴定 pam(聚丙稀酰胺)、pac(聚氯化铝)、paf(聚氯化铁)对人体的危害
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘