说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

从手势识别到增强现实,开发实感应用该了解的技术细节

HTML文档下载 WORD文档下载 PDF文档下载
英特尔® 实感™ 技术集手势识别、3D脸部识别、3D增强现实等功能于一身。今年10月,英特尔发布了基于Windows 8操作系统的Intel® RealSense™ SDK Gold版。为了进一步了解其中的开发要诀,我们采访了其技术支持团队。

体感技术作为未来人机交互的新形式,得到了科技巨头的普遍重视,无论是微软的Kinect,还是谷歌的研究项目Tango,都希望在人机交互上获得突破式创新,引领用户体验变革。在这些技术中,英特尔® 实感技术(Intel® RealSense)也是是需要重点关注的技术之一。

英特尔® 实感技术提供了业界第一款且是尺寸最小的PC端集成式前置3D摄像头,并提供了软件开发工具包 (Intel® RealSense™ SDK,简称SDK)。它的功能强大,RGB分辨率为1080P,深度分辨率达到VGA,功能上囊括了手势识别、3D脸部识别、3D增强现实、语音识别、Unity工具集、物体追踪、表情侦测、背景移除、浏览器支持等。功能与性能都为业界领先。

今年年底,随着集成有英特尔® 实感摄像头的一体机和超极本的上市,用户可以亲身体验由英特尔® 实感技术带来的全新人机互动。作为行业的技术先锋之一,英特尔在硬件创新的同时,积极推动软件应用的开发并培育生态系统,力求在产品上市的第一时间,能够有丰富的软件应用供用户使用。为此,英特尔亦设立了强大的技术支持团队帮助ISV和独立开发者的开发工作。

我们曾在8月对英特尔® 实感™ 技术支持团队做了一期《近匠》专访,为了进一步了解英特尔® 实感技术,以及软件开发过程中的技术支持模式,我们采访了英特尔® 实感技术支持团队,以及从2012年底便开始接触英特尔® 实感™ 技术的广州同声科技团队


CSDN请问今年10月发布的 SDK都集成了哪些功能?它是否可以向后兼容2013年的CreativeSenz3D* 摄像头?

实感技术支持团队:10月英特尔发布了基于Windows 8操作系统的Intel® RealSense™ SDK Gold版,供开发者下载使用。该版本SDK集成了手势识别、3D脸部识别、3D增强现实、语音识别、Unity工具集、物体追踪、表情侦测、背景移除、浏览器支持等功能。相较于9月发布的Beta版,该Gold版的功能性与稳定性都得到了极大的提升。

由于2014实感摄像头与2013 CreativeSenz3D*摄像头的硬件差异较大,新版本的 SDK 只支持2014实感摄像头,并不支持2013 CreativeSenz3D* 摄像头。对于手头没有集成了实感摄像头设备的开发者,英特尔还提供相应的外置开发摄像头以供调试,并在SDK官网可以找到相应的订购链接。

CSDN请问实感技术可以实现3D手势识别么?相对于市面上的一些类似解决方案,优势在哪儿?具体为开发者提供了哪些功能?

实感技术支持团队:英特尔® 实感技术的手势识别基于二维图像与深度信息的准确映射,为开发者提供高精度3D识别。英特尔® 实感技术的手势识别可覆盖人手的22个关节点,并且支持双手识别,因此PC端的手势控制辨识准确,操控性好。为了方便开发者,SDK还预先定义了常用手势,如胜利V手势、OK手势、竖大拇指、握拳、手掌张开、再见、挥手等。此外手势识别还提供轮廓模式(contourmode),这一模式下,CPU利用率大幅降低,可满足低功耗需求。


CSDN请问3D脸部识别功能与传统的2D脸部识别相比,能力有哪些提升?

实感技术支持团队:英特尔® 实感技术的3D脸部识别,精确度与可靠性优于2D脸部识别。2D脸部识别基于2D平面图像特征点辨识,普通的照片也可能蒙混过关。然而3D脸部识别由于在2D平面图像的基础上增加了对深度信息的计算分析,辨识复杂度提升的同时可靠性也获得增强。只有当用户本人出现在摄像头前才能通过辨识,二维图片则无法蒙混过关。

英特尔® 实感技术支持78个脸部特征点,即使脸部被部分遮蔽或头部偏转,也可以准确识别。


脸部识别演示(普通状态与部分遮挡)

CSDN请问您认为3D脸部识别功能,在PC端和移动端均有哪些应用场景?还可以与哪些设备已有的功能进行结合?

实感技术支持团队:借助3D脸部识别,一些传统的线上线下服务将会更加安全可靠,用户体验也更人性化及定制化。

比如,随着网络安全形势恶化,在线网站的账号密码规则越来越复杂,使得用户难以记住。3D脸部识别可以减轻网站及用户对账号密码的依赖,令身份验证过程更轻松简捷。3D脸部识别可以获知用户的个性化特征,如年龄、性别、表情等,并可根据这些特征做针对性的内容推送或定制化服务。

3D脸部识别还可与手势、语音、指纹等功能结合,进一步提升安全性与用户辨识度。相信在不久的未来,脸部识别作为新的用户身份标识,将改善互联网服务的身份验证环节。

CSDNRealSenseSDK集成了MetaioAR技术,现在AR技术的难点和AR应用的开发难点在于什么?另一方面,对于开发者来说,这个AR应用的市场前景如何?

实感技术支持团队:增强现实(AugmentedReality,简称AR)技术的难点在于对物体、图像的辨识与追踪,尤其是无标签(markerless)的辨识与追踪。市面上的一些AR技术多基于标签辨识,开发者需要设置特定的标签作为辨识点,这样虽然降低了技术难度,但实际性能与用户体验却不甚理想。英特尔® 实感技术提供3D/2D无标签的AR功能,可降低开发的技术门槛与工作量。AR应用的开发难点在于应用的创意与互动体验创新。如何令虚拟与现实完美结合,如何设计流畅、自然的应用场景,将是开发者的着力点。

AR应用未来在浸入式协作应用模式方面拥有广阔市场,尤其是游戏、教育、娱乐等领域。目前,Qualcomm、谷歌等科技巨头均发力于AR技术,可以预见AR技术与创意应用将呈现爆发式发展势头,改变PC与移动设备上的互动场景,丰富用户对虚拟世界的感知。

CSDN在今年秋季的英特尔® 信息技术峰会(IDF)上,英特尔曾表示在今年年底将会有集成实感摄像头的产品上市。请问现在有哪些值得推荐的产品和应用方案?

实感技术支持团队:今年年底,集成有业界第一款且最小的英特尔® 实感摄像头的一体机和超极本将上市。英特尔在推动硬件创新的同时,积极联合ISV与软件开发人员开发相适应的软件应用。

我们在中国区与很多ISV进行紧密合作,如腾讯、百度、虹软等一些大型 ISV,还有像广州同声、乾行讯科、触角、云创新等这样的中小型ISV。产品范围覆盖了游戏、工具、教育等各个方面。这些应用完美配合实感摄像头的功能特性,将带给PC用户更佳的人机交互体验。

我们还组织了2014英特尔® RealSense™ 应用挑战赛,旨在提供一个迸发创意比拼技术的更大舞台,鼓励广大的软件开发人员利用实感摄像头以及SDK的特性,开发出创新的应用。

即将于今年底上市的集成了实感摄像头的一体机、超极本等产品,将预装一部分应用。用户在买到产品的第一时间,可享受到实感技术带来的使用乐趣。

明年英特尔还将发布后置型实感摄像头的产品,以及适用于Windows* 及Android* 操作系统的SDK。届时,英特尔® 实感技术产品线将全面覆盖前置、后置摄像头以及Windows、Android操作系统。


CSDN能否介绍一下英特尔® 实感技术在中国的技术支持团队?

实感技术支持团队:英特尔软件与解决方案事业部(SSG)合作伙伴关系部(DRD)在中国区有专门的团队来支持实感技术的应用拓展并培育生态系统。我们有客户经理会和客户探讨实感技术的合作前景,也有专门的技术支持工程师团队培训客户掌握实感技术,帮助客户进行实感技术的评估及项目启动的技术部署,及时解决客户在开发过程中遇到的技术问题。

我们的团队分布在上海、北京、深圳、成都、广州等互联网创业公司云集的前沿阵地,与客户密切合作,帮助客户完成基于实感技术的应用开发,并在市场推广、OEM合作等方面提供鼎力协助。


RealSense上海及北京技术团队

英特尔® 实感技术带来的应用创新不仅仅局限于软件层面,这里我们要介绍一个案例,帮助开发者扩展创新想象力。

广州同声公司(TheBestSync, 简称TBS)与英特尔公司合作,基于实感技术开发出体感控制公仔机“趣抓”。传统上,公仔机使用控制杆操作机械爪,用户不能完全体验到抓公仔的乐趣。使用实感技术的“趣抓”,通过手势控制机械爪的移动和抓取动作,令用户有身临其境的感觉。“趣抓”一经面世便得到业界、媒体及玩家的追捧,而这也是英特尔® 实感技术在用户体验创新领域的成功案例。

CSDN请介绍一下你们从事实感应用开发的团队。

广州同声:TBS成立于2011年,主要从事体感控制、增强现实、虚拟现实等方面的应用开发。我们从2012年底开始接触英特尔® 实感技术。在两年的开发过程中,我们在各个应用领域做了深入的探索,开发出多款基于实感技术的应用,其中包括体感工具PIC、游戏类的Findingbbb与BBBGoal、体感互动视频编辑系统PIVIDEO、娱乐类的JOY、体感控制机器人等等。我们也是英特尔公司组织的面向全球开发者的感知计算/实感技术大赛的积极参赛者,连续参加了3届,曾获得Grand Prize Winner和Third Prize Winner等奖项。

CSDN在今年英特尔公司举办的深圳IDF上,你们展出了一款整合了实感技术的公仔机。可以分享一些使用实感技术开发的经验么?

广州同声:在深圳IDF上,英特尔公司的CEO科再奇先生演示的体感公仔机叫“趣抓”,是TBS基于实感技术开发并获得专利的一款智能娱乐产品,现已进行第一阶段试产并投放市场。我们的三位同事仅用了3天时间就将一台普通的公仔机改装成了可以实现体感控制的“趣抓”原型机。如此的高效率得益于基于实感SDK开发的体感映射工具PIC。在开发过程中,我们感受到实感技术的识别精确度高,令产品容错性更好,实感SDK灵活稳定,令调试难度大幅降低。在产品开发及测试阶段,英特尔软件合作伙伴关系部给予了大力支持,帮助我们及时解决技术问题并提供许多建设性意见,在产品市场化阶段,也提供了鼎力协助。此外,“趣抓”更融合了互联网社交流行元素,进一步革新了游戏的玩法。11月1日起“趣抓”在广州启动了市场测试。

了解更多英特尔技术与资讯,请关注英特尔®开发人员专区

Google新创意:天花板加麦克风 人脑植芯片 苹果获弯曲屏新专利 可给手机弄个大波浪卷 真正的跨平台硬件测试:3DMark已打通PC、iOS、Android 将Chrome浏览器变成终端工具 【开源推荐】AllJoyn:打造全球物联网的通用开源框架 21张图带你走进Google数据中心 Snapchat C轮融资5000万美元 投资方是Coatue Management 又一个被谷歌寄生的平台,Chrome应用启动器现来到OS X上 雷军遇上刘德华:创业、艺术、移动互联网 为了抗衡Android,传微软开始考虑WP和WinRT免费 维护代码库的五个精华实践 微软发布安全补丁 IE11.0.2随之而来 Qt 5.2正式版发布 全面支持移动平台 如何节约手游制作成本?揭秘CocoStudio编辑器强悍功能 市场竞争白热化:三大云服务商上演双十二“三国杀” UCloud联手盛科实现SDN硬件应用 AWS,还有多远? Instagram推新私信功能Direct:支持照片、视频和文本信息 微软CEO鲍尔默最后一次受访:我的正确决定远远大于过错 中国创新碰撞硅谷思潮, 2013云世界大会定义云时代 Mozilla与设备商、运营商成立开放Web设备联盟 研发周报:暴露程序员身份的8个行为 专访“月熊志”公益网站技术负责人:利用技术的力量保护动物 【Hadoop技术博客推荐】站在风口的Hadoop技术研究者 2014趋势预测,大数据将成主流 国人当自强:两岸三地在线编程学习网站大搜罗 一周消息树:微软畏惧Chromebook、苹果失去优秀工程师 Google Dart语言开启标准化历程,取代JavaScript仍艰难 11款网站死链检测工具 谷歌Chromecast 2014:开放SDK、建生态系统 大举进攻客厅 优秀程序员的6个共同特质 paw_001,paw_001 在马? NetGuardian??哪为兄弟有啊,给我一份copy~~~~~~~~~~~~ 关于自增长字段使用的问题,高手请进 这一贴,分就少点了,就这么多啦 有人能告诉我广东省C程序员与JAVA程序员的薪水比较吗?为什么会有这种差距呢 请问用javaApplet如何控制IE界面? 点对点的讨论 水平考试与资格考试及格分别是多少分? 如何再网页中实现打印功能,份也打印。 我发现了一个网站的BUG,我该怎样进去? 到处都是泡泡,俺看的想吐,晚上再来算了。 怪事, 屏幕变黑白 我的问题_6 MYSQL中like的问题 请教打印预览问题 请问,如果我想把,file edit tools window这个主菜单栏动态去掉,怎么做? 如何用程序代码实现在Memo文本编辑框中被选中的文字加下划线。 怎样分析tcp报文(我很急呀) *.idl文件如何使用? 各位大侠,怎么写一个php在线打分的程序阿? 我测试一下 感兴趣的去试试! IE外壳扩展的程序 Delphi 6.0的一个Bug??? 我怎么把字符串放进缓冲里?急急急!!! 恭喜 zhipop 喜得漂亮的可爱的千金 几个小问题想请教大家 如何将浏览器的地址栏里的IE图标换成自己的图标? r俺明天想去给我的宝马生生级,不算显示器,3000元左右,请各位大侠们赐教该什么配置 2000下写的程序,NT 4.0workstation上为什么不能跑? 启用新主页下载数据窗口编辑器 请教Qbasic中的几个问题..... 用BCB如何向Oracle8.0.5中更新BLOB 用ODBC编程时发现错误:nvarchar 类型无数据类型同其绑定,用CString 出错!如何解决? 救命,救命!!!!!!!!!!!! 【 这两天好像来了很多新人嘛!来报个到吧! 】 请教:如将一个 FormView 的 ScrollBar 去掉 在asp中怎么定义可变长的数组? 关于文本框的问题(你能回答吗?) X档案第三季有一集叫《网络情人》,讲的什么内容? 如何登陆interbase de local server? 确定星座是按农历,还是公历????? 请问哪里能买到苹果7300主板,大概多少钱? vc高手快来帮我 我可以通过style定义普通字体的大小,却不能定义表格中字体的大小 BDE + SQL AnyWhere6.0问题!求救!SOS! 最新消息:泡泡是个PLMM 如何实现关机前所有文挡的自动保存 兄弟要进行一项庞大的工程 . 输全国县以上地区的编码. 我用powerbulider设计了一个报表,如何能在vc程序中使用这个报表 如何用回车键代替tab键在sle之间移动焦点 家庭电路中,电压一定220V,电炉子的电阻很大,根据P=U方/R,功率应该很小,但为什么电炉子的功率却很大?而且其他用电器的电阻越大,功率还越大? 请问:一千瓦等于多少马力 500克等于多少个100毫克 24v的交流电热圈功率是1000瓦,那么电流是多少?能电倒人吗? 空调多少匹是怎么换算出来的,空调匹数跟瓦数怎么换算,1千瓦等于多少马力? 2000毫升水有多少千克此问题对我很严重.还请各位尽量回答我. 一个电炉子功率2000瓦每天用5小时一个月按30天计算电费是多少 一马力等于多少瓦? 50毫升B摩尔每升的ALCL3溶液加入50毫升A摩尔每升氢氧化钠溶液当A小于等于3b时生成氢氧化铝的沉淀物质的量 电炉子工作时,是将电能转化成热能,电炉子工作时,是将电能转化成热能;电炉子工作时,是将电能转化成热;电炉子工作时,是将电能转化成内能!哪种说法正确!三者有什么不同? 功率和马力是怎么换算? 向20毫升氯化铝溶液中滴入2摩尔每升氢氧化钠溶液时,沉淀质量与所滴加氢氧化钠溶液体积(ml)铝离子完全沉淀时沉淀质量为0.78g,假设溶液中有氢氧化铝0.39克,则此时用去氢氧化钠溶液的体积 一种炉子,电能的!既可以做电煮锅,又可以取暖!不是普通的光波炉之类的,有一定的高度,面积差不多80*80cm 还可以用作打麻将时取暖!知道的朋友介绍一下!最好给个链接!了解功能 价钱...不是电 功率和马力怎么换算现在汽车说的是功率,和原来的马力怎么换算? 向20毫升氯化铝溶液中滴入2摩尔每升的氢氧化钠溶液时,得到氢氧化铝沉淀的质量与所滴加氢氧化钠溶液体积关系如图所示.(1)图中A点表示的意义是____________.B点表示的意义是____________.(2)上 600瓦电烤火炉每小时用几度电? 1千瓦等于多少马力 如何配置0.5摩尔每升的无水碳酸钠溶液500毫升 功耗25瓦一小时耗多少度电 我用最大功率1000瓦的电插座,插上一个做饭的电炉,是耗电1000瓦的.用多久拔掉安全点? 136匹马力等于多少千瓦也就是新B200的功率,随便说一下,这车真的买来值吗?是不是比以前的奔驰要缩水一些? 3000瓦每小时耗多少度电? 减震弹簧是一圈一圈紧挨着,还是一圈一圈有空隙 汽油机1千瓦等于多少马力汽油机和柴油机一样吗 取暖器1000瓦的每小时耗多少电?我这个一档是800,一档是1200.两个档加起来1个小时多少电? 一度电是不是就等于一千瓦 那 1匹马力等于多少千瓦 一个一千瓦的用电器,一小时用多少度电?哈哈 一千瓦是不是等于一度电?总搞不清,说清原因 1马力等于多少千瓦 一千瓦的电器连续工作一小时消耗的电能是多少求求你们了 一千瓦一小时几度电 请问1千瓦等于多少马力 800瓦的电器一小时会耗多少度电? 多少伏等于一千瓦?一千瓦等于多少电流?同上 1马力等于多少千瓦时 1500瓦的电器一小时能用几度电 一度电是一千瓦时还是3.6*1000000瓦时 1马力等于多少功率 1000瓦等于多少安 一千瓦一个小时一度电如何计算出来的介绍一下这一块儿的..我不是很懂... 一升等于多少公斤谢谢了,大神帮忙啊 电冰箱的额定功率是70瓦,耗电量是0.5kw.h/24h,问每小时用电量多少,每天用电多少W? 114磅是多少公斤?磅和公斤的换算公式是怎样的呀? 舍得酒广告的含义 功率1000瓦的电器一个小时耗电量是多少 血的单位CC跟毫升跟克是怎么换算的 舍得酒经典台词 请问功率1000瓦的电器,它的电流是多少? 体积CC和毫升怎么换算? 舍得的含义?如何舍得,如何取舍 1安培等于多少瓦? cc和毫升怎么换算啊?cc和毫升有什么关系?它们之间应该怎么换算?2000cc等于多少毫升?急用!谢谢了!~ 怎样辨别舍得酒的真假想买一瓶给老爸,还怕买到假酒,请懂行的朋友帮帮忙!积分不多, 请问35瓦等于多少安培?1:35瓦等于多少安培?2:蓄电池上标有12v/7ah 请问后面的7ah是什么意思? CC与毫升是怎么换算的? 250毫升等于多少毫克 一安培等于多少瓦 毫升怎样换算成斤,公式是怎样的.我说的是酒 请问250毫克等于250毫升吗?
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn