HoloLens之父谈:Kinect得与失,微软的新硬件思想

(上图为Kinect和HoloLens之父Alex Kipman)

大家还记得当年轰动一时的微软体感外设Kinect吧,这款在2010年底推出的体感游戏设备,在开售的头4个月即销售了1000多万台,成为史上销售速度最快的消费电子设备。然而,微软对Kinect寄予更多的期望,曾希望把Kinect由游戏机推向PC外设市场。结果是众所周知的,Kinect止步于史上最成功的游戏外设。

2015年1月,研发了Kinect的微软技术团队再次推出另一款轰动一时的新硬件,这就是HoloLens。其“WOW”效应不亚于当年的Kinect,再加上VR/AR/MR的市场热炒以及PC和智能手机市场的沉闷,一时间HoloLens似乎成为了新硬件的希望。问题是,HoloLens能突破游戏外设而进入PC外设甚至代替PC么?HoloLens汲取了Kinect的教训吗?

2016年12月8日,在2016 深圳微软硬件工程产业峰会(WinHEC)上,笔者与Kinect和HoloLens之父、微软Windows与设备事业部新设备部门负责人、技术院士 Alex Kipman坐下来,畅谈了Kinect的得与失、HoloLens所代表的微软新硬件思想。

Kinect是“吸入”、HoloLens是“呼出”

对话从Kinect开始。“我们获得了非常多宝贵的经验。在某种程度上来说,Kinect 是‘吸入’,而 HoloLens 是‘呼出’。”Alex打了一个很抽象的比喻。

怎么理解?Alex首先对Kinect进行了定位,他说:“Kinect 的定位更多的是娱乐产品,更多是作为 Xbox 360的附件而存在,它在市场上卖的特别的好,创下了很多游戏产品现象级的记录。在同时期的游戏主机产品中,Xbox 游戏主机是销售量最高的。而之所以 Xbox 能够卖得那么好,很大程度上是因为 Kinect。”所以,对Kinect的历史定位,就是游戏外设。

那么,为什么说Kinect是“吸入”呢?Alex的解释是作为微软第一代体感外设,Kinect让机器对人、物和环境开始有了初步认知与理解:可以通过传感器了解一个人的身份;了解人类的语言,让Xbox可以听懂简单的语言指令,包括“开机”、“关机”、“在必应上搜索哈利﹒波特”;也能够理解人的肢体移动,诸如跳起或者转动身体等等。

Kinect“吸收”来的认知和理解能力,延伸到了Windows 10 、HoloLens以及其它微软产品上,并得到了不断加强。在身份识别方面,Kinect和Xbox在一起可以做非常简单的身份识别,但如果用在企业级的安全管理上,那就必须得用后来的Windows Hello。Windows Hello精准度非常高的,可以实现身份认证,这与身份识别是两个概念。此外,Kinect是连接到Xbox上的单一设备,Windows Hello则是不同的传感器并可连接到一个硬件生态系统中。

在语音识别的技术方面,Kinect能懂一百个左右的词汇,而Cortana能懂差不多四万五千个词,这两个产品的语音识别能力差距非常大。Cortana的语音识别还是混合型技术,微软Cortana和云的技术融合到一起,让Cortana的能力远远超过了Kinect。

Kinect体感器以30帧每秒的速度捕获20个关节点的数据,即每秒30次识别;而HoloLens不仅提升到了60帧,还可同步识别眼球、动作和声音等信息,再把这些信息叠加在一起形成综合的全息信息,而且是一个设备就解决了全套的感知问题。

“所以说,Kinect是对于人类输入的‘吸入’,HoloLens是对于人类输入的高精度‘呼出’,可以更全面地理解人们周边的环境,不需要额外的搭建、传感器等,就能全面理解人、物体与所处的环境。”

更为重要的是,Kinect原来就只是微软一家在做,而现在是更多的合作伙伴可以做HoloLens的不同配置。从最开始针对Xbox的游戏设备到今天面向Windows 10的HoloLens,微软不仅自己做硬产品,也对外和第三方的合作伙伴一起开发不同配置的硬件产品,从手机、PC到电视、Holigraph全息计算设备上。

“从设计的团队来说,Kinect和HoloLens是同一个团队完成的,精髓上是一样的!”

Surface与HoloLens传递的新硬件思想

2012年,微软推出的第一代Surface,从那时开始业界就在猜测微软到底是何用意?不可否认的是,Surface取得了很大的成功,在最新一季(2017财年Q1)的微软财报中,Surface Pro 4和Surface Book销量的强势表现,Surface产品线的总营收相比去年同期增长38%。

这个迷团到了HoloLens,得到了答案。Alex就此表示,以前还可以把硬件和软件平台区分开来的,“但是现在,在全新的世界里想象一下,有那么多种不同的传感器,在了解人、地点、物体,还有这么多连接的设备。因此现在想要成功,一定是要非常深的合作伙伴关系,不是简单写一个软件平台拿去开发,就能够自动适配到这么多种传感器、这么多不同的硬件上,这是不太可能的。”

“我们为什么自己会做一部分硬件产品,我们的产品实际上是为了开创全新的产品类别。我们会告诉合作伙伴,有这样一种端到端的产品,你们也可以做出来。”所以,从Surface开始,微软在做一件事情,叫硬件工程的联合创新。“我们会选择对未来具有一致认知和判断的伙伴,他们相信未来的所在之处,也是微软相信的未来所在之处,我们选择这样的合作伙伴一起来做联合的研发和工程创新。”

Surface就是“Surface”这个新硬件类别当中最开始的第一个产品。原来 Surface 形态的产品只有微软在做,现在联想、华硕等已经在跟进类似的产品,最近又有一家叫做Eve的芬兰创业公司也开始设计类似Surface的硬件产品。HoloLens也是一样,Alex说微软希望自己先做一款全新类别的硬件产品,通过联合的创新和工程,让合作伙伴知道也可以做类似的产品。

在推动HoloLens的合作伙伴硬件工程方面,微软拿出了HoloLens的inside-out 内外翻转六度自由追踪和捕捉功能这样的看家本事,可以实现视界范围内的追踪。而现在很多的追踪传感器,Alex以3Glasses的传感器为例,可以在桌子这么大的面积内追踪,但是没有办法扩大到更广范围。“微软能做到inside-out六个维度的自由追踪和捕捉,而别人是做不到的。”

微软HoloLens还可以做到在头盔内以全息的方式,把用户所处的现实环境完全还原出来,像绘图一样非常栩栩如生。这是微软的空间绘图技术以及HoloLens的带景深功能的摄像头,“所以我们才能做到这一点”。Alex强调,“我们现在是把自己所掌握的技术拿出来,与硬件合作伙伴、生态链上的朋友一起来进行合作。”

与Kinect和HoloLens之父一席谈,我们了解到了微软的新硬件思想:HoloLens是出于Kinect又高于Kinect而且HoloLens还适合于企业级场景、Kinect是微软的独角戏而HoloLens却是带着硬件产业合作伙伴一起玩、在Surface与HoloLens时代微软想要开创新硬件品类、未来硬件生态以传感器为主。

这其中就意味着很多新的硬件产品创新机会,再加上一个混合现实的大趋势,2017年的新硬件市场相当值得期待。(文/宁川,微信号:CloudTechTime)

时间: 2025-01-07 14:59:42

HoloLens之父谈:Kinect得与失,微软的新硬件思想的相关文章

HoloLens之父:智能手机已死 未来人人都戴头盔

原文标题:HoloLens之父:智能手机已死 未来人人都戴头盔 在智能手机市场,无论是在硬件产品还是操作系统,微软遭遇了惨败,关闭业务被认为只是时间早晚的问题.微软已经投入巨资,研发增强现实技术(AR).据外媒最新消息,微软HoloLens的一名发明者日前表示,智能手机已经死亡,未来将是头盔的天下. 据美国科技新闻网站TheVerge报道,做出这一表态的微软技术高管是金普曼(Alex Kipman),被认为是HoloLens增强现实头盔以及游戏动感控制器Kinect的主要发明人. 在接受彭博社采

经验浅谈,新人如何快速上手一个新项目

经验浅谈,总结下自己如何接手一个新项目: 1.向同事问清楚当前的开发环境,而且现今的发展,要区分64位和32位2.搞明白当前项目的运行环境,如果是多项目的话,要搞清楚依赖关系3.让同事帮忙搞定本机可运行项目的环境4.当环境都弄好.项目能启动后,开始代码之旅,也是最重要的一步. a)看配置.通看一遍配置文件,了解当前项目用了哪些框架,做到心中有数 b)学业务(重点*).了解各页面间的跳转及异步请求,写一个临时Filter,拦截/*的所有请求,在doFilter()方法中,打印出每次请求的路径( S

Kinect for Windows SDK 2.0新特性

这些新特性包括, 1,改善的骨骼,手,关节方位------具有跟踪6个人全骨骼,每个人25个关节点(新增加手的中指指尖,拇指和shoulder center)的能力,以及对软组织连接和身体定位的改善. 2,支持新的开发环境------支持更快,高效,高品质的跨平台开发,让开发者使用已知的工具在Windows store 开发产品. 3,powerful tooling-----有了记录和playback 功能,让开发者可以摆脱必须有Kinect sensor的束缚. 4,进阶的脸部跟踪功能---

浅谈我对机器学习和文本挖掘的新的理解

转眼间已经工作了一段时间了,回想起2014年初学机器学习时的付出.艰苦和努力,感觉都是值得的.从现在往前看,我是沿着“计算机->统计学->数据分析->数据挖掘->机器学习->文本挖掘”的路径走过来的,我觉得这个思路还是属于比较传统的进阶方法,学习的内容有不少的冗余,但相对来说更稳健一些.今天写这篇文章的目的是想总结一下我最近关于文本挖掘的工作体会以及我对机器学习的一些新的看法,只为探讨,还望与大家共勉. 我先来说一些文本挖掘的东西.似乎大家做Text Mining的不太多,可

浅谈JDK8相对于JDK7的一些新特性

上两天阿海升级了一下JDK环境,IDE版本更新成了Eclipse Neon. 不得不说,这个版本的Eclipse确实很不错,用起来页比较舒服多了.尤其是这个Eclipse的暗黑主题"Drack"改进了不少,这也是我一直用的主题.且看我先秀一下图: 这个主题中,改进最大的就是JSP编辑器,各种高亮很完全哦!JS块中的语法高亮也很带感,然而美中不足的事,仍然没有JS的语法提示.各种图片我就不再秀了,这篇文章主要介绍JDK8的一些新的特性. 哦对了,假如喜欢这个版本的Eclipse的话,下面

浅谈自然语言处理基础(下)

命名实体识别 命名实体的提出源自信息抽取问题,即从报章等非结构化文本中抽取关于公司活动和国防相关活动的结构化信息,而人名.地名.组织机构名.时间和数字表达式结构化信息的关键内容,所以需要从文本中去识别这些实体指称及其类别,即命名实体识别和分类. 21世纪以后,基于大规模语料库的统计方法成为自然语言处理的主流,以下是基于统计模型的命名实体识别方法归纳: 基于CRF的命名实体识别方法 基于CRF的命名实体识别方法简便易行,而且可以获得较好的性能,广泛地应用于人名.地名和组织机构等各种类型命名实体的识

微软HoloLens技术解谜

HoloLens 是什么? HoloLens 是微软发布的可穿戴式增强现实计算设备,它拥有这么几个关键要素: 它是增强现实产品,即 Augmented Reality(AR),AR 技术将计算机生成的图像与真实的世界相叠加.类似的产品有图像投射到视网膜上的 Google Glass,以及叠加在手机摄像头画面上的手机 AR 应用. 它拥有是独立的计算单元,自带 CPU + GPU +HPU,不需要外接计算机.它的 CPU 和 GPU 基于英特尔的 14纳米工艺的 Cherry Trail 芯片,H

[2016 T-EDGE]王坚对话无人机教父:创新就要享受走在悬崖边的刺激

[环球科技综合报道]12月9日的T-EDGE年度盛典上,阿里云和YunOS的创始人王坚和无人机教父Raffaello D’Andrea展开了一场精彩的思想碰撞. 王坚,阿里巴巴集团技术委员会主席,历任阿里首席架构师.阿里云总裁.阿里CTO,加入阿里前曾任微软亚洲研究院常务副院长.Raffaello D’Andrea(拉菲罗·安德烈),人工智能领域世界顶尖专家,亚马逊机器人Kiva系统创始人,2016 IEEE Robotics and Automation Award获得者,被业界称为无人机教父

Microsoft HoloLens 技术解谜(下)

读者提问之“HoloLens 的深度传感器有没有可能是基于 TOF?” 先介绍下背景知识,市面上常见的有三种类型的深度传感器: 结构光,这个技术的代表产品是 Kinect 一代,它的传感器芯片用的是 PrimeSense 家的.说句题外话,PrimeSense 现在是苹果旗下的公司,这个领域未来一定会很精彩. TOF,time-of-flight,代表产品是 Kinect 二代,由于微软对于 One 这个单词的热爱,它的官方名字是 Kinect One,有点混乱是吧? 双目摄像头,代表产品是 G