说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

为什么说Amazon的James Hamilton是“可遇不可求”的?

HTML文档下载 WORD文档下载 PDF文档下载
相信大部分人都听说过“拿破轮”那个笑话,然而James Hamilton却是真正在工作中做到了“国王”。作为曾是兰博基尼和法拉利的专业汽修工,James Hamilton如今却在管理整个Amazon数据中心。黑掉自己的生活、黑掉一切,然后焕然一新。这或许就是Hamilton从汽修工到“国王”的秘密。

James Hamilton曾兰博基尼和法拉利的专业汽修工,如今Amazon数据中心帝国的“国王”。曾效力于IBM和微软。Wired作者Robert McMillan最近带来了一篇关于Hamilton的文章,称其为文艺复兴式黑客,黑掉生活、黑掉一切,然后寻求焕然一新。下面看看IBM、微软以及Amazon都看上了这个“汽修哥”的何处。

以下为译文:

Hamilton在自己的Dirona号上

2011年8月的一个雨天的星期一,弗吉尼亚州北部一个千万瓦变压器发生爆炸,爆炸在电网中造成一个庞大的突增电压。这场风暴袭击了Amazon维吉尼亚州Ashburn的一个数据中心,击穿了设备的主电源;大约15分钟后,James Hamilton驾车抵达。

而Hamilton的到达无疑是个意外的惊喜,Hamilton是个杰出的工程师,负责管理Amazon数据中心日益复杂的设计。AWS ——这个不亚于革命性的在线服务集合,用户包括Netflix、Pinterest、Dropbox等公司。Ashburn的设备是AWS数据中心帝国的一部分。一旦服务中断,类似NetFlix这些服务都会存在中断的危险,而Hamilton就是负责保证宕机不会发生的人。

当Hamilton和他的团队抵达时,备用发电机已经启动;然而基于某些原因,电子并不能成功的送达数据中心内部的服务器。而在Hamilton到达之前,这些服务器已经消耗了电池系统的大部分电力;介于只是断电时的备用电池,其储电量并不是很高。Hamilton在Amazon最近的拉斯维加斯会议上发表讲话说:“我们刚好在服务开始宕机之前抵达,非常烦。”

“非常烦”还是一个婉转的说法。然而Hamilton的工作是冷静的面对这种情况,并且指出在以后该如何避免。他的团队最终认识到,设施中的备份电力开关设计并不符合Amazon;而在Amazon,这种宕机时间是不能被容忍的。现在Amazon已经使用了自己的PLC电力装置。Hamilton在拉斯维加斯的会议上解释道:“我们现在拥有多家开关装置供应商,我们已经对所有的PLC程序设计进行了仔细检查,并且做了编码复核。”

Amazon的EC2和S3网络服务于2006问世,它们改变了计算业务。而大服务器制造商(比如Sun Microsystems)曾经企图使用类公用事业公司出售电力和水的方式去重铸这个行业,但是出乎所有人的意料,Amazon这个卖书和光盘零售商,建立起市场所需要的一套服务。7年后Amazon已经运转几十亿美元的云计算业务 —— 大约占整个互联网份额的1%,然后Rackspace、HP等公司纷纷效仿试图复制它的成功。

然而这个巨大的成功同样带来一系列的计算问题,而James Hamilton就是解决类似问题的一个关键人物,寻求重铸云时代数据中心的方法。就像另外两个云巨头微软和Google一样,Amazon对其数据中心技术也是相当的保密,把它作为最重要的商业机密;然而 Hamilton却反其道而行,他是Amazon为数不多被允许在博客中发表优秀想法的员工之一;而这个50多岁的加拿大人已经成为整个行业分布系统领域名副其实的专家,帮助Amazon建立为全球上万公司提供服务的分布式系统。

Netflix(Amazon最高调的用户)云架构总监Adrian Cockcroft说道:“他确实是个内行,已经制造了许多有趣的东西。”

对Netflix来说,Amazon的服务是完美的。Netflix在星期天晚上的访问量将达到峰值,而星期一则是低谷。通过Amazon,Netflix可以在在最需要的时候获得足够的资源,而在不需要的时候可以抛弃它们。但是Cockcroft和公司必须坚信Amazon可以承担它的主要操作,并且一直不会中断,同样开销必须比自己做来的低。这就是Hamilton的用武之地!


从法拉利到数据库

我们于2012年11月(Asburn数据中心灾难发表讲话的前一天)在拉斯维加斯遇见Hamilton,他和他的妻子刚刚完成从旧金山到夏威夷的11天海上旅行。如照片所见,Hamilton并不是一个典型的数据中心工程师;他还是一个典型的船夫 —— 甚至在船上居住,他曾今还是一个兰博基尼和法拉利的专业汽修工。

在80年代,他从汽车转至数据库,开始在IBM的DB2和微软的SQL Server做一些创意设计。NetFlix的Adrian Cockroff在加利福尼亚Asilomar的高性能系统作坊(High Performance Transaction Systems Workshop)会议上遇见了Hamilton,这是极客界的Bohemaian Gorve,在那里你可以找到可以和你畅谈数据库的人。会议只有接到邀请函的人才能出席,联合创始人为Jim Gray —— 数据中心行业的传奇性专家,而在之后业界也经常把他与Hamiltion相提并论。Gray和Hamilton对大海有着同样的爱好,而不幸的是,Gray于6年前在加利福尼亚北部的海面失踪;在Hamilton去微软之前,他们曾共事于IBM的数据中心。

Hamilton在微软效力时,担任Data Center Futures的研究团队中担任架构师。在2009年他进入了Amazon负责类似的工作,然而其中的细节至今仍是秘密,因为Amazon和微软都不愿公布其数据中心秘密。当我们询问微软数据中心部门主管David Gauthier他是否认识Hamilton时,他回答:“是的,曾今与Hamilton共事了很长时间,直到他离开了微软。”然而他拒绝透露更多相关事宜。

然而我们还能间或的听到Hamilton在改善数据中心:当汉Hamilton效力微软时,曾有报道称其为微软发展模块化(使用自定制容器将服务器更好的组织在一起)数据中心背后的驱动力之一。而在一次与Hamilton共饮时,他证实:为了更好的节省成本,Amazon正在设计自己的服务器。

在他的博客中,Hamilton展示了他设计数据中心方法的冰山一角 —— 比如说他负责的巨大柴油引擎。他曾今还支持在服务器中使用类手机的超低功耗芯片,而在这个月早期Orleans Superdome第47界超级碗进行到一半停电时,他对如何阻止类似事情发生做一份详细的分析。

通过计算机科学教授Lazowska了解到:而在过去几年里,Hamilton一直在华盛顿大学发表客座演讲,内容涉及到数据中心设计和效率。Lazowska还强调这些只是他工作的一部分,他于以前的Gray同样的“广阔和深远”。


文艺复兴式的黑客

大约四年前,James夫妇卖掉了自己的房子、汽车和大多数身外之物,搬到了Dirona号。现在,当其停泊在西雅图时,他会骑自行车去Amazon总部,使用Amazon Prime,在当地的UPS处收邮件。然而他不会一直滞留在西雅图,有时他会驾船开往夏威夷,而后在那里工作。

简而言之,他黑了自己的生活。他会对生活方式进行重新思考,然后焕然一新。Hamilton是那种企图黑掉一切的人,这也是Amazon迫切需要他的原因。

Amazon已经在全球建立了诸多数据中心,从巴西到新加坡到爱尔兰。Amazon2011年在科技和内容领域上的投资达到45亿美元;虽然Amazon并未透露该公司在数据中心业务上的开销,然而在2012年新增的16亿美元支出中大部分被放在了服务器上。由于涉及数十亿美元的庞大资金,Amazon需要有人能维持数据中心的运作,还要尽可能高效的运作。

Ed Lazowska称这种人才是可遇而不可求的。“即使是在微软、Amazon和Google这样的大公司中,也只有少数人真正明白你需要聚焦何处。如果你把目标放在尽可能以高的成本效益来运营数据中心,只有他们知道需要做些什么。”

James Hamilton就是其中之一!(仲浩/编译 王旭东/审校)

写在最后

对于人才尤其是高端人才的争夺已经进入白热化。无论是国外,还是国内。CSDN CEO蒋涛在看到James Hamilton的介绍后,直接@百度云首席架构师林仕鼎。



原文链接: Why Amazon Hired a Car Mechanic to Runs It's Cloud Empire

数据中心基础设施是大数据战略成败的关键 实时大数据分析:网络分析的一种新方法 最新消息:iPhone 6将采用更大、更清晰的1704x960分辨率屏幕 吴毅挺:OpenStack是开源IaaS平台大势所趋的集大成者 做好扁平化设计-交互篇 有关schema名域的问题 这句sql哪错了???大家帮忙 redhat9下oracle安装完,sqlplus不好使?急急急! Remoting事件响应MessageBox.show存在问题 很傻的问题,帮个忙! 急急急急急!数据管理设计器的秘密使用 求2个与日期时间和字符串的正则表达式! 十万火急,在线等待:用xmlhttp发送中文怎么处理? 有谁有一份unix系统基本操作手册 世界上最大的树在哪? 中国地图上怎么划分南方和北方? 中国地图南方,北方怎么分? 从上海沿京沪线到南京,依次经过哪些工业城市 青藏高原在中国地图的那个部位能不能在地图上指一下啊 现在的少儿英语教学机构真是鱼龙混杂啊有谁能给北京的 现在很多少儿英语教学机构教室里有哪些多媒体? 我孩子现在4岁半,想找个上海的少儿英语上课有没有好 开设少儿英语教学的目的是什么了? 世界最高人举行婚礼 夫妻身高相差77日本天皇夫妇访问日水俣市 向水俣病纪日本小学生制成长33.9米鱼卷 打破日本拟上调育儿休假补贴发放比例 增加印尼首都雅加达打击街头“面具猴”表演续写中国新传奇共创亚洲新未来很拼命贫民球队马竞异军突起修路解堵能否给树也留条“活路”?瑞典6小时工作制警示“过劳中国”少儿险种类多按需投保更科学格格吉祥武修在第三帝国宠霸美男水色江山宅男的一亩二分地中国丝绸博物馆旅游圣·阿列克谢耶夫教堂旅游孔雀山庄旅游湄公河篝火晚会旅游红珠山森林温泉旅游
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘