说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

Google工程师谈程序员的自我修养

HTML文档下载 WORD文档下载 PDF文档下载
美国计算机协会对Sanjay Ghemawat进行了专访,Sanjay谈到了Google的文化和大数据的机会。Sanjay认为,挑战是一切创新的原动力,与团队成员紧密配合会产生更多创新,在实践中学习,让项目先简单快速的运行起来。

美国计算机协会十月的人物栏目对Sanjay Ghemawat进行了 专访,他是Google系统架构组(包括MapReduce、 BigTable、Spanner、GFS等)的Fellow,从1999年开始研究分布式系统、索引系统、压缩方案、内存管理、数据表达语言、RPC系统。 Sanjay与Jeff Dean共同获得了2012 ACM Infosys基金会计算机科学奖。

Sanjay Ghemawat

在专访中,Sanjay谈及了Google文化中很多有趣的方面。

什么让Google成为Google?

进步是个现代的概念。通过个人的进步和行动,未来可以变的更加美好。这种信念已经流传了上百年。

是什么推动进步?是挑战。独一无二的发现战胜了挑战。通常,当人们非常渴望做一件事时,就会倾其努力、思考和金钱去解决问题。而结果往往会创造出新的另人惊叹的事物。

在Google也是这样的:

在Google基础设施发展背后的主要动机是保证日益增长的数据集稳定运行的挑战。举个例子,在同一时间Google的网页搜索量会大幅提升,我们会扩展索引规模,还经常对索引进行重建。这意味着,我们不得不在很短的时间内有效的处理大量数据。这直接导致的结果是,我们的基础设施系统得到了发展。

关于MapReduce:

在《 Beautiful Code: Leading Programmers Explain How They Think》一书中,Sanjay提到了Beautiful Code。他表示,书中的MapReduce章节更多的是在阐述一个系统,这些阐述专注于如何解决主要问题(如何在有硬件失效的情况下快速处理大量数据)。

MapReduce的产生动机源于Google需要解决遇到的问题。

前沿的项目能产生大多数创新。也许这是因为在紧密的组织中成员间互相依赖,产生正量反馈,更多的创新由此产生。通常,我们被办公区的隔断分成一个一个的格子,这会切断一切正量反馈。另外很奇怪的一点是,大多数组织的结构是一层一层的堆叠,这让正量反馈无处生存。

大数据职业建议

如何在挑战困难的过程中不断学习?Sanjay给出了建议:

  • 在实践中学习;建立学习体系
  • 学习已知的系统,你可以在许多会议和论文中找到
  • 从快速和简单的实践做起;在不同的系统设计中,能找到高效建立模型的方式

关于未来值得关注的重大技术,Sanjay表示:语言处理、计算机视觉(computer vision)、机器学习可以有效的解决当下许多问题,这也是对大数据领域的下一个挑战。大规模的学习集群已经实现,但需要大量的运算才能获得有价值的结果。我希望在这一领域能出现更多的巨头。

(编译/ 包研  审校/仲浩)

原文:Highscalability

欢迎关注 @CSDN云计算微博,了解更多云信息。

以“应用驱动的架构与技术”为主题的第七届中国大数据技术大会(Big Data Technology Conference 2013,BDTC 2013)将于2013年12月5日-6日在北京世纪金源大酒店举行。大会共设“大数据架构与系统”、“大数据技术”、“大数据应用”、“大数据的研发趋势”、“大数据基准测试(Benchmark)”,以及“智能交通与大数据” 六个分论坛,大牛坐而论道,专家实践分享。10月25日之前, 最低票价!从速!Hortonworks CTO Ari Zilka 已经确认参会!

助影人圆梦奥斯卡 8mm相机应用其实很平庸 苹果应用审查团队叫停Cookie追踪技术 时势造英雄:中国早期O2O创业故事 iOS开发与Android开发的四大不同 “消极抵抗”AWS OpsWork?RightScale首次宣布转售并支持GCE 紧急求救!!!!老师布置的作业!!!!不交要挂了??? 有没有在深圳的朋友,问一下,你们的ADSL上网正常吗?我今天只能用56K猫来上。 请问PCANYWHERE 的LOG文件在哪啊? Mibo生产控制系统提供在线演示,感受一下吧. 一个小问题,在线等着回答!~ 双网卡问题请教 紧急求救!!!!老师布置的作业!!!!不交要挂了??? 请教高手,电脑一开机就开启IE并进入一个色情网站要怎样处理? 如何使用自定义的密码(随意给出一个字符串)对文件或流加密. 函数y=sina|tana|的奇偶是? 电影 大慧星 撞地球 转井工 上太空 原子弹 炸彗 求类似彗星,流星袭击地球或者地球的问题导致地球被摧 海市蜃楼是怎样形成的?光的折射还是光的全反射?祥细 海市蜃楼的形成是全反射还是折射好几本资料上都说海市 请用十字相乘法分解 根据意思写出词语 形容做事机敏,敏捷 动作迅速眼光敏捷形容机灵敏捷 按照意思写出词语 作出函数y=sina/tana的图像 世卫组织官员:全面免费医疗不是医改最男子车祸送医不治身亡 家属砸ICU病汪峰章子怡热恋进行时 约会多次被拍(中国多个航班遭遇虚假炸弹威胁 1名嫌世卫组织官员:全面免费医疗不是医改最油烟、噪声不达标 拒不整改将强制执行12家卖月饼的高档酒店 6家发票项目欧亚经济论坛明日至26日举行男子幕后指挥前妻和情人偷厅官 按比例法官故意致错案将终身追责胡莱三国混世魔郎国之重剑圣运九剑传大稻埕旅游礁溪温泉旅游鹿野高台旅游琉球屿旅游东港镇旅游
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘