说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

AWS副总裁谈数据中心网络打造

HTML文档下载 WORD文档下载 PDF文档下载
在AWS re:Invent 2014上,AWS副总裁兼杰出工程师James Hamilton分享了该公司在网络攻坚上所做的努力。James表示,通过SR-IOV和定制设备,在内部可用区域流量上,AWS已经可以达到每秒25TB的吞吐量。

在拉斯维加斯的AWS re:Invent 2014上,公有云巨头详述了该公司在数据中心网络上所做的努力。James Hamilton,AWS的副总裁兼杰出工程师,在演讲中详细分享了该公司在网络上的实践,涉及到的内容还有数据中心和数据库。

类似电信公司和其他基础设施重度用户,该公司同样认为网络设备开销已经超出各个机构的承受范围,为此,Amazon开启了网络设备的研发之路:他们从原始设计制造商购买路由设备,随后搭载定制的网络协议软件从而获得更高的效率。


Hamilton表示,为了让该网络设备可以支撑大量流量,Amazon做了大量的测试。Hamilton补充说,在测试环境中,该公司使用了大约8000台服务器;同时,鉴于测试是在云中完成,在测试结束后,他们可以立刻关闭这些服务器,因此测试成本可以从数百万降至数十万。

Amazon使用专用光纤连通了全球11个region(每个region都拥有数个数据中心),从而保证了服务在世界范围内的网络连通性,也避免了一些潜在的问题和故障。


Hamilton分享到,在内部可用区域流量上,AWS已经可以达到每秒25TB的吞吐量。


Hamilton表示,Region中的每个可用区域都包含了两个或以上的数据中心,每个数据中心大约有50000到80000台服务器。Hamilton认为,从规模上看,Amazon数据中心可能会小于其他机构,然而别忘记了,数据中心执行效率是受到机架数量限制的;同时,当灾难发生时,Amazon的多地域灾难备份会将损害降到最低。


同时,Amazon在SR-IOV上也深有研究。Hamilton表示,给虚拟网卡搭载这种SDN技术(SR-IOV)可以让每个客户都获得自己的“网卡”。Hamilton补充到,这一点的实现并不容易,因为如果这样做的话,机构必须在DDoS和网络容量限制上投入更多的精力,好在是Amazon实现了,而客户们也一直享受着AWS带来的低延时。

通过虚拟化和定制设备,Amazon切实地降低了网络、存储和服务器的开销。

原文链接: Amazon details how it does networking in its data centers(编译/仲浩 审校/魏伟)

CSDN诚邀您参加中国大数据有奖大调查活动,只需回答23个问题就有机会获得最高价值2700元的大奖(共10个), 速度参与进来吧!

第八届中国大数据技术大会(Big Data Technology Conference 2014,BDTC 2014)将于2014年12月12日-14日在北京新云南皇冠假日酒店召开。传承自2008年,历经七届沉淀,“中国大数据技术大会”是目前国内最具影响、规模最大的大数据领域技术盛会。本届会议,你不仅可以了解到Apache Hadoop提交者Uma Maheswara Rao G(兼项目管理委员会成员)、Yi Liu,以及Apache Hadoop和Tez项目管理委员会成员Bikas Saha等分享的通用大数据开源项目的最新成果和发展趋势,还将斩获来自腾讯、阿里、Cloudera、LinkedIn、网易等机构的数十场干货分享。 门票限时折扣中, 预购从速。


免费订阅“CSDN大数据”微信公众号,实时了解最新的大数据进展!

CSDN大数据,专注大数据资讯、技术和经验的分享和讨论,提供Hadoop、Spark、Impala、Storm、HBase、MongoDB、Solr、机器学习、智能算法等相关大数据观点,大数据技术,大数据平台,大数据实践,大数据产业资讯等服务。

【工具推荐】Zrender——轻量级Canvas类库,让绘图大不同! 基于Docker和CoreOS的开源PaaS平台——Deis v1.0正式发布! 微软宣布.NET开发环境开源 支持三大操作系统 爆发吧,诺基亚!前员工开发物联网新设备 详解Visual Studio Emulator for Android,微软的Mobile First! HPC China 2014完美落幕,AMD Firepro荣获好评! 揭秘微软的Container技术之一Drawbridge AWS副总裁谈数据中心网络打造 【最具价值CTO评选秀】出门问问CTO雷欣:从技术极客到核心管理的秘密 《近匠》APICloud:“云”+“端”一体的移动API提供者 Oculus移动SDK发布!John Carmack操刀、集成Unity 4.5 11月15日深圳见!深圳微信开发者大会公布全部议程 参与2014中国大数据行业大调查 BDTC门票等你拿 HTML5规范尘埃落定,5个开发工具推荐 盘点最受开发者喜爱的Android 5.0 Lollipop API IoE Day侧记:想开发智能硬件?先要弄明白这几个问题 【问底】许鹏:使用Spark+Cassandra打造高性能数据分析平台(二) 微软承诺所有Lumia WP8设备将升级至Win10,用户会买账吗? 周末,深圳微信开发者大会等您来!(参会必读+名单) 营造云安全生态链 第五届云安全联盟高峰论坛在京顺利召开 中国大数据六大技术变迁记 【最具价值CTO评选秀】当当网CTO熊长青:结合行业及技术发展,规划技术方向 社交颠覆传统,环信技术交流沙龙纪实(组图) 揭秘经典案例炼成之道 微信开发者大会精华回顾 从一家电子商务网站学到的经验教训 【最具价值CTO评选秀】极路由CTO康晓宁:极客转型CTO的感悟 盘点这些年来的“微信万能论” 《近匠》亲加通讯云:IM即时通讯API的极致服务者 TCL杯HTML5智能电视开发大赛完美落幕,8项获奖应用大揭晓! Xcode 6.2 Beta发布,支持WatchKit的iOS 8.2 SDK来了! 【最具价值CTO评选秀】携程高级技术副总裁叶亚明:从呼叫中心到移动互联网的演进 SQL查询 紧急求教!! 孤独的SB——写给水园的死者. 请问如何在一个SQL的Select中得到一个Boolean字段的中文名称? outlook如何载入来自文本文件的大量邮件地址列表 请问我想吧dbgrid里面的内容保存到一个string变量里面怎么做, net中ToolbarItem集合编辑器使用 怎么得到ms sql server的本地实例(或服务)列表? IIS如何控制目录访问权限? asp.net 我不懂的问题,不是很难啊。 有关mysql出错的问题?? 牛人们,帮我看看~~~~~~ 调试INTERDEV中的PROJECT? 请问 GetCellDigital返回值有误 目录树记忆属性实现的讨论 关于用户自定义类的问题 自制控件问题 静态链接库中的资源 Xml的查询定位问题? 小高求助! 关于JAVA文件执行时出现的错误 如何在Datagrid中取得当前记录的某字段值? 如何取得下拉菜单项? 目录树记忆属性实现的讨论 我想去中国网通申请域名,他们是不是很吊,有没人用过啊 Help 删除一条记录?? 在研究软件加密 “咱们把最好的粮食给城里人吃,又进城帮助他们盖起了高楼大厦,他们为什么还瞧不起我们呢?” 老板今天叫我签合同 有关于TImage的图像显示速度 怎样让 Title 的显示时间延长????????? !!!!!!!!!格式化数据列 怎么这么慢啊 请问:如何在打印之前设定该次打印纸张的大小(很急,老板催货了,帮忙顶一下,谢谢)? 有什么办法可以把class文件反编译回java文件? 如何写到文件? 自己写一个函数,把2,3,4加到1,2,3中去,不重复 Netscape打印中文网页为什么不成功? 英文XP中装了东亚语言包,能显示中文了,如何输入汉字呢。。。。 接到一个电话 哪位大哥大姐教教我啊? Dll如何同控制台程序通信 RedHat Linux7.2下如何挂上RealTek8139网卡驱动????高分相送哦!在线等待!!! TreeView问题 求register_globals = On和register_globals = Off的不同用法(原代码) 斑竹,我是因为升级才散分的,有个穿红裤衩的支持俺了…… 一个新手的加急求救!谁先回答,就先给谁份,希望大家说的详细点! 写xml文件的不完整的问题 关于esqlc的unload 的问题。 关于方法覆盖,在线等候 不完全液体润滑滑动轴承的主要失效形式是什么? 动压润滑和静压润滑有什么优缺点,比如:如果动压润滑,在启动时会不会产生干摩擦,启动后才能产生油膜 现在我们有3、4二氯硝基苯这种材料,请问能生产出几种产品,需要和哪些材料反应呢? 液体摩擦滑动轴承的计算应限制什么?为什么? 数字式万用表的表笔是红正黑负吗?以前用指针万用表,电阻档黑表笔接的是电池正极,听说数字式万用表电阻档的表笔正负和指针表极性是相反的, 在一个密闭容器内,植物进行光合作用之后生成了氧气消耗了二氧化碳能否再利用生成的氧气进行有氧呼吸如果是不就意味着循环利用了吗,那样的话植物能存活多久,回答好的重重有赏,哈哈 梅子留酸软齿牙,芭蕉分绿与窗纱.日长睡起无情思,闲看儿童捉柳花.的意思 万用表上面COM口接黑表笔还是红表笔? 以“夫”和“泣”为例,分别探索它们的意义 依据浙江省暑假作业语文P3参考回答 有个英文名字读"咦令"(类似于"依琳"..) 怎么拼写的阿?.. 如何验证溶液中含有亚铁离子? 解释下文化是什么?最好是举例说明, 十字轴式万向节等角速度传动的条件是什么,有何特点? 属于光反射现象的是 A 小孔成像 B 激光引导掘进机沿直线前进 C 在地球上可以看到日食和月食 D 教室里不同位置的同学都可以看到黑板上的字 100年后我们的生活会是什么样呢怎么翻译?what will our lives be like in 100 years?ORwhat our lives will be like in 100 years? 静电能看见 能听见 但没感觉摸到金属 能看见明显的电流 能听见明显的PIA一声但就是不疼 甚至一点感觉都没 太奇怪了我没骗你们阿 我真的一点感觉都没有 只看见和听见以前问过科学老 日长睡起无情思,闲看儿童捉柳花.描写哪个季节? 你怎么认为100年后,生活会是什么样 马蹄铁型(u型)磁铁磁感线 可以从两极之间切割么? [多选题]1.下列各项中,属于要约邀请的有(  ).[多选题]1.下列各项中,属于要约邀请的有(  ).A.规定投标人应具有特定资质条件的招标公告B.某公司向一商业伙伴寄出的自己已经签字盖 你认为100年后的生活会是怎样的 英语 在U型磁铁有两个的情况下,进行切割磁感线运动会有电流产生吗?但是如果人为地将两个U型磁铁同极与同极地捆在一起,然后进行切割磁感线运动,会出现什么情况? 商业广告在什么情况下属于要约,在什么情况下属于要约邀请?越详细越好!谢谢啦! 十二烷基苯磺酸可以用乙醇溶解吗十二烷基苯磺酸与乙醇在水中会发生酯化反应吗 我经常在cnbeta里到新闻后的评论总会扯到景德镇,使用率还很高,说瓷都什么的就别回了,地球人都知道有那个个地方. 磁场和引力磁场的实体存不存在,如果存在请回答下列问题,如果不存在请说明理由.当人类能把不能再分的原子打出了质子,中子,电子,甚至跨克时,我们不得不怀疑物质的组成本质到底是什么, 十二烷基苯磺酸溶于哪些有机溶剂? 景德镇的陶瓷、特别薄、请问属于哪一种类?RT另:这种属不属于薄胎瓷?特薄特轻……现在这种大概值多少钱、 已知电压220v功率4800w求电流. 请举例说明招投标的意义.一定要举例说明,一定要举例说明. 巴勒斯坦和梵蒂冈为什麽是联合国观察员国?是联合国观察他们还是他们挂差联合国? 电脑端有没有检测电压的软件.检测家庭电压的.我怀疑电压严重低于220V 招标有几种方式 分别介绍其含义 巴勒斯坦真正立国的时间是什么时候.最近他们成了联合国观察员,说明已经被世界认可,但什么时候立的国. 求相关合同法多选题答案多选1.甲方违约,给对方乙造成损失15万元,合同规定违约金比例为货款总额的10%,货款总额为200万元,则下面的说法不正确的是()A.甲应赔偿乙15万元B.甲应赔偿乙200万 企业想购买一台旧家电,自用证明怎么写 巴勒斯坦为什么只是观察员国地位他不早就是了吗 一道关于合同法保证的选择题 多选甲向乙借款5万,乙要求甲提供担保,甲分别找丙,丁,戊,己,下列构成保证的是A 丙在借据上签署“保证人丙”B丁向乙出具字据“如甲到期不向乙还款,本人愿代 西亚北非局势与当前国际关系态势,马哲的作业, 巴勒斯坦凭什么加入联合国 诸葛亮上知天文,阴谋诡计,周瑜自愧不如.(修改病句) 26.一切唯心主义的共同观点有( )①把精神看作世界的本原 ②主张社会意识决定社会存在 ③认为世界万物是“感觉的复合” ④认为世界是不可知 ⑤认为绝对精神产生万物[ 1分] A.①③⑤B. 英国为什么反对巴勒斯坦加入联合国?模拟联合国大会要用到.代表英国,议题为巴勒斯坦的入会问题.麻烦大家了.我急用.请尽量从英国的角度回答这个问题.可以官方点. 帮忙回答几个关于合同法的问题,谢谢1、一方当事人以缔结合同为目的,向对方当事人所作的意思表示.是( )A、 要约 B、要约邀请 2、承诺是受要约人对要约的内容表示基本同意和接 上汽集团总裁胡茂元也有一套管理哲学,就是“长勺喝汤”理论,即想要自己喝到肉汤先要学会喂别人.胡茂元能够如此为别人着想,难怪美国通用汽车公司都盛赞他是中国企业中少有的善于协调 东盟有无超越国家的权力机构? 诸葛亮上知天文,阴谋诡计,周瑜自愧不如.这句话的病在哪.(修改病句) 轴承支撑座因为是重载作业,要求轴承采用滑动轴承(轴瓦),且安装的位置具有倾斜即轴与水平面的夹角为4度请问刮瓦时有哪些注意事项,越详细越好》作为验收人注意哪些东西啊 好听的英文名,帮我取一个好听的英文名,、、?中文名:赵依琳 .性:女. 谁能帮我?修改病句:诸葛亮上知天文,阴谋诡计,周瑜自愧不如. 既然主观决定客观 为什么人犯错还是要在主观上找原因呢 哪里有废旧的节能灯玻璃卖,我想回收 那位知道生物学分类的界门纲目科属种的拉丁语各是如何翻译的? ,初二物理力,仔细回答必有好评,谢谢 一般性国际组织的定义,以及相对定义 谁知道攀枝花(木棉)在生物学中的分类的位置啊?我只知道属木棉科的 现在家用电器越来越多,冬天里开的电器更多了,我怕家电短路引起火灾,那家财险能负责赔吗? 已知反应CO(g) +H2O(g) =CO2(g) + H2(g)在1259K达到平衡,平衡常数K=1,求1,求n(H2O)/n(CO)为1时,CO的平衡转化率?2,求n(H2O)/n(CO)为3时,CO的平衡转化率?3,从计算结果说明浓度对平衡遇到的影响? 引力和磁场之间存在相互关系吗? 3,4-二氯硝基苯除了可以生成苯胺,还可以生成什么? 俄总理说中国是俄非常重要和可靠的战略美国与沙特进入公开紧张状态 多重分歧美国与沙特进入公开紧张状态 多重分歧伊朗处死16名反政府组织囚犯 回应边西班牙华商遭警察勒索殴打 寻求律师援奥巴马参观学校旁听课程 揶揄国会议员冯小刚:春晚我打算娱乐大众,每天想如冯小刚否认说过由着性子办春晚:我没傻央视马年春晚时长缩减至4小时 明星没安倍称担心中国加强军备 日本应领导亚安倍称担心中国加强军备 日本应领导亚伊朗处死16名反政府组织囚犯 回应边奥巴马参观学校旁听课程 揶揄国会议员义乌26日清晨发生爆炸凶杀案 已有一安倍称担心中国加强军备 日本应领导亚墨糖果厂爆炸现场搜救结束确认两人遇难浙江首次采用新评价体系对1300余所我军少将:中国发展军力绝不针对日本伊朗东南部武装冲突致17名边防人员死国航增加三条国际航线香港影片《狂舞派》纽约放映获好评就业之路“小交警”“小城管”活跃社区陈光标美国“撒钱”被指“搞噱头”BOTTEGA VENETA “虚构初夏“膜”咒小S综艺女王不只一面短裤被扯 名字被改一只伦敦的杯子上海发布企业社会责任报告金融监管目的应是降低市场不确定性33路934路明天起调整走向“建发房产”2014世界杯积分榜画家董之一赠画 城管董之益一个人的合影与一群人的狂欢图片新闻老居委平稳有序更显“静模样”看球之意不在球赌博类保险Cartier 时间艺术展将开幕业绩亮眼年中派大红包汇丰中国社区建设计划公益招投标上午揭
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘