说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

AWS副总裁谈数据中心网络打造

HTML文档下载 WORD文档下载 PDF文档下载
在AWS re:Invent 2014上,AWS副总裁兼杰出工程师James Hamilton分享了该公司在网络攻坚上所做的努力。James表示,通过SR-IOV和定制设备,在内部可用区域流量上,AWS已经可以达到每秒25TB的吞吐量。

在拉斯维加斯的AWS re:Invent 2014上,公有云巨头详述了该公司在数据中心网络上所做的努力。James Hamilton,AWS的副总裁兼杰出工程师,在演讲中详细分享了该公司在网络上的实践,涉及到的内容还有数据中心和数据库。

类似电信公司和其他基础设施重度用户,该公司同样认为网络设备开销已经超出各个机构的承受范围,为此,Amazon开启了网络设备的研发之路:他们从原始设计制造商购买路由设备,随后搭载定制的网络协议软件从而获得更高的效率。


Hamilton表示,为了让该网络设备可以支撑大量流量,Amazon做了大量的测试。Hamilton补充说,在测试环境中,该公司使用了大约8000台服务器;同时,鉴于测试是在云中完成,在测试结束后,他们可以立刻关闭这些服务器,因此测试成本可以从数百万降至数十万。

Amazon使用专用光纤连通了全球11个region(每个region都拥有数个数据中心),从而保证了服务在世界范围内的网络连通性,也避免了一些潜在的问题和故障。


Hamilton分享到,在内部可用区域流量上,AWS已经可以达到每秒25TB的吞吐量。


Hamilton表示,Region中的每个可用区域都包含了两个或以上的数据中心,每个数据中心大约有50000到80000台服务器。Hamilton认为,从规模上看,Amazon数据中心可能会小于其他机构,然而别忘记了,数据中心执行效率是受到机架数量限制的;同时,当灾难发生时,Amazon的多地域灾难备份会将损害降到最低。


同时,Amazon在SR-IOV上也深有研究。Hamilton表示,给虚拟网卡搭载这种SDN技术(SR-IOV)可以让每个客户都获得自己的“网卡”。Hamilton补充到,这一点的实现并不容易,因为如果这样做的话,机构必须在DDoS和网络容量限制上投入更多的精力,好在是Amazon实现了,而客户们也一直享受着AWS带来的低延时。

通过虚拟化和定制设备,Amazon切实地降低了网络、存储和服务器的开销。

原文链接: Amazon details how it does networking in its data centers(编译/仲浩 审校/魏伟)

CSDN诚邀您参加中国大数据有奖大调查活动,只需回答23个问题就有机会获得最高价值2700元的大奖(共10个), 速度参与进来吧!

第八届中国大数据技术大会(Big Data Technology Conference 2014,BDTC 2014)将于2014年12月12日-14日在北京新云南皇冠假日酒店召开。传承自2008年,历经七届沉淀,“中国大数据技术大会”是目前国内最具影响、规模最大的大数据领域技术盛会。本届会议,你不仅可以了解到Apache Hadoop提交者Uma Maheswara Rao G(兼项目管理委员会成员)、Yi Liu,以及Apache Hadoop和Tez项目管理委员会成员Bikas Saha等分享的通用大数据开源项目的最新成果和发展趋势,还将斩获来自腾讯、阿里、Cloudera、LinkedIn、网易等机构的数十场干货分享。 门票限时折扣中, 预购从速。


免费订阅“CSDN大数据”微信公众号,实时了解最新的大数据进展!

CSDN大数据,专注大数据资讯、技术和经验的分享和讨论,提供Hadoop、Spark、Impala、Storm、HBase、MongoDB、Solr、机器学习、智能算法等相关大数据观点,大数据技术,大数据平台,大数据实践,大数据产业资讯等服务。

三个火枪手将重袭传统零售业 网易王健宗:革命Hadoop,Spark带来百亿市场价值! MediaTek高级总监Chien-Ping Lu:HSA在下一盘大棋 Docker一周岁生日快乐 虚拟现实,正在改变什么? 一周消息树:腾讯CTO张志东离职 未来希望帮技术人成长 又见真人CS:13th Lab推出移动FPS对战平台 前瞻、教育、创业:Maker Faire演讲嘉宾揭晓 提高API采用率的六大方法 一周热点:以咖啡店为例演示Web应用程序扩展 中国云计算大会PPT集萃(四):数据安全与实际应用挑战 CDN前景光明,SDN发展的驱动力源于对产业的颠覆 Android、WP双系统若要发展 难题不断 即将于下周召开的微软Build 2014六个愿望清单 【独家专访】腾讯陈磊:你不知道腾讯对开源有多爱 地下数据交易网站Rescator被黑,疑似Target报复 Spark独门秘籍:打造结构一体化、功能多元化的高效数据流水线 【走进支付宝】重磅嘉宾!历届“走进企业”回顾 【OSTC讲师专访】腾讯TDW项目:开源的分布式数据仓库 ID爆发的物联网时代,我们该如何管理手中的数百个账户 取代Google Maps?苹果大幅优化Apple Maps用户体验 中交兴路系统架构师杨晓明:Hadoop+Storm+ HBase…,打造交通行业创新型服务 雨果·巴拉的第二春:我与小米的那些事儿 为什么Android Wear能统领智能手表领域? LinkedIn缘何抛弃Ruby,转投NodeJS怀抱 【OSTC讲师专访】九秒社团李明:开源对游戏产业的渗透与帮助 IBM 2014中国论坛:挖掘新互联网时代下“智慧企业”的发展之路 Facebook工程部副总裁Cory Ondrejka谈企业在早期所遇到的管理瓶颈 小团队管理工具选择:不需要大而全 《近匠》聚合CEO左磊:基础数据免费,API开放 IDC:HTML5与原生应用之争还将长存 那里有VC6.0内幕技术的第五版下载 发送的问题[初学] 数据表加密 关于DELPHI6操作INI文件的问题! 散分啦,快来抢分!谁能提供计算机中英文论文一篇,来者都必有分! 求银行家问题的C语言解法 请问,在中国,VC程序员的主要工作是什么? 菜鸟问题,ADO添加记录已经在浏览器上看到结果了,可是实际的ACCESS数据库却没变呢 怎么刷新整个窗口包括标题栏 订购了程序员全年杂志,不是送一本书吗?都已经出版这么久了,怎么还没有送过来呢?! 散分啦,快来抢分!谁能提供计算机中英文论文一篇,来者都必有分! 两个combobox关联显示(在线等) 关于我的yamaha 声卡在2003 不能用的问题 我用WIN98浏览器下载的文件都有错误。 Tomcat中的发行目录怎么设置! 初学者的问题. 关于最终用户许可协议 JPG图片怎么能实现部分透明? 如何用VB.net编写控件 关于ASP中对文本文件的skip(n)操作到底怎么做 关于SQL的菜鸟问题 大家现在用什么软件管理源代码啊。60分相送。 今年是考C 还是C++啊? 怎样判断一个线程已结束 我用new新建了若干个基类是cwnd的窗体cmywnd,然后想在每个窗体内定时让它们自己消失,我应该用什么函数?是destroywindow吗?最后还用不 vs.net 2003 中文版 的帮助MSDN是不是有问题? 清问这个SQL有什么错,还是FB1。0不支持? 是我的usb口的问题吗?? 怪事 急 路径绝对正确,为什么服务器只能下载rar 不能下载EXE 文件 已知,f(x)=arctanx,其二导f''(x)=(-2x)/(1+x*x)^2,f''(0)=0,试: 一个有趣的问题,请大家看一个小程序,来者有分。 这个写者优先是不是有问题????麻烦看一下,小弟实在看不出错在哪里 请问有没有办法得到[系统托盘]上其它程序的所显示的Icon?? 已知,十六进制(34.6)16=(28.75)10(十进制) 高手推荐几个Palm开发的网站?最好有源代码! 请教一个问题 触发器(加密)内容可以查看吗 怪,文件路径绝对正确,EXE文件不能下载,其它格式正常。 在编写的用户控件中公开所引用控件的事件怎么实现啊 这是我的usb口的问题吗? 考程序员前想先考全国三级,请问三级种哪个科目考C编程?何时报名? 调用DLL时候出现Bad Dll calling convention错误,为什么?代码如下 如何建立一个小数据库? 我想问下,网络技术到底是指什么??? 为什么会出现这个问题呢??急救??? 在不同操作系统出现不能正常运行的问题,和默认字体语系乱码问题 C# 静态类成员 新手请求各位前辈帮助 如何查询我连接到哪个数据库? 哭着请求帮助。。。。。页面显示问题!!在线等着 网络技术到底是指什么???? 卤素灯和氙气灯区别 跳高姿势有哪五种? 甲光向日金鳞开的上句是什么不好意思啊,我一定会非常非常非常非常......的感谢你的 四线(2根火线1根零线1根接地线)应急电源怎样接普通照明灯具? 如图所示,装有架子的小车,又细线拉着小球在水平地面上一起运动,已知运动中,如图所示,装有架子的小车,用细线拉着小球在水平地面上一起运动,已知运动中,细线偏离竖直方向30°,则小车加速 甲光向日金鳞开的前一句是什么? 请问下,家里的三基色灯管坏了,后来,我把镇流器不晓得也拆了.请问下镇流器怎么样对灯管? DNA限制酶切割DNA形成的末端有什么不同就是切割形成黏性末端是切割DNA哪里,切割形成平末端是切割DNA哪里.还有,一种限制酶能识别多少种核苷酸序列,然后产生什么. 急 新买的叉车 冷车时转向正常 热车时打不动轮 请大师来帮帮忙去年新买的三吨现代和三吨山推 现在都是这个毛病 大概车热半个小时后 就打不动轮 ,大泵 转向机 多流阀都调啦 一点用不管 三项四线漏电保护器怎么接下火线? 如图所示,装有架子的小车,又细线拉着小球在水平地面上一起运动,已知运动中,细线偏离竖直方向30°,试求小球的加速度 甲光向日金鳞开.上一句 一天上有十个太阳,为什么后羿只射下九个? 用铁皮做一个如下图所示的零件两头无盖这个零件的体积是多少 以前有没有姓于的皇上有没有姓于的皇上 都有谁? 天上有十个太阳为什么后羿只射下九个代表什么数字 光滑水平面上放有一木块,一颗子弹以速度v打向木块.为什么木块不会一直被子弹推动,光滑水平面啊 什么是盖斯定律 一物体在平行于斜面向上的恒力 F 作用下,由静止从底端沿光滑的斜面向...一物体在平行于斜面向上的恒力 F 作用下,由静止从底端沿光滑的斜面向 上做匀加速直线运动,经时间 t 力 F 做功为 60 植物标本都有什么作用? 盖斯定律 是什么? (1/3)一物体在平行于斜面向上的恒力 F 作用下,由静止从底端沿光滑的斜面向 上做匀加速直线运动,经时...(1/3)一物体在平行于斜面向上的恒力 F 作用下,由静止从底端沿光滑的斜面向 上做匀加 在表面光滑的小车上放两个小球均静止,当小车忽然水平向右运动时,两个小球相对与地面是静止的,为什么全解上的一道题,但怎么看都看不懂 横河川仪EJA智能变送器各型号特点和使用场合的详细说明有没有? 2-3的基因型为什么一定是aaBB 自律神经(自主神经,植物神经)受人体支配吗? 惟贤而戴者进,聚不肖而王者退 不肖的意思 “我”还能用什么语言?请进来比如说我还能用俺,吾,汝辈,哀家,朕,在下……请问还能用什么?不要重复我说的. 什么是标定地价 基本概念是什么 如图所示,在三角形ABC中,角ABC=90度,以AB上的点O为圆心,OB的长为半径的圆与AB交与点E,与AC切于点D(1)(1)求∠ADE=∠ABD 在中,原本天上有十个太阳,他射死了九个.请问那十个太阳的名字是什麽?有一个太阳如何逃过一劫?我好象看过一个版本,说最后一个太阳是因为躲在一棵植物后面才没有被射死,它是什麽啊? 数学B卷29题 如图,在三角形ABC中,角ABC=90度,o是AB上一点,以O为圆心,OB为半径的圆与AB相交于点E,与AC相切于点D,连接DB,DE,OC (1)从图中找出两组相似三角形.(2)在(1)中已找出来的两对相似三角 在三角形ABC中,角B等于90度,哦位AB上一点,以O为圆心,OB为半径的圆与AB交于点E,与AC切于点的,AD等于2,AE等于1,求CD长? 瓷器33欧姆J是电容还是电阻 如图 在三角形abc中,∠ABC=90°,点O是AB上的一点,一点o为圆心,OB为半径的圆与AB交于点E,与AC切于点D问﹕DE∥OC是否成立?请说明理由, mid、medium和middle的用法区别, 为什么电流表与用电器串联用电器不工作 英语翻译Hello first I wanna ask about size.In europe I am dressing Medium size but I think your size for US.So which one is fit for me.Also do you have Fenerbahce jersey (TURKISH TEAM) if you do not have I will buy different teams but if you have 在Rt三角形ABC中,角ABC=90度,以AB上的点O为圆心,OB的长为半径的圆与AB交与点E,与AC切于点D.求证:BC= 已知甲、乙两城相距260千米,面包车和小轿车同时分别从甲、乙两城出发,几小时能相遇 一颗子弹由枪口射出时的速率为V,当子弹在抢筒内被加速时,它所受合力为F=(a-bt).a,b为常数.(1)假设子弹运行到枪口处合力刚好为0,计算子弹走完枪筒全长所需时间(2)求子弹所受的冲量( 求翻译:hello,I want the clothes in size XL.NO MEDIUM.Thanks 交流阀用电磁铁说明书上的通电持续率是什意思 非惯性系问题计算物体相对于旋转参考系的加速度例:旋转参考系K(K相对于惯性系的角速度为ω)中有一质点A(A相对于K系静止)距参考系中心O长为R,在某一瞬间有这样一个质点P,P在OA延长线上OP=r 求翻译Do you know if your dad wear size medium or large on Ralph Lauren 阀用电磁铁为什么老烧线圈?电压220V 吸力5.5Kg 行程8mm 要怎么样限制酶才能完全切割 在初次分配中也要实现效率与公平的统一有何重大意义 如图,已知∠1=∠2,∠C=∠D,求证:∠A=∠F 限制酶切割什么序列? 如何理解斯大林模式,实现了效率与公平的统一 磁铁是怎么做出来的 SmaI切割酶是什么 EJA变送器测量压力显示不准,如何检查 三相四线电源用几根火线三相四线电源中为什么要用三条火线,应用到设备时用一根还是三根都用呢 用同一种酶切割有几种重组质粒 EJA变送器短路 会烧坏吗 3项电压的2条火线是怎么来的?是不是从220V交流电压的火线上再分一根火线出来的? 合力1.8叉车故障码4.1是什么原因 甲光向日金鳞开 的前一句 美国职棒大赛 球员为赢对手纷纷留长胡崔永元赴美调查转基因食品 随机调查答朝鲜将送还6名被扣押韩国公民马凯在法国《回声报》发表署名文章土库曼斯坦总统出新书讲述父亲的故事也门男子因15岁女儿与未婚夫通电话将嘉兴南湖:消企携手共筑安全“防火墙”杭州消防马路中间铺气垫解救跳“桥”男洗洁精添加剂泄漏扰民 嘉兴经开消防成化工厂生产车间起火 杭州富阳消防成功消控室无人值班 浙江海盐假日酒店被罚数万人白宫网站请愿 要求禁播“杀光中浙江开通党员教育云平台助推群众路线教浙江打造中小学校“透明食堂” 信息需浙江临安警方破获特大武装贩毒案 缴获中国再发渤海北部禁航令 23天内有重解放军神秘基地藏大漠深处 配多型先进维也纳出新措治理粉尘污染美国长岛一小学生在校内玩胡椒喷雾致多美拒评是否曾监听默克尔手机 新自贸协新加坡一卡车为避前方车祸急刹车侧翻压不让物价上涨影响生活不负重托 牢记使命扎实推进党风廉政建设反腐败核心提示新起点开展血清流行病学调查那曲畜产品展销会销售创新高曲水县开启干部自主培训新模式《食品药品投诉举报管理办法(征求意见为民送实惠那曲表彰最美乡村医生教师打造产业生态园实现富民强县铸造为民服务品牌完成22个农村小水电维修项目核心提示平价蔬菜进社区帮助贫困学生 关爱留守儿童做好就业和社会保障工作物价上涨给城乡居民生活带来的影响第六届西藏自治区“珠穆朗玛文学 艺术曲水县把“四风”问题一改到底
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘