说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

数据中心基础设施是大数据战略成败的关键

HTML文档下载 WORD文档下载 PDF文档下载
随着基于传感器的移动Web监视设备和输出数据越来越多,可用的数据量将继续呈指数级增长。每个公司围绕大数据的相关决策都会有所不同,大数据战略需要数据中心基础架构作出的改变主要有五点。

【编者按】管理者相信,能有效运用数据的企业将比落后者具备更大优势。大数据战略需要数据中心基础架构作出的改变主要有文中所列举的五点,例如大数据导致的存储需求量每年都将增长60%至80%,IT采购者应选择在可扩展性和存储速度上最具成本效益的硬件;当然每个公司围绕大数据的相关决策都会有所不同。请记住,随着围绕大数据的技术演变,大数据战略也应当及时调整。本文来自机房360。

以下为原文:

为大数据选择新的硬件、存储和其它数据中心基础设施,这是IT专业人员们所面临的新挑战。

大数据是具备空前规模和形式的非结构化信息。它包括视频、图像,以及半结构化的数据(例如在Web上常见的电子邮件和文本)。随着基于传感器的移动Web监视设备和输出数据越来越多,可用的数据量将继续呈指数级增长。

推行大数据战略的压力往往来自高层,因为管理者相信,能有效运用数据的企业将比落后者具备更大优势。大数据战略需要数据中心基础架构作出的改变主要有五点:

一、支持大数据的硬件

大数据导致的存储需求量每年都将增长60%至80%,鉴于这种快速增长和当前的成本限制,IT采购者应选择在可扩展性和存储速度上最具成本效益的硬件。类似大型机的向上扩展体系结构重新兴起,因为它们能够经济高效地扩展,降低总体拥有成本。同样,在提升性能方面,固态硬盘(SSD)和固态卡带都比传统磁盘做得更好。

类似IBM Netezza和Oracle Exadata的硬件装置已被证实能有效兼顾可扩展性和性能。考虑采用硬件装置来支持关键大数据业务,但也应确认设备的架构能在未来提供快速性能升级。

二、围绕大数据选择存储

在成功的大数据策略下,企业可以将来自内部的高质量数据与Hadoop挖掘自多个云供应商的低质量数据进行整合。这也就改善了业务相关数据的质量,让分散在各地的数据能组织成为具备一致和及时性的大数据资源。

大数据正在改变中央数据仓储和松耦合数据集市的决策基础,后者的存储库规模要小得多,既可以替代中央数据仓库,也可以成为中央数据仓库的数据源。随着各地办事机构或者国际子公司的增加,中央管理层在业务线扩大的同时更需要高质量的数据来维持管控力度,避免权力的分散。

新的软件技术承担了繁重的存储相关处理工作。由Composite Software(刚刚被Cisco收购)和Denodo提供的数据虚拟化软件能自动发现数据源并提取数据充实全局元数据存储库,为整个组织提供跨越内部和外部的所有数据的公共数据库外观和体验。主数据管理软件通过创建公用主记录提高了数据质量,消除了费时的数据仓库检索。

企业Web外链需求加深了对公众和混合云的依赖。许多大型企业发现他们需要来自于多个云供应商的大数据,却不能指望供云应商会负责整合这些数据。企业只能从数据虚拟化供应商寻求工具来跨多个云整合大数据。

三、利用SSD的存储分层策略

存储成本很高,而且越快的存储也就越昂贵。最重要的是,大数据要求存储同时提供大容量和“大”性能。存储分层在存储资源池中提供多种成本/性能选项,从昂贵的高性能固态存储到传统的串行SCSI(SAS)磁盘存储,这些选项的组合降低了总拥有成本。在主内存和磁盘之间增加一个固态层将有助于将大数据任务的性能维持在高位,而且不会引起存储成本失控。

SSD的用量应遵从“90-10”的存储分层规则:成本和速度的最佳组合比例是:使用大约10%的SSD和90%的机械硬盘。这一策略让IT公司用仅增加10%成本的代价就能获得90%以上的性能提升。主内存和SSD的容量比例也遵从同样的规则。

由于SSD的性能价格比的提升速度超过传统磁盘(容量提升,价格降低),预计在不久的将来传统磁盘和SSD的配置比例会变为遵循80-20的规则。

IBM BLU Acceleration这类最新的纵列和内存数据库设施能利用SSD获得远超传统磁盘的性能,它们的设计能够有效发挥SSD这类“扁平化磁盘”的优势。

四、大数据分析和报告能力

虽然嵌入式分析工具已经可以利用报告和自动优化功能改善业务流程,但大数据再次改变了分析规则。例如,和传统上对单个客户进行主要行为分析洞察相比,大数据战略能为每个客户创建一个迭代和洞察分析线程,让公司能跟踪客户并更好地维持与所有客户的长期关系。

典型的大数据分析从业人员被称为数据科学家,和常规的IT主管不同,他们更可能同时担任CMO(营销总监)。然而,IT专业人员必须明白他们公司的大数据策略对数据科学家的工作产生的影响。

这意味着需要在自动化的报告和嵌入分析之外人工添加第三方审议内容:专设和松散耦合分析。支持专设查询的分析和统计工具是必要的软件前提。许多传统IT供应商以及云供应商——如IBM、Cognos和Birst——正在扩充这些功能。

五、企业中的Hadoop

Hadoop为数据密集型应用提供“紧贴着”MapReduce文件系统处理程序框架的分布式文件系统。此文件系统支持针对富文本数据的并行事务扩展,例如社交媒体数据。

许多IT公司通过在企业内创建自己的Hadoop版本来解决从Web获取Hadoop数据源的问题。然而,缺乏专业知识是一种挑战:精通这种发展中的Web数据管理框架的专业和艺术的IT管理人员犹如凤毛麟角。

组织开发他们自己的数据管理工具时应该留意,如IBM、Oracle和EMC的这些主要供应商,往往既提供专有产品用于访问Hadoop数据,也可进行定制开发,让IT公司不需要专门的数据归纳措施就能访问需要的数据。如果您决定搭建自己的数据平台,供应商也提供整合服务,使Hadoop更贴合现有IT资源来高效运作。

每个公司围绕大数据的相关决策都会有所不同。请记住,随着围绕大数据的技术演变,大数据战略也应当及时调整,与时俱进。

原文链接:数据中心基础设施是大数据战略成败的关键 (责编/魏伟)

以“ 云计算大数据 推动智慧中国 ”为主题的 第六届中国云计算大会 将于5月20-23日在北京国家会议中心隆重举办。产业观察、技术培训、主题论坛、行业研讨,内容丰富,干货十足。 需要购买的朋友,请抓住这最后的机会,点击报名!

测测:用百度Clouda占卜移动互联网 微软的无奈:或允许Android应用运行于Windows平台 如何选择适合自己的编程语言 Google Now新增语音命令:生活简单一点,让爱更近一点 千万美金收购案:GetJar是一家怎样的公司 传苹果与时代华纳等公司合作,推新一代Apple TV 追本溯源 解析“大数据生态环境”发展现状 为Hadoop存储层增加对OpenStack Swift的支持 详解并行逻辑回归 在AWS上使用GPU实现分布式神经网络 大数据时代,看“小数据”如何支持决策 22人15天研发 微信红包系统发起“珍珠港偷袭”的背后 开发产品防脱节,DevOps来帮忙 手游福音:官方中文版Unity用户手册免费发布 支持多平台!2D和3D游戏引擎Godot宣布开源 从Google备份互联网看“数据安全” NBA全明星周末,数据打造下的辉煌盛事 2014情人节没活动?我们来帮你! Windows 8授权销售已超过2亿份 速度不及Win 7 IDC:2013年第四季度Windows Phone出货量大幅增长 深入思考SDN的核心本质:从SDN=OpenFlow回到软件定义网络 谷歌、VMware在Chromebooks上双赢了,微软你怎么看? Tizen真要来了!又有15家IT大佬成帮会成员 研发周报:开源世界应该致谢的五家公司 Square、LinkedIn、Google... 看国外巨头如何“绑架”用户? 一周消息树:5.5寸屏幕的iPhone 6概念机来袭、索契冬奥会开幕式现Bug 一周热点:美国大学生数学建模分析,Hadoop不是万能,探访雅虎数据中心 Google Play services 4.2全球推送,完全支持Chromecast! 移动周报:最快的Web开发IDE——HBuilder Google Glass是空有噱头还是实用品? 服务好“最后一公里”,高效CDN架构经验 delphi中怎样引用一个数据集? 如何用java实现word文档(含图片和表格等)转换成html文件 vb中能不能再过程中定义全局的数组 当在TREEVIEW里CLICK某项时,想让LISTVIEW里的相应ITEM变成SELECTED(变为兰色选中)。 windows2000 professional 怎么屏蔽CTR+ALT+DEL 或任务管理器 成都的java程序员,请大家联系起来! 师傅出门了,还望哪位大侠能够指点一二..300分酬谢谢//小新的徒弟敬. 怎样创建一个弹出式子窗口在显示时父窗口同时为激活状态(标题栏为蓝色)? 急!请问如何在java的GUI界面上,点击一按钮,来运行一批处理文件?? 一个小问题!(不好意思问!) Dim cReg As New cRegistry 该引用哪个库(库的全名) 学习遇到的难题 特殊按钮 我想开发一个三层结构的进销存软件问题? 怦怦运气,看看有没有人知道,近来看看 请问有那个网站有关于ORACLE的入门书籍下载. 非常不错的delphi网站 我有一个问题想问问大家!!!有分送哟。 高价收购! 谁可以给我TSR完整的例程...(要有注释喔) 现在用的控件都是D版的,以后怎么注册软件啊? 请过了网络设计师的兄弟帮帮忙! 在C中,找一个字符或字符串在另外一个长字符串(64K)最后出现的位置,怎么实现最高效呢? 用 DHCP 分配了二个网段的IP地址。 “斑竹”在吗?象是只有你能够解决了!!!(附程序及错误代码!!!) 请问哪位仁兄知道SYGATE4.2 build 803的注册码? 如何在表单中阻止双引号??? 大虾们,帮我看看,这个错误和警告是什么原因造成的? 帮帮我吧 关于B/S报表? 怎样设置msflexgrid某一列的颜色? 用 DHCP 分配了二个网段的IP。 怎么能抓到密码? 在运行时想改变一个label的字体怎么改变,有没有做过的,label的属性在设计时是可以改的 fatal error C1010 找一个和VB的属性区一样的代码,控件或类库均可 如何调用在不同的窗体里自定义的过程 一个技术探讨问题,我想知道象在WORD等软件中插入图形或图象后,还能把它选择,并移动是怎样实现的? 请问:在另一个.asp文件中如何调用相同的变量? WEB初级应用问题 DIALOGBAR问题 请想报考明年的网络设计师的朋友进来聊聊 Oracle面向对象特征讨论,请进! 我学会VISUAL C++ 到底要多少时间 线程调试问题 大家一起进来讨论oracle和sql server的日志哦 请指教如果设置服务器端COM组件的权限,使终端可以访问到?分数好说啦,急,高手快帮忙! 如何把程序嵌入到widows Expolore 中? 今天心情特好!散分 在vc下怎样调出window下的“打开方式”对话框,他是类还是控件!请高手指点! 一个门外汉的问题~~~~ 圆形的面积公式怎么算,谢谢 某服装公司用公式C=10+12n计算成本费.C表示成本费,n表示做一件服装所需的时间.试根据公式填写下来n(时) 2 3.5 4.2C(元) () () () 一件衣服原价200元,如果按八折出售,这件衣服现价多少元? 环形面积公式怎么算. 服装成本如何计算?哪位大虾知道... 数的整除题在37的后面补上两个数字,它就能被3、5、7整除.这个四位数是多少?顺便问一下,能被7整除的数有何特征? 跪地急求小学数学五年级上下册网络版教科书或者关于数的整除,像:约数,倍数,质数,合数一类的.以及概念 如何计算服装的成本? 一件衣服打8折出售,现价是原价的百分之几? 判断题:所有的质数中,只有2是偶数,其它都是奇数.( )急…… 有关自然数质数的.有自然数1,2,3,4……,去掉其中三个数,剩下的数的平均数是19又9分之8,已知去掉的数有两个质数,问这两个质数的最大的和是多少?(最好有解题过程), 一件衣服打八折销售的价格是80元,那么原价是 自然数中,任何一个奇数相邻的两个数都是( );除0以外与任何一个偶数相邻的两个数都是() 自然数C是最小的质数,且a,C的和也是质数,数字a最小是多少? 好评 过程 一件衣服打8折出售,就是这件衣服按原价的80%好评 过程 一件衣服打8折出售,就是这件衣服按原价的80%出售,现价比原价降低了( )%多少出售. 13.6%去掉百分号,这个数就( ) 1;扩大10倍 2;扩大100倍 4;缩小100倍 若x的平方+x-2=0,则x的三次方+2x的平方-x+2007= 已知X的平方+2X-1=0,则2X的立方+5X的平方-2008=? 二分之根号二等于二的几次幂? 若x的平方+x-1=0,则x的立方+2x的平方+2008=? 所有偶数(0除外)的最大公因数是( ),所有奇数的最大公因数是( ). 2的a次幂等于根号2/2,求a 100块的东西,我要达到30%的利润,要卖多少钱,求公式,谢谢! 所有的偶数(0除外)最大的公因数是( ),所有奇数的最大公因数是( ). 若(1+根号2)的四次幂=a+b根号二,则a+b等于 百分之30去掉百分号后,原数就缩小100倍.这句话对吗? 所以非零的自然数的公因数是();所以偶数(0除外)的最大公因数是();所有奇数的最大公因数是().直接告诉每个方框的答案, 由 平行四边形 而推导出 圆的公式也就是说 剪拼成平行四边形 看到平行四边形而推出 圆面积和周长的公式{只推出面积或周长其中一个的话】我也给分 大哥大姐们快点 吧我要睡觉~ 服装店有一套衣服,第一件按原价出售,没人来买,第二天大八五折,仍没人来买;第三天再降价200元,终于售出.已知售出的价格恰好是原价的60%,问原价是多少? 一套衣服打八折出售,比原价少卖了120元,卖了多少元要有算式,不要二元一次方程 圆的周长公式是怎么推导出来的? 请问“一个数,如果只有1和它本身两个因数,这样的数叫质数”一句中的只有1和它本身两个因数是什么意思还有还有 “一个数,如果除了1和它本身还有别的因数,这样的数叫做合数.”除了1和它 一套衣服打八折出售后,比原价少卖了120元,求原价 两个奇数的和是偶数,积是奇数 这是判断题 把1.5%扩大100倍后是() 把85%的百分号去掉,结果() A不变 B 缩小到原来的100分之1 C 150一本书看了40%,表示()占()的40%一件毛衣中,羊毛占91.3%,羊绒8.7%,91.3%表示()占总含量的91 写一个奇数和偶数,使它们的最大公因数是1写出一个素数和合数,是它们的最大公因数是1写出两个偶数,是它们最大的公因数是其中较小的数写出两个偶数,是它们的最大公因数是其中较小的数 两个偶数的和或差一定是奇数.判断题、是对是错? 在38的后面添加百分号,结果()A不变 B扩大100倍 C缩小100倍 一件衣服打4折,现价160元.这件衣服降了多少元?求算式 列方程并求出解.一件衣服现价182元,降价X元,原价268元.列算式 数的整除小学六年级的竞赛题 一件衣服原价45元,现价36元,这件衣服打几折 x的平方-x-1=0 求 x的立方-2x的平方+3的值 在50%后面去掉百分号,这个数就()A扩大100倍 B缩小100倍 C大小不变 谁能给我六年级最难的应用题要很难很难的~ x的平方+x+1=0,求x的立方+2x的平方+3的值 把17.5%的百分号去掉,这个数就扩大到原来的100倍是对的吗 六年级较难应用题甲乙丙三人共有人民币168元,第一次甲拿出与乙相同的钱是给乙,第二次乙拿出与丙相同的钱是给丙,第三次丙拿出与甲相同的钱给甲,这样三人钱数相等,原来甲比乙多多少元? 已知x的平方+x+1=0,则x的立方+2x的平方+2x+3的值是 把15%的百分号去掉,这个数就扩大100倍这道题是对还是错.错的并说明理由. 若-(n+2)x的n次方y的平方z是一个5次单项式,则n=____,这个单项式 的系数是______. 把百分号去掉,是缩小了还是扩大了 把3.8%的百分号去掉,这个数比原数( )A扩大2倍 B扩大6倍 C扩大100倍 D大小不变怎么解 写出一个奇数和偶数使它们的最大公因数大于1 求服装制版基础计算公式我刚学的,想求原型板的如:袖窿深、肩宽、袖肥、上围(袖窿深)、背长(腰节)、领围…等等的公式. 15.5 %去掉百分号,这个数就是A扩大100倍B缩小100倍C扩10大倍 写出一个奇数和一个偶数,使它们的最大公因数是1,2和3对吗? 三次根号6/三次根号2*六次根号3 用幂的形式 服装T恤单耗计算公式丝光棉面料的我想把 我计算单耗的方式向您请教下.175码的后中长为73厘米,胸围为55厘米,袖长(短袖)24厘米,1/2袖口17.5厘米,夹围(袖笼)为23.6.门幅为130,克重为155克/平 如果x的平方加x=1 求x的立方+2x平方+2006的值
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn