说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

2013云计算深入实践

HTML文档下载 WORD文档下载 PDF文档下载
从热捧、恐惧到成熟,云计算的价值和机会已经被广泛认同。在第四届云计算大会上,中国工程院院士李德毅以“超越“虚拟的美丽”为题分享了云计算的机遇。在第五届云计算大会上,李院士也将就云计算话题做主题演讲。

云计算正走向成熟,大数据正在发展

在经历了对云计算的认识以后,已经成为当前信息通信行业的主旋律。我们可以用维基百科看一看当前对三个重要技术概念的理解。一个是曾经人们跟云计算混淆不清的网格计算,一个是正在发展的大数据,我们来看一看用维基百科访问网格计算词条,云计算这个词条和大数据这个词条,看看全世界是怎么关注的。网格计算2008年4月出现的全人类关注高峰达到69573次。云计算在2011年12月达到了最高的点击率751383次。大数据在浏览次数上已经体现不出来了,因为它刚刚兴起,因此我们必须改变纵坐标的测度。大数据正在发展,在2012年3月达到58888次,这就是说全世界对这三个重要概念的关注点,也就是我们的群体行为。如果用Gartner技术成熟度曲线(Gartner Hype Cycle)来分析,这个曲线把有些技术叫做成熟技术,有些技术期待着成熟技术,被认为是2—5年就可以采用的技术。而大数据正处于上升期,云计算正处于兴旺期,网格计算没有再出现。这项技术从兴起到兴旺到走向成熟,都可以用客观规律来表示,从这个观点也支撑了我的这个标题,就是从兴起到兴旺。

中国电子学会云计算专家委员会主任委员、中国工程院院士 李德毅中国电子学会云计算专家委员会主任委员、中国工程院院士 李德毅

为什么要提到大数据呢?我们看一看世界人类对物质和能量的认识所形成的数据量的变化。在1993年的时候,大量的信息是以虚拟状态存在的,也就是说人类的信息大量还是模拟化还没有数字化。到2000年,数字化成分逐渐增加。到2007年,人类的信息量几乎90%以上都实行了数字化。在这个情况之下,出现了大数据。大数据英文Big Data,这个层面告诉我们一个认识,他讲是PB时代的数据、PB时代的科学,因此我们有必要理解大数据跟云计算的关系。我们大家都比较熟悉的是数据库或者数据仓库技术,我们曾经用了很长很长时间的数据库、数据仓库在大数据面前遇到什么挑战呢?我们可以看一看。首先,我们从数据量来看,一般来说,数据库或者数据仓库都在GB这个量级,或者到TB量级,而大数据是在TB或者PB量级,这是数据量的不同。严格的讲,这个量还不是决定问题的根本。更重要的是,当我们把所有的信息放到数据仓库的时候,数据要求是比较高的质量、比较干净的数据。而我们实际生活中遇到的数据,多数都是有噪声的浑沌的状态,放在数据库中难以成熟。

在数据库和数据仓库当中,我们的数据模型有一个很强的结构,有一个关于数据带数的支撑,而大数据常常是非结构的,大数据中人们常常关注的是视频、声音、图片数据,而不是纯数据。如果我们把数据放进数据库里面的话,我们需要一个数据池,因此我们在研究数据管理的时候,需要顶层设计。而现在我们不可能挖一个池把数据装进去,我们面临的是一个海量数据,我们面临的是要在海里捞鱼。在数据库技术中,我们面临的是一个交易的操作,如果是一个TB数据量的话,做一个交易大概要50个小时才能完成,这种技术比较重交易。而大数据时代,我们更关心的是人与数据的交互。对于数据库而言,我们经常希望得到一个千人一面的、比较理想的确定点,而对于大数据来说,我们常常需要一个不确定的点,一个满意的点,这是给传统的数据库技术提出的挑战。

在这样的情况之下,运营商们聚焦云计算,开始注重数据中心的大数据处理问题,无论是邮件服务中心、客户关系管理中心、计算能力多租赁中心、搜索服务中心、数据管理中心、流媒体服务中心、位置服务中心,都必须认真考虑在特定服务环境下的大数据处理问题。

“我们”比“我”更聪明

在云计算时代,对我们软件开发的方式也提出了新的挑战,我们曾经知道,一个大型的软件公司例如微软,在互联网尤其是社交网络的环境下,人们已经用一个社区、社团来开发。例如,Top Cooed就是这样一个社区,这个社区的骨干成员可以达到40万,即使像微软这样的公司,程序员达到万人以上已经很难以维持,一个40万人的软件开发社团告诉我们,这样的社团将是一个社区,而不是一个公司。今后的软件开发,除了公司之外,还有一个小众,但是在这个小众里面可以有几十万的开发者。Top Cooed在全世界软件开发社区里做三方面的工作。第一,把软件碎片化,进行软件的编码比赛,互评代码、系统评测,这占了Top Cooed社区三分之一的工作量。如果生活中有许多程序需要开发的话,我们可以把这个开发任务以外包的形式推到社会上,让社会上的人进行竞标提交成果,在完成兼职开发过程中,我们的软件开发者们,就拿到了相应的报酬,有很多软件开发工程师以后将不在公司工作,而是在社区兼职工作。我在浙江大学就认识这样一个学生,他做Top Cooed的软件兼职开发员,不但养活了自己,而且还养活了他的父母。这种开发社区,还为各个公司寻找人才,成为一个很重要的人才源。猎头们在这样一个社区里面,展示各个企业的状况,进行员工的招聘。所以说,云计算使得软件作为平台的开发更加的群体化、社会化,形成新的开发机构。

众包概念,在互联网上诞生以后已经渗入社会的各个方面,使得人人都可以是软件开发者、编辑者、创作者、记者。因此,云计算告诉我们一个真理,在云计算形成各式各样的社团、小众或者由小众组成的大众,他们之间的深度合作使我们得到一个真理,就是“我们”比“我”更聪明。云计算在中国,已经走过了理念清醒、操作模糊、八仙过海、云里雾里的一段路程。但是,现在已经取得了越来越多的共识,被国家列入战略性新兴产业,走上了云计算的应用之路。所以,我们第四届中国云计算大会就是以示范引领创新实践作为一个口号。

人们的共识是什么呢?信息技术和信息服务可以实现社会化、集约化和专业化,网络变得丰富、边缘变得简单,终端产品丰富多样,交互更加智能。今后,将不再需要各部门建自己专门的信息系统,让信息服务成为全社会的公共基础设施。在这一点上,已经没有什么不同的声音了。

云计算让我们新兴产业链发生了很大的变化,那种曾经以产品为中心的产业链分工转变为以服务为中心的利益攸关方的相互渗透,他们之间相互渗透、频繁交互,协商共赢,华为公开提出来“乐于被集成”,他们是符合趋势的。

安全不再是云计算的拦路虎

从互联网诞生开始,安全问题就没有消除过。以前敏感的数据大量分散、重复、位于网络边缘,难以管理,造成了泄露的风险。通过服务的规模化、集约化和专业化,数据和信息高度集中存放于数据中心,改变了端设备上安全难以管控的格局。

安全本身作为一种服务,提供给所有的端设备客户,改变了人人打补丁、个个杀病毒的状况。安全的重心由端设备安全向数据中心、计算中心、服务中心的安全转移,安全的手段由封堵和隔离向身份认证和信息管理转移。

人们普遍关心的云安全问题更多的是个人隐私的安全,实际上是服务方与被服务方之间的信任与信任管理的问题。特别要指出的是,大众参与所形成的由下而上的民主力量是建立服务信誉的最基本、最重要的保证。

移动互联网云计算来的更快

移动互联网已经成为一个能够分享信息、沟通文化,乃至形成群体智能的开放的社交网络。人与人之间的关联、人心的关联、社群的力量是伟大的创造的力量,支撑这一力量的云计算可以实现分享、交互、涌现出群体智能,超出了图灵机范畴,今年是图灵先生一百周年纪念,我们在中国进行了图灵年活动,来回顾图灵的历史贡献,研究云计算的科学模型。如果说在计算机时代,图灵机给了一个形而上的理论的话,那今天他的形而上的科学模型是什么呢?如果说数据库和关系数据库给了我们一个数据池的实践的话,大数据的处理的形而上的问题是什么呢?这就是我们关心的问题。移动互联网的实时性、交互性、低成本、个性化和位置感知能力,形成了迅速增长的移动用户的服务。

汽车等移动设备装载各种各样地理信息导航系统并定期更新地理软件的时代将要成为历史,这些地理信息系统将来可以通过服务实现实时的导航。一个个曾经孤立的地理信息烟囱踏上了飞天之路,在动荡演化中聚合为跨部门、跨领域、跨系统的位置服务中心,实现了社会化、专业化和集约化的位置服务。

位置服务渴望成为移动互联网的标配,现在我们手机上一个照相机、一个GPS已经成为标配。如果用云计算的观念来看,在云中心有数据中心和各种各样的电子地图,有各种各样的电子导航服务中心,还有以位置服务为基础的衍生服务,例如旅游服务、交友服务等等。一个用户拿着手机,拿着iPad就可以进行位置的查询,或者用照相机照一下天安门、纪念碑,就可以听到对纪念碑的描述,从而形成云旅游、云导航。如果我们的汽车、飞机都联网的话,那么汽车、飞机任何时候的实时状态就可以大致的在地面上得到很好的观察和控制。

位置服务中心是人们感兴趣的一个实践应用的方向,我们觉得无论哪一个数据中心,包括位置服务中心不再拼服务器集群的规模,不是说五万台服务器的集装箱就伟大,五千台服务器就不伟大,也不是把一百万台数据地图服务器集中起来就叫做云计算。位置服务中心的架构是要提供服务的种类、规模和能力表征的。我们提出了对位置服务中心衡量指标的五个外在指标:

  • 电力消耗及其弹性使用情况
  • 带宽支持及其动态使用情况
  • 位置服务覆盖的范围和粒度
  • 服务注册的用户数量及在线微支付能力
  • 位置衍生服务能力

位置服务中心需要在实践上连续一年365天每天24小时要有99.99%的可靠性,城乡之间要跨接、数据常新,要保持实时更新状态,精确要多样化,要以快速的报知和错误示警功能。国内有这样的云计算服务中心吗?我国目前只能满足简单的地理要素查询,数据不健全、分享难,在云计算大潮下,这些小而散的地理信息产品,通过动荡、分化和改组将会演化成联邦式的地理信息服务中心,提供集中的面向交通、娱乐、教育、医疗等各个不同领域、不同粒度的位置服务,成为社会化、集约化和专业化的社会基础设施。我们每一个个体最基本的问题是你在哪里?你到哪里去?如果这个问题能够实现社会服务的话,将会改变整个人类的生存状态。

20世纪过去了,美国在回忆20世纪的时候,提出了两个人类最伟大的发明。第一个是互联网,以及互联网今天的发展。第二个是空间导航卫星。云计算正在把第一个发明和第二个发明合在一起,我国的北斗卫星导航系统已经有13颗在轨卫星,定位导航和数字服务性能不断提高,走上了突出区域、面向世界、富有特色的发展道路,呈现全面推广与产业化的趋势。

云计算催生地理信息实时性和个性化的互联网服务,成为拉动国内经济的新增长点,有望到2020年形成万亿元规模的年产值,位置服务的自主创新,将成就我们的飞天之梦。我们可以想一想,未来的汽车怎么样改变我们的生活。如果我们把智能驾驶看作是网络导航加上自主驾驶加上人工干预的话,Google自动驾驶汽车已经在马路上运行了,已经拿到了驾照,如果人工干预优先权高过自主驾驶,在正常情况下,只要有地理位置导航系统,就可以确保一个车子在特定的线上做自主驾驶。经信委组织的一个重大计划,有6个车队分别从北京跑到了天津,从长沙跑到了武汉。现在的问题是,迫切的呼唤云计算对这样的自主驾驶实行云导航,需要位置服务中心的建立。

宽带不宽

我国光纤入户难,桌面互联网平均网速是1.4mbps,远低于世界平均水平,排第90名,手机网民们把它叫“龟速”。市场被垄断,监管很无力。骨干网、接入网、网站和服务中心的布局、安全检查等因素造成了多方面的制约,从接入网到老百姓自己家里的台面,我们把它叫做“最后一公里”,还有人说接入网和骨干网之间不匹配,又是一公里,还有网站的安全检查又是一公里,因此,我们期盼着宽带中国,我们期盼着国家的20兆在城市,4兆在农村,我们期盼着WiFi放开。世界上的科学家已经创造了186Gbps的超高速网,我们的移动通信获得2011年国家发明一等奖,宽带不宽总体来看不是技术问题。

云计算代表了先进生产力的发展方向,是构建互联网的基础,具有可持续发展的能力,成为国家战略性新兴产业,这一点已经形成了共识。发改委、工信部政策发布的多个“十二五”规划都强调了云计算,明确提出了云计算创新发展工程。2011年底,政府拨款15亿元作为云计算发展基金支持互联网企业,我们认为政府和市场是云计算发展中的两只手,要相互作用,但是政府最好不要替代市场。政府的作用主要是引导,是服务,引导主要体现在导向、规划、标准、调节和激励这十个字上。服务主要体现在管理、环境、政策这六个字上。

我们觉得政府要加强云计算中的安全和信任要靠技术,但是三分技术、七分管理,更要靠监管。我们国家有一个重要的《国家科技进步法》,2007年进行了修改,其中很多政策是对先进科技的支持,现在有人说要再制定云计算的国家法律,我个人认为应该制定《国家科技进步法》的配套政策支持云计算,例如微支付、频繁支付和后支付这些财政政策以及税收政策。昨天,《云计算与智慧城市发展论坛》讨论过程当中,新加坡提出了支持企业利用带宽实行云计算、减少税收,我们可以借鉴。

强调创新实践、强调特色服务、强调本土化服务,实现自主可控。要创建好云计算的生态环境,吸引人才和资金。要规划国家基础信息资源的战略布局,防止各省各市一哄而上无特色。政府要为云计算实现的社会民生服务买单,而不是为购买云计算数据中心的设备买单。云计算的行业性示范试点固然重要,但是互联网本身是不太强调地域性的,因此,比地域性示范试点更为重要的,应该是行业示范。我建议,在五个城市试点的基础上,再部署五个行业示范试点,例如位置云、教育云、健康云、公共安全云、社保云。这五个行业反映我们民生最关心的东西,而且都可以找到牵头单位,而且都是跨行业、跨部门的,如果把这五个行业试点搞起来的话,中国的云计算在五个城市试点基础之上会互相促进,相得益彰。

建议工信部牵头解决宽带瓶颈问题,工信部要树立“先有路,后有车”,不能借口没有车不修路,不能借口其他环节导致的瓶颈。对于我们移动通信而言,我们要尽快研究不同体制下的移动通信带宽共享问题,老百姓的手机无论是G网、W网、还是C网,都要能接入。另外,宽带不宽失信,运营商要赔偿,政府要监督。试点城市应该率先实现光纤到户,普及“光猫”,建立公平竞争的市场环境。试点城市要率先实现三网融合。

建议云计算五个试点城市的宽带战略目标定为100兆,重点城域1Gbps,全城WiFi覆盖。重点地区,像天安门、国家会议中心这里面的楼群应该是1G,全部用WiFi,要让试点城市市民如同享受北京公交一样享受宽带,试点城市确保每户1TB免费存储。作为一个家庭,1TB怎么用,要给出榜样和示范,家庭是城市的细胞,是个人生存的最小空间,只有智慧家庭,才有智慧城市。

2013年云计算大会 五大特点

以全新的国际视野,洞悉全球云计算发展趋势;从应用出发,探讨云计算与大数据、云计算与移动互联网、云安全及云计算行业应用等焦点话题的“ 第五届中国云计算大会”将于2013年6月5-7日在北京国家会议中心隆重举行。中国工程院院士李德毅将在大会上做主题演讲,敬请期待。

据悉,在前四届大会成功经验的基础上,为了更好地把握云计算发展趋势,交流云计算发展成果,促进云计算的应用,在国家发展和改革委员会、工业和信息化部、北京市政府、中国科学技术协会的指导下,由中国电子学会主办,中国电子学会云计算专家委员会及中国云计算技术与产业联盟承办,CSDN与《程序员》杂志协办的“第五届中国云计算大会”历时3天,涵盖“国际性、行业性、社交性、全面性及专业性”等5大特性。20场专业论坛及行业创新研讨会内容精彩纷呈、引人入胜,预计参会者将大大超过上一届的8000多人次。

随着会议的临近,各界人士可以通过 大会官方网站做进一步了解。

更多内容详见: 第五届中国云计算大会;欢迎关注 @CSDN云计算,并参加关键字#第五届中国云计算大会#讨论。

浴火重生:OpenFeint创始人推开源平台OpenKit 紧随AWS数据仓库服务 Rackspace力鼎Cloudant 创业者谈:畏惧失败,但也要拥抱失败 谷歌赢得一场战斗 苹果能否赢得战争? 走进大学校园:是什么让学生成为独立开发者? 移动周报:为什么说独立开发者才是光明康途? MapFan eye:看日本地图导航应用的新玩法 数据会被清空:部分三星、魅族手机存安全漏洞 IE10简化文件访问 支持FileReader API 从MySQL迁移到MariaSQL Wikipedia力求开放 奥巴马筹款网站的制作过程 国内芯片厂商发力4G 新岸线2013年将推LTE方案 CMDN Club 23期:开放平台和O2O移动产品开发 花旗调低Apple股票评级 不信iPhone5会卖得好 2012年Linux Journal读者选择奖结果公布 百度云SiteApp:三步轻松创建移动网站 Twitter跨数据中心图片存储系统Blobstore解析 摩托罗拉携手中国移动发布Intel Inside智能机新锋丽i MT788 第五届“英特尔杯”全国大学生软件创新大赛圆满落幕 Appro推出液冷超级计算机 Dell:曾敦促微软WinRT放弃Windows品牌 IE10十大优点:渲染页面比Chrome快8% 法国电信:开放平台下的O2O移动产品怎么玩? 客如云创始人彭雷:寻找O2O“失落的半圆” 中国电信宋鹏飞:天翼开放平台的服务及架构解析 W3C小组宣布:HTML5标准制定完成 还记得DUQU吗?起因可能是Windows中存在了20多年的漏洞! API管理的五大规则 Google也节能:挖角美能源部Arun Majumdar博士 预测:云计算领域的5大变革 CTO俱乐部:移动信息化的创新实践及互联网创业 谁听到过bios这样的报警声 谁知道哪里可以下载vtk4.0软件吗? 斑竹:为什么我提问的帖子没了,难道被删了吗?http://expert.csdn.net/Expert/topic/1323/1323618.xml?temp=.942135 请教?题目:用名为min的函数模板计算两个参数的最小值,用一对整形、字符和浮点数测试所编程序! C++builder6 下载 在线等待有关TurboC4.3的安装问题(还有D版VC的安装) 如何通过EJB删除数据库中的一行记录? 请帮忙 远程桌面共享的密码在注册表中的位置???急!!! 推荐软件:WinReplace批量文件内容替换工具 请推荐一个Java Decompiler 怎样用VB 检测EXCEL是否运行出 (菜鸟级100分) 高分求购 数据库中的OLE字段的读取问题。 研考快了,有几到题莫名其妙,求帮助! 求助大虾??????? 帮忙!! 如何获得当前程序的完整路径和文件名? 高分请教:resin2.1.6+sql2000下,jsp提取的字段显示均为乱码 Ftpcommand ? 如何获取最小化按钮消息?PreTranslateMessage(MSG* pMsg)如何处理? 请教高手——图片如何转换成视频? 河北的高程什么时间报名?什么时间考呀? 等待在线 JS文件打开乱码,如何看到其真实内容? 急,在线等待,90获取如何让Collection集合内对象的顺序改变!!! 在那里可以找到浪潮英信服务器 的声卡和显卡的驱动程序? 一个文学性网页,有砖头尽量扔过来。散分!!! 在jsp中连接oracle报错,请高手帮我分析原因(100分) 很丢脸的,兄弟们来帮我一下哦,? 我的困惑 谁知道哪里可以下载vtk4.0吗? 两个关于日期的问题,请大家帮帮手. #include windows.h 的问题 OS 很多近期帖子打不开,WHAT CAN I DO? 求regionMatches的使用实例! VS.net的安装错误问题 TOP托普万岁! 河北的高程什么时间报名?什么时间考2003年呀? 等待在线 java/swing/jtable的强烈问题 在Linux中如何配多个ip地址? 免费给你www.***.net www.***.com 快来每人有分得 大家不帮忙我就死定了!!!(来者有分,解决问题再送200!) java/swing/jtable的强烈问题 我为什么看不到我自己发的问题? 向高手求助!如何查找指定文件? 授权问题! 怎样解决向右展开的菜单(层)被select下拉框遮盖的问题!!!(以前的帖子打不开了) 向高手求助!如何查找指定文件? 怎么在JAVA中实现只有让一个子类才能访问它父类的属性,用private,还是protected? 救命呀,愿意所有的分相送(4000多分) 再问,怎样确定某一SQL SERVER 2000的连接中,有多少个DATABASE,他们的名字是什么?? 松狮犬医院洗澡后暴亡 主人打官司索赔杭州一名女教师被骗102万元 骗子称男子包养弟弟前女友 欲与妻子三人同床男子因女儿遭邻居诅咒将其一家四口杀害男子用自家房门钥匙偷开警车 被行政拘爱犬洗澡后死亡 杭州狗主为起诉宠物医嘉兴3名90后游客钱塘江观潮遭潮水卷女子老公被警察带走 骗子称有门路骗钱宁波一名劫匪路遇强悍姑娘 抢劫不成被宁波老板投机买被拍卖房子 违约承担差男子深夜摸进情侣家摸女子大腿 慌乱中月薪两千的年轻厨师装成高富帅专偷奢侈妙龄女以色谋财 为向同事借巨款多次献女子如厕时尖叫 过路男子疑发生状况闯慈溪工人排污井下险遇难 一人报警及时奉化一辆货车撞倒电瓶车 20多人抬起杭州一名大伯无意开错一把锁 结果好像小伙背着吉他装学生 碰瓷计划被识破骗子骗完大一女生想骗其爸爸 连环骗术女子向老公泼汽油 警方以涉嫌放火罪将绍兴市民发现巨大甲虫 头上长有长犄角你好,嫦娥,广寒宫,陪着你,慢慢变老当你仰望星空,可曾想起我?影视打望【马斯克:特斯拉将在华建厂女篮联赛浙江位居第四宁海:帮你预约一份工坚持维护二战成果【中兴破局:不是互联网公司富阳农合行启动博爱救助金紧扣强军目标 回应官兵关切“最强大脑”集结号安倍新花招休想篡改历史皮尔洛当选意甲最佳【微软收购诺基亚接近尾声:新增贷款近半投向小微企业开心事:返乡路上很温暖农村“快递”多期盼乌克兰总统解散政府沪深新股现涨停潮我省建立专职工资谈判队
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘