说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

华为王丰:FusionCube打造下一代融合一体机

HTML文档下载 WORD文档下载 PDF文档下载
深耕电信市场让华为积累了从系统软件到服务器等硬件的技术积累,随着加入OpenStack基金会,深度参与Apache Hadoop社区,一个更从容、更自信、更开放的华为正在走来。

以往,华为很少公开场合接受媒体采访。同时,尽管华为是开源技术的最大受益者之一,但却很少看到华为的工程师参与贡献社区、分享心得。不过,这种状况正在渐渐改变。截至到2012年底,华为在Apache Hadoop社区中贡献度排名第7。同年,加入OpenStack基金会,提出基于OpenStack的FusionCloud云计算解决方案。

FusionCube在FusionCloud云计算解决方案中占据了重要地位。在第五届云计算大会之际,CSDN专访了华为IT产品线云计算领域FusionCube产品总监王丰。

王丰告诉CSDN:“华为的工程师不善于演讲和跟外界打交道,所以给大家造成了比较封闭的印象。另外,以前华为专注在电信行业,这个圈子也比较封闭。现在华为正在作出改变。我们会参与重要的开源社区和项目,华为在全球Hadoop生态圈的贡献度排名第七了(基于2012年年底的统计)。另外,华为在Openstack社区也非常活跃,虽然起步不是最早,但是相信通过华为不断的努力,给大家带来一些价值。”

图: FusionCube产品总监 王丰

王丰透露,他去过多次硅谷,对Google、雅虎那里开源氛围印象深刻。他表示,很感谢百度、腾讯、淘宝他们在国内也做了很多类似的活动,帮助打造开源的圈子,如果国内企业也积极参与,我们能把开源做好。

用实力拥抱开源

华为FusionCloud云计算解决方案三大产品线包括,FusionCube、FusionSphere和FusionAccess。FusionSphere是华为云操作系统,整合了OpenStack开源技术。一方面,这让这三大产品线可以迅速和兼容OpenStack的云产品对接,但同时也让竟品轻松与华为的产品对接,这意味着用户可以自由的选择供应商。王丰表示:“选择FusionCube确实可以解决lock-in。Openstack的架构非常好,华为把自己的存储、服务器、虚拟化产品做开放式接入。从客户角度来看,不需要像以前那样全套购买华为的产品,因为通过OpenStack,第三方软件可以通过调用OpenStack API提供服务。OpenStack又通过各个模块调用华为或友商提供的存储、网络、虚拟化等能力。比如,用户可以同时使用如VMware的Hypervisor和华为的Hypervisor。这样,在Openstack的架构里,华为只是其中一部分的能力提供方,客户不会被一家所绑定。”

不过,是什么原因让华为做出全面拥抱OpenStack的选择,开放自己产品的接口给业界?“我们不担心(因为开放而失去用户),因为华为做的层次不一样。如果我们是专门做云管理的公司,可能会担心。因为有了OpenStack以后,对云管理的软件影响就比较大。对华为而言,不存在这种担心,华为的产品主要集中在基础设施层面。有了Openstack后,会有更多的用户来用华为的产品,我们会更开心的”,王丰告诉CSDN,“任何产品都必须有核心竞争力。例如,华为的分布式存储性能非常强,并不是普通的开源软件所能替代的。我们对此很有信心。”

开源和开放的API不仅让用户免于lock-in,同时还能减少运维等维护复杂度,降低成本。“以运维为例,通过开放的API,用户可以选择第三方的工具或开源软件,这让企业在基础设施管理也不会被绑定。同时,企业能够灵活享受云化后带来的好处,降低云化之后带来的复杂性”,王丰告诉CSDN。

图:华为FusionCloud架构(图片来自华为官网)

CSDN注意到,在FusionCloud架构图上,除去OpenStack API以外,还有部分华为私有的API。对此,王丰表示:“这部分API主要服务于特定的企业,比如运营商。运营商有一些很特殊的要求,如一些北向的接口和运营系统要对接。另外,在一些大企业,他们自身的IT设施相当完善,华为要和这些IT系统对接。目前业界的趋势是,希望大家一起来按照公有的接口和统一的规则参与,但现实有些无奈,我们不得不提供很多私有的接口,这并不是华为的真正目的。”

真正的融合一体机FusionCube

FusionCube就是华为的实力的体现,不仅体现在它的能力,更体现在其开放的标准。在王丰看来,一体机的发展分为几个阶段。第一个阶段是把各种基础设施简单从物理层面集成在一起,通过虚拟化的软件管理。虚拟化出现后,用户的业务部署周期变长了。原本硬件直接安装,可能一两天就可以上线。现在因为要全部虚拟化,时间需要一周到两周。因此,业界出现了将虚拟化软件及管理软件预先安装的趋势,把硬件安装、软件安装、软件调试的过程提前进行,这是个阶段被称为集成一体机。相对于集成一体机,华为往前走了一步,推出的是融合一体机——FusionCube。

王丰将传统的集成一体机比喻成品牌PC,PC相对于DIY的电脑使用起来更简单,操作系统、应用软件都预置好。华为FusionCube就像Mac,在硬件层面从新设计和优化。”在FusionCube不到半米的机箱里,融合了计算、存储和网络。而在FusionCube里却看不见一个独立的交换机,你只能看到一个一个的刀片。刀片上集成了计算和存储。在FusionCube的后插板上有交换芯片,通过虚拟化技术把它们整合在一起。就像你将一台Mac买回家,看见的只有一个屏幕,而实际上这个屏幕背后藏着CPU、磁盘等。而给用户带来的价值就是简单,不需要复杂的连线,就像电视一样,插上电就用起来了。华为FusionCube也是这样,你不再需要把服务器与SAN连上线,只需要连接电源线这可以了。而普通的集成一体机里的服务器还是单独的服务器,存储还是单独的存储设备,交换机还是单独的交换机“,王丰表示。

去年9月,FusionCube正式亮相。经过半年多的市场考验,已经在运营商、院校和VDI项目中有所斩获。“FusionCube带来的直接价值是交付非常方便。运营商是华为传统的优势市场,比如浙江电信,使用FusionCube用于建立内部云平台,快速、简便的部署完成。在海外,英国电信BT也采用了FusionCube。在院校市场,上海海事大学使用FusionCube作为实验室的云平台”,王丰表示,“国内的运营商一般都用于自服务,对外公共服务还没有完全的展开。但是对于海外的运营商,他们更多用于共有云服务。BT提供对外的运营,即IT Hosting,为跨国企业提供虚机出租等服务。”

在全球,领先的公有云服务商AWS、Google追求基于低成本的通用架构,提供大规模业务支撑和符合需求的可用性。从这个角度看,FusionCube可能不适合大型互联网公司自建的系统。那么,BT为什么采用FusionCube呢?王丰告诉CSDN:”BT首先希望投资不要太大。如果按照传统方式建设共有云,有一个起步门槛。同时,传统的IT基础设施不支持横向的弹性扩展,比如IP SAN,购买一台能支持一百个虚机的SAN,很难迁移到另外一台能支持一千个虚机的SAN,这就导致初期投资浪费。FusionCube很好的满足这两点需求,它是积木式的,使用了分布式的存储。需要多少,就先采购多少,再需要,再往上加。FusionCube通过分布式技术和云计算技术,使的公有云的运营的门槛大大降低,同时让扩容变得非常简单和快速,就降低了运营商提供公有云服务的成本压力。”

正如王丰所说,华为FusionCloud重点在基础设施层,将中层中间件或PaaS层与应用层交由给合作伙伴提供,这其中数据仓库是非常典型的应用场景。“数据仓库在跨国企业、国内的世界百强企业中使用较多。从行业上看,金融行业的银行、证券使用较多,这些企业要做复杂的财务报表分析。以华为为例,销售人员销售每一单后,通过内部IT系统中录入底单,每天系统会记录许多单。在每年的1月1日,系统将把过去一年所有底单进行处理,根据财务报表的要求,把原始的报表转换成财务所需要的报表。另外,还需要通过第三方的独立审计机构的审计。整个处理过程要越快越好,通常这一过程时间都很长,可能需要十天半月都不止。如果使用FusionCube,原本需要十天才能完成,现在只需要一天。”

王丰告诉CSDN:“报表的输出非常复杂,要从多个纬度分析。比如,我现在负责FusionCube,首先看去年全年的销售。然后,看国内和海外的销售。在看海外市场里,亚太区是多少?欧洲区是多少?接下来还要细化,比如亚太区前三个月销售是多少?亏本的单是哪些?盈利的单是哪些?最后,我还会从不同行业垂直的分析,运营商销售了多少?企业销售了多少?大数据量、多维度,这就导致数据仓库的运算量非常大,并对存储节点与计算节点间的传输带宽、时延有近乎苛刻的要求。”

王丰举例说:假如有10T数据需要处理,这些数据将放在存储节点,数据仓库在计算节点上跑,要从存储节点调用数据。此后,计算节点可能会生成20-30T中间数据,这些中间数据需要写回到存储节点。而目前的IT技术架构不能很好的支撑这种超高IO吞吐的数据交互需求。存储节点和计算节点间目前带宽最高的连接方式是FC,FC交换机使用比较多的是8Gbps或16Gbps,这就导致计算和存储节点数据交换成为瓶颈。同时,计算节点之间也存在瓶颈,IP网络的时延也较大,10G网络的速率也无法满足需求。

目前,工业界成熟产品的接口带宽更新速度比较慢,只有高端存储才会使用InfiniBand这项技术。“华为在FusionCube里使用了InfiniBand接口,计算节点和存储节点间的交换速率提升到56Gbps,打破了接口上的瓶颈。未来,只要InfiniBand协议再升级,只要把FusionCube后面的板子换掉,就能提供更高的速率,不用等业界升级存储节点和计算节点之间的接口协议。InfiniBand交换协议已经比较成熟,但要在存储节点和计算节点之间普遍使用,还需要很长时间。华为在FusionCube中使用的InfiniBand协议是标准的,用户通过FusionCube降低了使用更高级的交换协议的门槛,”王丰表示。

另外,在FusionCube里大量使用了最新的PCIE SSD,这带来大幅性能提升。华为通过自研的算法提升了SSD的寿命和可靠性。

通过这三大技术,Fusion Storge分布式存储、InfiniBand、PCIE SSD,让FusionCube在数据仓库领域的性能非常强。“另外,无论是计算密集型,还是IO密集型的高性能计算,FusionCube都有非常好的表现,”王丰表示。

关于华为在SSD的技术实力,可以在年初的一则新闻中找到线索。百度南京数据中心在内,华为的SSD大量的在互联厂商中使用。“SSD正处在技术锻炼点阶段,目前只有比较有实力的企业,比如百度、Google、阿里、腾讯大规模的使用。这些互联网企业跳过了工控接口,直接深度享受SSD带来的性能提升。同时,基于自己应用的特点,去掉所有不必要的硬件,降低成本,通过GFS让原本不可靠的硬件在整体上变得高可靠。华为与互联网企业一起,通过我们技术促使SSD在企业的应用变得更简单”,王丰表示:“在FusionCube中,单块PCIE插卡能够支持2.4T容量的SSD。华为将与互联网企业合作获得的经验,应用到FusionCube中,帮助企业享受SSD带来的价值,降低使用SSD的技术门槛。”

写在最后

与王丰的聊天过程中,他讲述了在硅谷,在Google、雅虎的经历,他很欣赏这些公司的开放精神。今年9月,在 2013华为云计算大会(HCC 2013)上,将看到华为更多的惊喜。(文/ 包研  审校/仲浩) 

关注@CSDN云计算微博参与讨论,了解更多云信息。

令人意外:前Windows部门总裁将去哈佛教书 舒迅:产品经理必读的九步法 独家爆料:Facebook移动客户端开发揭秘 一个独立开发者的自白:我如何在一年赚得60万美元 Dropbox收购Snapjoy 意欲打造媒体中心 2012世界“末日”:有经过正确的分析吗?! 23.5亿美元!谷歌出售摩托罗拉机顶盒业务 两家巨头相继放弃移动广告,移动广告形势堪忧? 应用洗牌,还能免费多久?Google推出iPad版Quickoffice 2012末日APP推荐 求生自救必备! Windows8上网利器 不卡死的IE10浏览器 为何Java程序员学习Clojure有优势? 我们是如何阅读代码的? “热水冷却”技术将主导美国国防部数据中心改造 程序员想玩转大数据:需要知晓的12种工具 2012年谷歌应用商店增长迅速 但苹果最赚钱 Apple微软Google都在竞购一家创业公司 违反新条款?苹果强行下架AppShopper 2012移动开发教程盘点:最棒的国外游戏开发站 重思JavaScript的好与坏 细数那些 NeXT 留给 OS X 的遗产 一张图让你知道大数据的生态系统 Camera360开放SDK:拍照和滤镜一行代码搞定 一周消息树:计算机将拥有五感 人类面临威胁? 通晓数学的人就可以当程序员吗? 360发布企业版4.0 可自定义软件白名单 不要总是依赖机器 MongoDB扩展彰显分片功夫 Dell与HP的OpenStack的战略:渠道对抗SLA 路况电台王雷:未来车载系统会是Android的天下 移动周报:2012移动开发工具系列盘点 谷歌不愿错失机会 Android或不再成它人独享 有谁知道比较好的HTML的入门的书吗?请告诉我!!! 我有一个关于JSP中文显示问题? 求助,查询lookup,locate,关于variant 谁用过Raize 3.06控件组?请教RzImageComboBox控件怎么用? 在程序中如何打开系统的notepad或wordpad并同时显示字符串? 今天学了一个下午的五笔,进步不小,放分。 asp.net中有自己带的treeview类吗? 谁知道学习汇编语言的网站 !!help! 今天刚装了adsl,可是在win98下用不了,连通信公司的人都没辙(100分) api中怎么知道哪个函数用在哪个dll rave 的最版在哪里可找到 rave 的最版在哪里可找到 !!help! 今天刚装了adsl,可是在win98下用不了,连通信公司的人都没辙(100分) 救救我啊,关系着我的生计呀! 在Window2000上安装Redhat7.3后,机器速度慢得难以让人忍受 delphi5中数据集问题 !!help! 今天刚装了adsl,可是在win98下用不了,连通信公司的人都没辙(100分) 在线:请推荐几本OpenGL的好书!!! VI高级技巧征集中,欢迎大家来交流,谢绝灌水! WINDOWS 2003 SERVER 安装问题 存储过程可以返回记录集吗? CListBox的问题 请问!那位哥哥姐姐可以教我学习呢!? 页眉页角问题 一个关于package的初级问题 窗口大小 win2k+诺顿杀毒软件企业版~~~~~~~~~~~等待,立即送分! 请问我如何将CStatic透明化,即上面显示的字能够映在窗体上,并不是映在灰色CStatic控件上。???????????????? 网页发送短信是如何实现的? 陷入死循环啦!!! 紧急求助!!!!![2000密码] 为什么只能添加一条记录?帮帮忙,谢谢 谁知道比较好的学习汇编语言的网站 如何用JS打开一个文件对话框 有什么办法能让fsck的时候,不需要手动确认? 如何将编写好的*.chm文件连接到编写的应用程序中?(急) 高手请进!SQL SERVER出现问题! 急!!!请教计算机网络中的停止等待协议算法 哪能找到一个图书管理系统示例的源代码,谢谢 一个很简单的备份问题!~~~散分!~~~~~~ 用sql语句查询表,如何自动把Null值转换为0或指定值?? 如何屏蔽win2000下的ctrl+alt+del啊? ADO和字符集问题 请问各位大侠,weblogic里部署jsp和javabean的问题 求问有关Datetime和smallDatetime的问题 在jbuild+mb中,MIDlet和displayabel form 有什么区别,? Resin 2.1.0下面怎么配mm.mysql驱动? 关于web下的参数传递问题,向大家请教。 请教计算机网络中的停止等待协议的算法 有谁用过imagelib吗? 怎么用VB调用access内部定义的函数??? 我买了一只天梭自动机械表,在用手大力摇晃听到里面除了有摆陀的声音还有出现哒哒的金属声,是周期性出现我确定不是金属碰撞的声音,而且声音小,这究竟是正常不?其他方面都挺正常的,请 关于毛泽东的忆秦娥.娄山关的几个问题,1“霜晨月”,“从头越”用了什么修辞手法,有什么作用?2你对下面两组意境的理解:“马蹄,喇叭”“苍山,残阳”3这首诗的感情基调是:A悲凄B悲壮C雄壮( 铅酸蓄电池对环境的影响 当什么时候用stb.was doing while stb.was doingwhile引导的时间状语从句,从句和主句什么时候都用过去进行时 don't be a putz 电影《Ink》里 小姑娘对他爸爸说 don't be a putz 请问putz是什么意思putz是傻瓜的意思么? 某包装车间要包装726双皮鞋,已经包装了285双,剩下的如果每小时包装49双,还要做几个小时才能包装完? while I was doing可省略I was吗 Don't be a rabbit.Be a 时尚服装公司制衣车间和包装车间原来一共有工人310人,重新编排岗位后,制衣车间调出15人,包装车间调进28人,这时包装车间的人数比制衣车间的1/4还多3人制衣车间和包装车间原来各有多少人? while后面一定要接doing吗? 】读毛泽东的词《娄山关·忆秦娥》,然后按词的意境,把它扩写内容丰富的一段话.《娄山关·忆秦娥》西风烈,梧桐叶下黄花发,黄花发,  马蹄声碎,喇叭声咽.  雄关漫道真如铁,而今迈步从 在制造园林工具的刀片上,高碳钢和低碳钢是什么区别?比如说成本啦,性能啦,效果等各个有比较的方面帮我解答下.还有就是修枝剪的砧头是什么,有什么作用吗? poor 】读毛泽东的词《娄山关·忆秦娥》,然后按词的意境,把它扩写内容丰富的一段话《娄山关·忆秦娥》西风烈,梧桐叶下黄花发,黄花发,  马蹄声碎,喇叭声咽.  雄关漫道真如铁,而今迈步从 低碳钢和低磁钢有什么区别 老麦的粽子请写出括号里字在文中的意思和表达的效果⑴而我那时又太小,见到他总有一种“高山仰止”的感觉.⑵这就是他的“流动商店”. 光速不变性,是指光的速度相对任意参照系恒为c,还是指任意物质,只要速度达到c就相对于任意参照系不变?9999c的物质相对于同向运动的速度为0.5c的物质,是0.9999c-0.5c么? 不锈钢 低碳钢 区别 老麦的粽子阅读答案1.作者怀念老麦,不仅因为他的粽子好吃,( ),更是因为老麦是一个()、()、()、()的人.(请用文中带有概括性的词语填空)2.请写出括号里字在文中的意思和表 光速不变原理是不是只适于真空啊 同一种介质不同的参考系 是不是也满足光速不变啊? 为什么沉船在海底容易生锈,而长时间航行却不易生锈你看过泰坦尼克还这部电影吗?影片中当搜索人员在船舱里四处寻找宝藏时,我们可以看到,沉在海底的泰坦尼克号早已生锈,成了一堆废铁. 1.作者怀念老麦,不仅因为他的粽子好吃,( ),更是因为老麦是一个()、()、()、()的人.(请用文中带有概括性的词语填空)2.请写出括号里字在文中的意思和表达的效果⑴而我那时 监控摄像头 晚上不亮白天亮是什么原因我家里装的摄像头带红外线的那种 为什么晚上不亮 白天就亮 关于海底沉船的电影海底沉船的故事 好象是俄罗斯的船 喝了船上的伏特加之后身体发生变化 是什么电影不是幽灵船 故事是发生在海底的沉船里面 老麦的粽子 1.作者怀念老麦,不仅因为他的粽子好吃,( ),更是因为老麦是一个()、()、()1.作者怀念老麦,不仅因为他的粽子好吃,(货真价实 ),更是因为老麦是一个()、()、() 说法不正确的是,以及原因A开了盖的葡萄酒容易变酸,这个过程中发生了氧化反应 B糖类、油脂和蛋白质都可以酿酒 C乙醇与酸性高锰酸钾溶液反应,被直接氧化成乙酸 沉船之岛海洋面部是什么形状的? 忆秦娥 娄山关中忆秦娥跟词的什么有关 Mary meets Betty while doing shopping in a supermarket,中的 while是什么意思,在句子中解释为什么? 一个数据结构矩阵地址问题设矩阵A(aij,1 小儿强酸强碱中毒怎么办 毛泽东的《忆秦娥 娄山关》1.词中的“咽”、“碎”二字的含义2.与《七律 长征》对比从写作风格和作者抒发的感情的角度谈谈两者的区别3.写出胜利后的心情的诗句是什么所有的问题都关 『数据结构』 二维数组 1.设二维数组A[0…m-1][0…n-1]按行优先顺序存储在内存中,第一个元素的地址为p,每个元素占k个字节,则元素aij的地址为( ).A.p +[i*n+j-1]*k B.p+[(i-1)*n+j-1]*kC.p+[(j-1)*n+i-1]*k D. 强酸、强碱中毒最适合用哪种物质作保护剂 毛泽东《忆秦娥,娄山关》 如何理解层次分析法中的指标无量纲化和无极化处理的目的 花季寻春,作文怎么写, 忆秦娥.娄山关表达了毛主席什么的思想感情 C7H6O2的芳香族含氧衍生物的同分异构体有哪些? 强酸、强碱中毒不能吃什么 单词拼写I don't enjoy exciting v--.Because I'd just like to relax on a beach快 焰色反应呈黄色的强碱是? 强酸强碱中毒后最适合用哪种物质作保护剂 急.普通M24螺帽的的对角和对边尺寸是多少呢?还有M22的呢?M24螺帽与螺栓连接后的抗拉强度是多少呢?螺帽的对角尺寸应该比对边尺寸大吧? 钠的火焰呈黄色 铜的火焰颜色呈蓝绿色 这种奇异的发光现象 The founders____the movement adoptes it in honor of Switzerland 语法填空 填什么为什么 端午的粽子阅读答案端午节就要到了.这使我格外思念家乡,思念那活鲜鲜的芦叶,思念那家家户户都在包着的粽子,就像回到了故乡的田野、潮沟河畔似的……我记得小的时候,端午节前几天就 我想种蘑菇,有没有知道哪里卖蘑菇菌的,种值技术和先期的投入. 读书笔记好句加赏析 1公斤M24螺帽多少个 低噪声轴流风机是用滑动轴承还是用滚动轴承 繁星.春水读书笔记,(原文加赏析)求一篇繁星春水的好词好句,或赏析,具体原文~ 粽子 内容是:每年端午节,家家户户都要包粽子,吃粽子.粽子()以它特有的形状、 ……3.煮熟以后,剥开墨绿的箬叶,只见洁白的米团里仿佛嵌着几颗深红油亮的玛瑙,着实好看.谈谈你对这句 Cr3+基态 电子排布式(Cr(NH3)6)3+ 背影读书笔记,赏析 M24螺帽的24是什么意思 平均无量纲化的数据组能做相关性分析吗?如平均无量纲化的水稻产量和温度两者之间能做相关性分析吗?分析方法有没有什么不同呢? 遇到强碱、强酸如氢氧化钠、氢氧化钙、浓硫酸、硝酸、盐酸等烧伤,应采取以下哪种措施最合适?( )A、先用柠檬酸或碳酸氢钠溶液中和残留物,再用清水冲洗,然后送医院B、用大量清水 粽子飘香话端午阅读答案 日光灯白天亮,晚上不亮有什么办法解决 胡万林涉非法行医致死案:学员各交万元永康两家企业排污被当地镇政府责令停产中国军工产业向全球进军 开始与西方竞美媒称土购中国导弹或是把特洛伊木马塞德国就默克尔手机或被美监听一事召见美美国情报机构被爆监听35名国际政要电俄要求美与“俄机构在美招募间谍”指控习仲勋在洛阳:要求管好部队纪律(组图广州公务员2012年人均工资加补助为专家:我国在售5大类17种转基因生物美方称无迹象显示两美国人遭绑架是恐怖中国画家潘义奎获艺术界\"诺贝尔\"土耳其已用中国导弹试验 硬顶美国别买美方称无迹象显示两美国人遭绑架是恐怖俄要求美与“俄机构在美招募间谍”指控美方称无迹象显示两美国人遭绑架是恐怖黎巴嫩军方破获一武装团伙纽约黄金期价24日收高美国民警卫队设施内发生枪击案两人受伤肯尼迪遇刺50周年拍卖会举行 凶手婚国际反恐会议在伊斯坦布尔召开国台办陆委会正式会面社会主义核心价值观基本内容求职有“三会”耳听六路、眼观八方冲第一,娜姐头回提穆尔西狱中有花销请求律师打钱台湾课纲微调:“中国”一律改称“中国市民呼吁解决“三不管”楼院脏乱差广东河源ML1.9地震广东河源ML0.5地震上百押运员停工 多家银行无钱可取你的寒假实践进展如何?医护人员制止吵闹遭六七名男子围殴点菜测试你的创业能力如何写简历 可有大学问6所香港高校今年在我省招生好父亲好市民王海清期待帮助车辆肆意停放 旧大路几成停车场患白血病后丈夫玩失踪女子告夫履行扶养上月我省疫情流感最“流行”年后求职 巧用组合拳NISSAN NV200+CVT上市
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘