微软王枫:云计算与大数据时代下的新趋势
发布时间:2021-10-30 13:17:20 所属栏目:云计算 来源:互联网
导读:今天首先很高兴有这样一个机会跟各位领导,还有IT界的同仁们一块共享一下云计算作为现在IT新一轮的潮流。刚才北航的孙院长讲了一句话,现在是IT界的乱世,乱世出英雄。我想大家也很清楚,随着下一代IT趋势作为互联网新的IT技术的发展,大家现在确实进入到IT
|
再讲一下HADOOP,实际上HADOOP最主要的特性就是它提供了一种世界IT领先的技术,去如何通过这种并行的技术处理各种各样的数据,通过HADOOP自己存储的空间,或者说跟微软的存储集成,但是最主要的它是世界领先的数据处理技术,一千个ZD的数据怎么去处理它,怎么样利用现有的硬件资源去并行的处理,去达到智能性的处理,HADOOP无疑是现在非常领先的IT技术。从微软的角度,我们利用大数据的平台跟HADOOP的集成,更好的去为用户提供这种灵活和方便的技术。
我举几个例子,通过我们的活动目录跟HADOOP的集成,能够更好的提高HADOOP对数据的安全性,通过云计算主要的管理工具跟HADOOP的集成,能够跟HADOOP为主的大数据的处理提供一套最先进、最灵活的管理方式。通过SQLServer,它的存储也好、它的商业智能跟HADOOP的集成,能够把HADOOP处理完的数据更好的展现给大家。所以,我们跟HADOOP的集成也是做到了淋漓尽致的地步,同时从微软的角度,我们也提供了一个对于开元、更开放的平台,跟世界IT领先技术进行了很好的结合。
接下来有一个录像,主要是SQLServer在5月份新发布的2012版本。这个录像主要是从SQLServer大数据的存储平台和BI平台的角度,包括跟HADOOP的集成,给大家有一个介绍,从我们的用户在世界上的一些案例和这些特性,让大家有一个逐步的了解。最主要的就是保证数据的不间断性,这是一个大数据存储必需的条件,大家想想,如果对一个企业来说,你这个数据的存储要下线,对于用户来说是一个什么样的概念。HADOOP跟WindowsAzure的公有云,我们有一个HADOOPonWindowsAzure的集成,所以它在上面可以达到挥淋漓尽致的集成和应用。
刚才讲到数据的采集、数据的管理、数据的存储,接下来,当你有了数据以后,如何去处理、去分析、去丰富,就像一个绞肉机一样,刚才徐博士讲到白菜架,我想怎么把白菜架上的白菜剁成馅包成饺子,接下来我会从这个方面给大家做一个介绍。
数据的处理无非是几个方面,你现在的数据存储起来了,很庞大,虽然它们有一定的结构,存在关系型或者非关系型的数据库里,已经也一定的模式,但是还是很杂乱。即使这些是跟企业相关的数据,如何把它细化,如何把它做成细碎的供企业真正应用的精神和技术上的食粮,我想在如何发现、如何组合、如何转换、如何分类数据,都是下一方面要的主要方面。
首先要了解这些数据的来源,它到底是什么样的数据,是个人的、企业的、互联网的,最后通过数据的整合和分析,你可以从数据里面提出精炼的你想要得到的价值。大家现在都知道应用商店的概念,应用商店什么意思?从微软也好、苹果也好,业界都提供了应用商店的概念,在应用商店里,不光是用户和企业都可以通过软硬件的模式享受应用,同时也可以把自己的应用放在这个商店里共享,提供商业价值。在应用基础上,由于大数据又带来一个新的概念,就是数据商店,也就是刚才我讲到的,从大数据的产业上来说,你需要一个数据商店的平台,这个平台能够让你去把你的数据,不管你是数据的供应商、集成商、采集商、开发商,你都可以通过这个平台去把你的数据放到这个平台上,去跟所有的企业、所有的伙伴共享。同时,你也可以享受在这个平台上所拥有的各种各样的资源。对微软来说,我们在WindowsAzure平台上,除了我们自己的应用商店以外,通过SQLServer的技术跟Azure的集成,跟HADOOP的集成,我们也创建了应用商店,它是一个非常好的模式,同时也是基于公有云上的数据商店这么一个平台。
当我对数据进行很好的处理和丰富以后,接下来要对大数据所做的事情,就是你如何根据企业的需要好好地进行分析,提供可视化的数据,来为这个企业服务。从这点来说,刚才我记得北航孙院长也讲到人才,其实这个大数据不光是带来了整个IT产业链的发展,同时也带来了对新的人才的需要。大家可以看到最左边的数据科学家,实际上数据科学家是随着大数据而产生的,他不一定是一个IT专业人士,但是他要对这个企业有特殊的专业知识,他能够知道摆在我这个白菜架上的这些白菜,哪些是企业需要的,哪些是需要留在那里的。所以,这个数据科学家我认为是伴随着大数据产生出来的一个新的职能,是一个乱世出英雄的机遇。你要通过对商业智能各种各样的工具、各种各样产品的熟悉,来产生你的商业智能分析的模式,然后通过你的技术,把这些分析的模式,怎么把它通过可视化的方式展现给最终的用户。所以,这三位人员实际上他是对整个大数据分析里面必不可少的三个职能。
接下来这个录像主要是给大家展示一下微软SQLServer,我想大家需要看到的就是SQLServer2012在数据展示上有哪些新的技术,通过拉拽过程中,没有用过一次键盘,最右边是大数据各种各样的分类。这是一个汽车租赁公司,他通过这些数据,通过拉拽的方式,产生各种各样类型的展现模式,这些模式是通过Windows、Office等等来展现的,你可以在数据间根据你的需求来自动展现想要达到的数据模式。另外对于一个不懂IT的专业人员,你也是通过这种方式来实现你所要的数据展现。比如我我是一个企业的老总,我想看看这个季度的销售量,哪些人想买什么样的车,我只要把这个拉拽到我的窗口,通过一年的分析,每一个季度的分析,甚至有动态的移动,来显示不同季节之间的数据变化,非常非常酷,也是一个非常非常重要的在大数据里面的一个必不可少的阶段里的一个重要的技术。
我想总结一下从微软的角度,刚才我讲到大数据的生命周期,数据的采集、管理、存储,数据的丰富、处理、数据的分析,我们微软作为一个世界领先的软件公司,我们都有哪些方面的技术、解决方案,能够帮助企业和用户来实现你这个大数据在产业链的每一个过程。从下到上,刚才我给大家也介绍了,以SQLServer这个大数据的平台为主,通过跟HADOOP的集成,通过跟WindowsAzure公有云的集成,来实现在这个产业链里的每一个步骤,可以通过嵌入式的Windows放在每一个设备里。我举个例子,通过Windows嵌入在每一个设备里,来提供每一个设备所产生的各种各样的数据,比如说车载的设备,怎么能够及时跟踪这些数据,这个数据能够通过微软集成的技术,把它通过互联网、通过网络转移的我的数据库,各种各样的数据源,不同的数据库、不同的文件、HADOOP都可以通过微软数据库集成的技术把它通过数据的转换,存储到微软的数据平台上。在这个基础上,通过跟HADOOP的集成,能够利用HADOOP对大数据处理的优势,在跟微软各种各样领先技术的结合展现分析,这样就把整个数据的产业链提供了一个从底到上完全的解决方案,最后,通过刚才我给大家介绍的可视化的工具,也就提供了一种完整的产业链和一套非常合理有效的结构。
微软在大数据上,我们在最近这几年在世界上的各个地区跟很多客户也做了很多成功的案例,中国也是微软很重要的市场,我们也做了很多相应的云计算、大数据的成功案例。接下来,我也想就这个机会给大家展示一段录像,这是我们在中国的一个非常成功的与食品监控有关的案例,实际上它集成了云计算、物联网还有大数据三个最主要的IT趋势的核心。
刚才这个短片我们管它叫猪肉云,成都是全国猪肉最主要的产地,我想给大家说的是,它实际上是给了一个很高的案例,在这个上面大家可以看到,这里面所用到的技术,云计算、虚拟化、高性能计算、管理、数据库、大数据的平台、BI商业智能的分析,包括云加端的概念,这是一个很典型的已经在实用,已经落地,已经被政府正式采用,为市民提供服务的一个很好的案例。
最后,我想总结一下,大数据让我们所有人都很兴奋,但是,对于大数据来说,它还是面临着一些挑战,不管是云计算还是大数据,我们进入到这个乱世,但是这个乱世还是有很多风险,也有很多未知的难题需要我们共同去解决。
简单总结一下,从大数据的角度有几个比较主要的挑战,第一就是专业人员,包括三个方面,数据分析师、商业智能分析人员包括计算机的开发人员,大家看到这个商业里面有很多东西,有基本的技术支撑平台和技术,但是需要很多的开发和操作。第二,公共的常识,大家对大数据是一个什么理解,不同的人、不同的企业有不同的理解,怎么能够统一他的理解,这个很重要。需求的差异,一个大型的企业和中小型的企业对大数据的要求和应用模式是不一样的,怎么能够按需来制定你的大数据技术和方案非常非常重要。最后,产业链的完整性,刚才我所讲的,如果这个产业链缺一个环节,你都不叫大数据,所以,在你想利用大数据挖掘潜力的时候,你要想到这个产业链的每一个环节用什么样的技术去解决。采集的短缺,真正去采集这些数据的企业人员到底有多少,有多少是一个专门的进行数据采集的,这还是一个未知数,而这一点是刚才我所讲的产业链的第一位,接下来才是存储,才去把这些数据整合起来。
标准化,现在五花八门,各种各样的技术,这些技术对大数据处理所带来的劣势是你要经过很多格式的迁移、各种各样非标准化相互之间的集成,这样在不同程度上,对数据的读取中间有很多的环节,不管是存储的技术、开发的技术、整合的技术,这一点也是一个非常大的挑战。我想任何一个IT的新的技术,经过一段时间,大家都会照着一个标准化去发展,不管是像大家知道的互联网、云计算、数据库,虽然有各种各样的厂家,但是大家还是有一个比较一致的标准,我想大数据将来也会朝着这么一个方向去制定它的基本标准。
基础设施,很简单,我想如果没有硬件、没有网络,没有一套很完整的私有云或者公有云,这些东西如果不解决的话,你的数据只能摆在白菜架上,可能甚至摆在地上,因为你没有这个白菜架。
可视化工具非常非常重要,做了一系列的在这个产业链里的采集、存储、处理。最后你需要把这些数据通过简洁易懂的模式展示出来,你需要很好的工具快速的实现可视化,刚才我也给大家演示了微软BI的可视化的工具,我想这个在业界还是一个非常领先的可视化工具。 (编辑:淮安站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |
