联系我们
南京宇宽科技有限公司 |
[Microsoft]微软明年初发布新版并行数据仓库一体机
作者:hcz | 点击:2391 | 录入时间:2012/12/16 20:49:32
大数据时代的到来以及大数据的大价值已经被广泛接受,现在企业面临的问题是如何轻松地实现在“大数据”里淘金。 面对大数据的处理办法,很多IT公司给企业的解决方案都过于复杂,特别是对于一些缺少IT技术人才的企业来说,更是难上加难。当大数据概念被提出后,针对 该市场应运而生的解决方案层出不穷,软硬件一体化设备作为大数据解决方案中的一员,扮演着重要的角色。众多拥有数据库系统软件的IT厂商都推出了基于自己 数据库的大数据一体机,这种解决方案,大大降低了企业二次开发的要求,只需简单的搭建和参数配置,即可让很多企业用户的大数据梦想变成现实。
微软并行数据仓库一体机,将多种先进的数据存储与处理技术结合为一体,是微软大数据战略的重要组成部分。今天,我们重点介绍一下微软基于SQL Server并行数据仓库(PDW)一体机。 12月13日,微软并行数据仓库全球卓越中心总监Russ Cavan到访中国,在接受媒体采访时,他谈到微软大数据的战略规划:让所有用户都能够从几乎任何数据中获得可转换为业务执行的洞察力,包括之前隐藏在非结构化数据中的洞察力。
并且,他指出微软的大数据解决方案从三个层面解决企业面临的大数据难题。第一是数据管理层,可对所有类型的数据进行搜集和管理,包括结构化、半结构化、非 结构化和流数据等;第二个是扩展层,通过数据发现以丰富数据集,与来自于全球的多种类型数据互连,以及通过高级数据分析将数据变成信息以及知识。第三是洞 察力层,通过用户所熟悉的类似Excel、PowerPivot、PowerView这样的工具,为用户提供全面、深入的洞察力,为从领导层到每个员工提 供直观易用的决策支持,即实现数据以及信息的消费化。 微软基于SQL Server的并行数据仓库一体机是微软大数据战略的重要基础,是现代的数据管理平台,可实现对任何大小数据、随时随地的处理,简单且具有弹性。微软并行 数据仓库一体机是针对企业数据仓库、高度可扩展的设备,使用 Microsoft SQL Server 中的"并行数据仓库"及其"大规模并行处理"(MPP)体系结构,获得可伸缩的性能和灵活性,并提供功能最为全面的数据仓库解决方案。 前端使用大家所熟悉的微软Office Excel、IE、SharePoint等工具,同时可以使用多种设备,包括笔记本,移动终端等,从任何数据中随时获得所需要的信息,以提供决策支持。 随时与全球的数据互连,从而发现隐藏的价值,将内部与公用的数据和服务相结合。通过支持任何数据的现代数据管理平台,处理任意大小和种类的数据,不仅具有Windows的易用性,同时兼具云的弹性和可扩展性。 为了帮助企业快速部署大数据解决方案,兼容当前最为流行的非结构化数据体系Hadoop,微软在Microsoft Windows Azure平台上提供了基于云的HDInsight服务,同时在Windows Server上提供了基于私有云的HDInsight Server。 微软HDInsight解决方案100%与Apache的Hadoop标准兼容,可帮助企业从任何结构化及非结构化数据中获得业务洞察力。Windows Azure进一步简化了Hadoop的部署难度,用户可以在10分钟内在云端部署Hadoop集群,并能通过Microsoft System Center实现轻松管理。 新一代并行数据仓库一体机明年初推出 其实,早在SQL Server 2008 R2版本发布之初,微软就已经推出了基于SQL Server 2008 R2的微软并行数据仓库一体机,目前已经发布了四个更新版本。12月13日的采访中,Russ Cavan透露,基于SQL Server 2012的新一代并行数据仓库一体机将于2013年初推出。SQL Server 2012并行数据仓库一体机面向大数据服务设计,在数据处理方面实现了突破. 为大数据而建:SQL Server 2012并行数据仓库提供了全新的PolyBase它是数据处理突破性的技术,实现了传统关系型数据库表与非关系型Hadoop数据表的统一查询。 新一代性能与规模:采用 xVelocity 列存储,查询速度大幅提升10至50倍、并可以满足实时数据仓库需求;采用高密度 Direct Attached Storage,存储容量提升7倍之多;采用更加高效的架构设计,在大幅提升性能的同时,总体成本大幅降低。 最优化的软硬集成:通过Windows Server 2012虚拟化技术一系列创新,SQL Server 2012并行数据仓库一体机实现业界每TB更低成本。 由于软硬件一体,并行数据仓库一体机只需要很少的调整和优化,可有助于降低 IT 成本。该设备开箱即用,可以以非常快的速度安装并开始加载数据,在服务器调整和优化上也仅需很少时间,从而显著缩短部署时间、减少工作量和降低成本。此外,还能够非常快地运行大规模查询,企业可以运行更多报表、完成更复杂的分析、处理更大的数据集以及分析更详细的数据。 国内PDW一体机的首个案例:国家审计署 就在Russ Cavan在介绍微软大数据战略及并行数据仓库一体机2012产品路线图的同时,也公开宣布微软并行数据仓库一体机的首个案例:国家审计总署。
微软高级数据仓库架构师乔怡介绍,现在的审计业务,面临的数据总量已经上升为TB级、甚至PB级,并且数据查询分析的复杂性也在不断提高。同时,审计需求 本身为具有随机性和突发性,审计人员需要根据判断进行海量数据的查询、汇总和关联分析,这就需要针对大数据的统一高度和并行访问,并需要多种计算模式和分 析方法,同时满足宏观或特定审计目标。与此同时,更加无法忽视"时效性"的要求,审计署的处理效率受到更为严苛的挑战。 如何以更为容易部署的方式建议分布式存储和计算集群,在统一的架构下实现对各种类型和各种规模数据的管理和并行处理,并能够根据需求实现缩放和 篇?如何支持TB/PB级数据的高效加载,满足多源异构数据的即席查询、联合查询和复杂关系处理,对大规模审计数据进行快速、深入的分析和挖掘?国家审计 总署选择了基于微软SQL Server并行数据仓库一体机的大数据云平台方案,用于解决海量数据大规模并行分析处理、分布式存储及管理问题。 微软并行数据仓库一体机在保持与审计署现在数据平台兼容的前提下,提供对数据进行全方位管理、高性能处理的能力。同时基于上述审计业务的随机 性、突发性、分析多样性等特征,微软并行数据仓库一体机平台在数据存储和处理架构上兼具了资源池共享、按需可扩展、高可用保障、统一运维监控等典型云计算平台特性。 Russ Cavan表示,微软并行数据仓库与微软的多种商业智能工具实现紧密集成,例如Excel, Powerpivot, SQL Server Integration Services、Analysis Services 以及 Reporting Services等。微软的大规模数据仓库解决方案,不仅仅为客户提供后台大规模数据存储、管理与处理,同时也为客户的决策支持提供灵活、易用、可视化而 且丰富的前端展现,是真正实现数据消费化的大数据解决方案。目前,包括Gartner在内的全球分析师机构,已经把微软列为全球数据仓库的主要领导者之 一。 针对2013年及今后中国经济发展,Russ Cavan表示,当前IT已经成为政府和企业不可缺失的组成部分,是政府与企业提高工作效率,实现服务转型的重要柱,IT已经从最初的服务部门,变成了战 略部门,微软致力于与中国政府和企业一起,通过大数据、云计算等新兴的技术,实现中国由大到强的战略转型。
|
|