ConfidentialandProprietary©2011MicrosoftLastUpdated:Thursday,October24,2024SQLSERVER2012商业智能及数据仓库解决方案议题微软整体商业智能平台构建高质量数据仓库高效数据分析与数据挖掘前端数据展现商业智能的宏观价值目标数据信息知识决策行动应用环境赋予含义分析归纳指导辅助落实创造价值“利用各种不同的应用程序和技术,收集、存储、分析、共享数据并提供数据访问,从而帮助企业用户更容易的、更快速的获取更丰富的数据,以做出更好的业务决策。”更容易更快速更丰富用商业智能技术挖掘数据价值数据的价值在数据上的投资洞察力/预见力预测数理统计分析神经元网络数据挖掘在线分析工具多维分析KPI仪表盘平衡计分卡在线分析知识信息报表和查询报表SQL查询数据数据收集和存储数据仓库ETL工具商业智能实现的三大基本阶段数据整合数据清洗高性能数据移动快速建立数据仓库数据集成SQLServerIntegrationServices层次化业务分析消除IT架构与应用之间的隔阂实时商业智能深入数据挖掘数据模型SQLServerAnalysisServices自定义报表数据展现与门户集成即席报表数据展示SQLServerReportingServices微软一直处于商业智能的领先位置MICROSOFTBIVSCRYSTALREPORT•数据集成•数据建模•数据展示•数据管理(一个都不能少)商业智能是集成的考虑最终用户的感受•熟悉的工具和环境•系统和工具使用的学习成本•自助分析价值的最大化,是让更多的人使用TCO•商业智能平台是整体的•多个异构工具带来成本的增加,不仅仅是购买成本,管理成本,学习成本,维护成本都会有影响≠商业智能报表系统整体商业智能平台架构数据集成层SQLServerIntegrationServicesEPR/CRMODS/DW表单、文档业务系统业务系统ETL引擎数据层SQLServerDB数据仓库分析&报表引擎SQLServerAnalysis&Tabular多维模型表格模型协同与展示层报表查询、平衡记分卡、多维分析、KPI、仪表板战略决策分析KPI考核体系资源计划管理企业行为修正浏览器、客户端、交互式展示面向数据面向用户用户自服务元数据主数据数据质量数据生命周期管理权限、认证议题微软整体商业智能平台构建高质量数据仓库高效数据分析与数据挖掘前端数据展现BI项目构建过程分析模型源系统客户端设计数据仓库导入数据构建分析模型查询数据34查询工具报表分析数据挖掘2数据仓库1数据仓库面临的挑战数据生命周期延长“从传统的单纯的写-查-”备,扩展了更多分析、处理的数据应用。数据可追溯性,影响分析我们的数据从哪里来?到哪里去?干了什么?基础数据分散“”基础数据过于分散,各系统各自为政难以标准化多个副本,相互隔离;基础数据变得不基础企业数据生命周期管理——从多个方面入手为企业提供可信的数据企业数据生命周期管理不仅解决管理,更要提供数据优化手段,提升IT的价值数据的管理和优化,需要具备对数据的可追溯的洞察能力提高数据质量基于业务的知识与业务数据系统集成统一基础数据数据标准化避免重复工作,减少数据冲突数据血缘追溯基于业务的知识与业务数据系统集成与数据平台紧密集成嵌入业务才能快速实现价值避免为了解决老问题,反而产生新问题SQLSERVER集成服务•SQLServer商业智能应用组件•高性能数据整合平台•图形化界面加快开发速度数据仓库特性:列存储索引使用VertiPaq压缩,xVelocity内存优化C1C2C3C5C6C4…行存储列存储页面性能实例•1TBTPC-DS数据库–catalog_sales事实表,包含14.4亿行数据–32逻辑处理器,256GB内存–Warmstart•查询SELECTw_city,w_state,d_year,SUM(cs_sales_price)AScs_sales_priceFROMwarehouse,catalog_sales,date_dimWHEREw_warehouse_sk=cs_warehouse_skandcs_sold_date_sk=d_date_skandw_statein('SD','OH')andd_yearin(2001,2002,2003)GROUPBYw_city,w_state,d_yearORDERBYd_year,w_state,w_city;性能示例:结果总CPU时间运行时间无列存储502秒501秒列存储31.0秒1.10秒速度16X455X满足海量数据仓库应用•企业核心数据仓库应用•实现从几十TB到几百TB数据量的扩展•基于完全的MPP架构提供高性能的服务•灵活性•多家硬件提供商•基于分布式架构灵活部署•最全面的解决方案•完整覆盖桌面,数据集市以及海...