首页 » 商业智能 » 测试报告 » 正文
 

中国电信区域集中MSS数据分析系统测试报告

发布时间: 2012-10-24 18:17:10  

1 概述
1.1 测试背景及测试目的
截至目前,北方电信信息系统建设中MSS域中已建有数据仓库系统,采用的是SAP的BW系统,此系统能提供基础的报表级的分析展现功能。为了让业务部门更好地利用BW系统中的数据,通过系统将数据以图形化界面的形式直接展现给最终用户,就需要引入BI系统。而且随着将来业务的发展,BSS域及OSS域中的数据也有可能汇总进入BW系统,对从ERP系统到数据仓库到最终的数据展现层的整体系统架构提出了新的挑战。因此,需要通过相关的测试工作为今后数据分析、展现系统寻找一个合理的数据架构,以满足业务端对数据的长效应用。
本次测试目的如下:
(1) 确定北方电信未来BI系统的架构
(2) 确认各个BI厂商的产品功能、性能是否满足电信用户的需求
1.2 测试单位及组织
组 织 者: 中国电信集团企业信息化部、毕博管理咨询有限公司
参 与 者:微软(与埃森哲合作)、SAP(BO)、无极3
测试时间: 2010年12月
2 测试范围及测试环境
2.1 测试范围
主要测试各厂商的BI系统与包括SAP BW系统及非SAP BW系统数据源在内的各类数据源之间,数据交互的可行性及性能、稳定性情况。重点关注BI系统是否可以直接访问BW系统数据模型,以及BI系统将各类数据源中的数据抽取到本系统中保存时的性能及稳定性指标。

2.2 测试环境
软硬件环境:

CPU
Intel Xeon E5345 2.33GHz 2*4Core
内存
16GB
操作系统
Windows Server 2008
中间件
Weblogic10
数据库
Oracle10G

3 测试方法说明
由中国电信企业信息化部提供统一的测试环境,在同样的硬件环境下,各个厂商部署各自的BI产品。根据要求,在规定的时间内完成要求的测试内容,每家厂商两周时间,第一周部署环境,第二周实际测试。测试过程要求客户人员参与,实际使用各厂商BI产品制作测试案例。测试数据来源于中国电信北方电信SAP数据库中资产季报Cube实际数据,资产季报Cube是从底层的3个DSO组合而成的MultiCube,最大的DSO的记录数约1.6亿条。
具体的测试方法如下:
(1) 数据接口可行性测试:测试BI系统针对不同数据源的访问能力,包括读取和抽取两种访问模式
(2) 数据错误定位能力测试:测试BI系统对错误数据的识别和容错能力,要求BI系统能够找到所有的错误数据并按照规则要求修正数据
(3) 性能测试:测试BI系统数据接口模块的运行性能,包括读取和抽取两种模式的性能,对多个数据源的访问又包括串行和并行两种方式,形成针对串行读取、串行抽取、并行读取和并行抽取等四种测试场景
(4) 稳定性测试:测试BI系统在高负载运行的环境下系统的稳定性
(5) 易用性测试:测试BI系统整体功能的易用性,包括数据建模、报表制作、报表展现、数据导出(Excel)和权限管理等内容
(6) 展现效率测试:测试BI系统中分析展现功能的运行效率,主要测试报表和各类图形的展现效率。
4 测试结果
(1) 除“资产季报-直接读取”模式未完成外(另外两个厂商也未完成,可能是因为结构的复杂性和数据量较大的因素,最终导致无法正常读取该cube数据),圆满地完成了其他所有测试用例,在参加测试的三个厂商中,在CPU平均占用率、数据抽取效率、数据展现响应时间和易用性等方面有相当的优势,综合排名最佳。
(2) 支持对SAP  BW中DSO和Cube的直接访问和抽取访问(另外两个厂商未完成测试)
(3) 通过简单培训4名参测人员均完成了相关报表的制作
(4) 在多用户、多任务并发执行过程中系统运行稳定、系统资源占用率低
(5) 平均每秒抽取4,200条记录左右
(6) 在有缓冲优化的情况下百万级数据报表生成在10秒以下
(7) 生成了数据质量报告
(8) 最快完成了个性化内容的配置,产品易用性和简便性佳

 
  • 旗下品牌
  • 公司总部   北京经济技术开发区西环中路6号(100176)
  • 公司分部   北京市海淀区文慧园甲12号(100082)
  • 总  机   010-88551199
  • 客服热线   400 119 9797
  • 邮  箱   jiuqi@tiiki.net