浪潮云海大数据解决方案V3.0

浪潮（北京）电子信息产业有限公司

? 应用可靠性差，难以保证业务连续性 ? 代码复杂 ? 系统可维护性

浪潮云海大数据一体机解决方案

拓扑图

智能交通应用技术

方案规模、指标、特点

? 该方案使用SDA-1、SDA-2，共计580节点

17

浪潮（北京）电子信息产业有限公司

? 集群性能：写入100000条记录/秒，20000主键查询/秒 ? 系统特点：

? 解决了海量过车信息（结构文本+图片）存储问题

? 解决了分布式数据查询问题，应用系统可以接入任何一个本地数据中心，

并访问全库数据

? 系统提供了易于使用的API，方便进行二次开发

? 系统做了较多优化，性能很好的满足了项目的实时性要求

? 系统稳定性强，建立在X86服务器平台，自动进行数据迁移和数据恢复

5.2 某省级运营商清帐单查询系统

原有方案：小型机+存储+Oracle

? 成本高、扩展性差

? 服务器采用P595的两个分区（48CPU），部署不同的地市，互为主备；

存储使用2台DS8300，RAID5方式，有效容量54TB ? 数据量大，增长迅速，但数据库的扩容工程施工风险高 ? 数据风险高

? 灾难恢复依赖磁带，业务中断时间长 ? 效率低

? 关系数据库处理困难，查询慢（超过15秒）

? 关系数据库入库慢，常有清单文件积压，不能实时入库，从而不能实时查

询

新清账单中心方案

18

浪潮（北京）电子信息产业有限公司

? 底层为浪潮提供的大数据解决方案平台，上层由应用开发商开发业务程序，对

入库和查询进行业务处理。

? 这种架构有效的屏蔽了底层的功能，对上层来说，只需要调研相关接口即可。

数据的分发、复制、任务调度、容错都是由系统软件来控制。大规模的PC具备强大的处理能力和网络带宽，同时具备线性的横向扩展能力。3份冗余的数据保证对硬件的容错和读处理的支持。

? 存储使用69台PC机身硬盘作分布式存储DataNode，每台PC配置6TB磁

盘容量，按每份数据存放3份计算，有效容量138TB，保存6+1个月数据，压缩比1:5

六．浪潮云海大数据一体机配置

系统平台

? 根据客户实际应用容量需求，用SDA-1、SDA-2进行灵活线性扩展。

19

浪潮（北京）电子信息产业有限公司

? 操作系统：

? Red Hat Enterprise Linux for Servers或CentOS， 64位系统，版本6

以上。

? SUSE Linux 11 SP1 ? Hadoop平台：

? HDFS/MapReduce ? HIVE ? HBASE

? Hadoop Manager ? Zookeeper

20