方案背景介绍:面对快速的生活节奏、人们每天创造出来的数据是成倍递增,为了达到存储海量数据,并且可以提取有用数据,进行经营分析的目的;亟待一套可行性解决方案。
解决方案原则:一、具备高兼容性,二、具备高吞吐性,三、高可用性,四、高并发计算性,五、高扩展性,六、高灵活性
原则说明:
一、高兼容性:

要求具备兼容各种网络链路的接入具备转换适配功能,要求DMP平台具备兼容各种文件格式输入(涵盖数据库文件、接口文件等格式),要求数据推送平台能够支持各种外部平台需求数据的输出;总之要求随着更多网络及系统文件及外部需求平台的接入不至于影响整套方案运行;

二、高吞吐性

要求网络带宽、磁盘I/O具备冗余功能

三、高可用性

要求网络节点均具备热备份能力,磁盘Raid模式、数据存储系统具备热备份能力、生产系统具备单点故障能力、应用系统具备多台服务器主备接管能力;

四、高并发计算能力

需要服务器具备超强性能CPU、文件存储系统具备分布式计算能力、后端生产系统支持多并发线程计算充分利用主机CPU计算能力、前段应用层分布式集群能力减轻单台服务器性能负载过重;

五、高可扩展性

要求预期到远期数据增长、需求扩大而所具备能力:网络可接入新的链路资源,数据存储空间装载更多数据文件,系统架构具备横向纵向扩展能力,应用门户具备新增子系统展示能力等

六、高灵活性

需要系统建设初期,预见到前期网络架构设计、系统架构设计随着时间推移,可能需要面对业务新增、业务变化、业务去除等问题;故在建设初期应该合理区分规划网络层次结构,系统模块合理划分,后期修改过程中不至于动一处,处处动的效果;