行业: 金融, 电信
技术: 数据库
随着经济全球化步伐的加速,在金融和电信等行业中在海量客户数据面前,一般传统的数据库软件已经满足不了业务的需求,历史数据积压会导致业务库运行速度降低,且其中相当一部分是冷数据,建立专业的数据仓库解决历史数据积存问题,减少其对业务库的影响,提高客户体验,并从中分析挖掘有价值的信息,可以为金融,电信机构提供全方位、多层次的辅助决策支持手段,给客户提供更优质的服务。为了建设专业的数据仓库就需要引入专业的分布式分析型数据库,进行海量数据的存储与分析。
在此发展趋势下,南大通用数据库与飞腾联合解决方案应运而生,GBase 8a MPP Cluster是南大通用面向商业分析和商业智能的一款国产分布式分析型数据库,是国内首款支持融合数据处理的分布式关系型数据库集群产品。基于国产飞腾服务器,GBase 8a MPP Cluster具有联邦构架、海量数据分布式、高效压缩、高效存储结构、智能索引、灵活的数据分布、在线高性能扩展、高并发、高可用、高安全性、易维护、高效加载等核心优势,能够给客户提供专业的海量数据存储数据库,并且贴合分析类应用的使用。
GBase 8a MPP Cluster是基于列存的大规模分布式关系型数据库集群产品,具备高性能、高可用、高扩展性,可以为超大规模数据管理提供高性价比的通用计算平台,并广泛用于支撑各类数据仓库系统、BI系统和决策支持系统。GBase 8a MPP Cluster 采用 MPP + Shared Nothing 的分布式联邦架构,节点间通过 TCP/IP 网络进行通信,每个节点采用本地磁盘来存储数据。实现非对称部署,分布式管理集群和分布式调度集群部署在一个集群;分布式计算集群部署在另外一个集群。南大通用的GBase 8a MPP Cluster是目前中国信通院大数据产品大规模能力的基础能力通过评测的规模最大的MPP数据库集群,并且51项测试用例全部通过,另外南大通用也是目前第一个在4096个节点规模下完成了性能专项测评的国产数据库厂商。
本方案在国产飞腾S2500平台上,采用万兆组网多台设备部署GBase 8a MPP Cluster产品,部署架构如下:
图一
环境如图二:
服务器型号 | 服务器数量 | 服务器配置 | ||
---|---|---|---|---|
TR231F | 5 | CPU: 2*腾云S2500 (128core) | ||
操作系统:CentOS8.2 | ||||
硬盘: 数据服务器: 8*1T SSD 数据 (RAID0) 数据库服务器:4*4T SATA 数据 (RAID0) |
||||
网卡:Intel X710 for 10GbE SFP+ | ||||
内存:16*16G |
图二
基于飞腾国产计算平台,进行了扩容、缩容、服务管理、升级、节点替换、备份恢复、dblink访问、vc管理及镜像、数据加载与导出、用户安全等方面的全面功能测试,并且使用tpc-h与tpc-ds工具进行了1T和3T数据量的加载性能测试,性能满足预期。同时,进行了长稳测试,使用tpc-h和tpc-ds的模型,对TB级别数据进行ddl,dml,查询混合业务并发测试,同时涵盖数据重分布操作,整体测试未出现结果集错误、节点异常等现象。整体方案满足海量数据存储与分析的需求,且可以保持7*24小时不中断,稳定运行,数据不丢失,安全性也可满足需求。
南大通用大规模分布式并行数据库集群系统[简称:GBase 8a MPP Cluster
FT-2000+/64
飞腾腾云S2500
天津南大通用数据技术股份有限公司成立于2004年,为用户提供全栈国产数据库产品和服务,国内唯一一家专注于数据库产品研发并且在金融、电信行业得到规模化应用的独立数据库服务商。 南大通用是国家级高新技术企业、国家规划布局内重点软件企业、信创工委会成员企业(0048),已连续多年被工信部下辖的赛迪顾问评为国产数据库领军企业。 南大通用已经为金融、电信、政务、能源、交通、GF、企事业等领域上万家用户提供了产品和服务。