池化整合多元数据库,zData X 一体机助力证券公司IT基础架构革新

引言

近期,云和恩墨 zData X 多元数据库一体机(以下简称 zData X)在某证券公司的OA、短信和CRM业务系统中成功上线,标志着其IT基础架构完成从集中式存储向池化高性能分布式存储的转变。zData X 成功整合了该证券公司使用的达梦、Oracle、MySQL、PostgreSQL等多套不同类型数据库,实现了资源利用率40%的提升,并显著降低了基础设施成本和运维管理复杂度。此外,业务系统的查询性能得到了10倍以上的提升,充分满足了业务系统对高性能、高可用、易扩展以及信创化的多方面要求。此次基础架构的升级改造不仅为案例客户的数据库系统建设提供了理论和技术支持,也为从一般业务系统向核心业务系统的渐进式改造奠定了基础。

01

金融科技和信创趋势下,券商布局IT基础架构革新

在业务快速发展的带动下,案例客户的业务系统变得越来越多样化,数据量也随之激增。为了支撑核心业务,该证券公司选择了 Oracle 和 MySQL 作为数据库引擎,并在近年来的政策和业务发展驱动下,逐步引入了达梦等国产数据库。目前,以 MySQL、Oracle 为主的数据库数量已超过百套。同时,为了提升数据分析效率,该证券公司还引入了数据仓库平台和大数据应用平台,以支撑分析类业务。

在这种多元数据库环境下,随着数据量的激增,数据架构规划和设计中的问题逐渐显现:

  • 性能问题日益突出:核心数据库的TOP SQL语句响应时间不断增加,受限于集中式存储控制器的瓶颈,I/O能力无法满足业务需求,导致CPU消耗增加,影响业务性能。

  • 数据库系统扩容困难:受限于集中式数据库的特性,大多数数据库缺乏有效的扩容方案,而 Oracle 的RAC虽然可以增加节点,但性能增益并不显著,无法实现真正的线性扩容。

  • 系统资源利用率不足:为确保数据库系统稳定运行,核心系统的数据库资源配置较高,导致IT成本居高不下。

  • 信创挑战:金融信创的落地应用需要将外部政策与监管要求转化为内部实践,同时探索更先进的数字化底层基础技术。

面对挑战,案例客户作为一家在国内证券行业具有竞争力和影响力的上市券商,积极探索一套能够稳定支撑、敏捷响应、降本增效且符合自主创新路径的IT基础架构,以适应未来业务发展的需求。

02

从集中式架构到池化分布式架构的成功迁移

2023年,该证券公司引入了云和恩墨的多元数据库一体机 zData X,将IT基础架构从集中式改造为分布式,实现了多元异构数据库系统的池化整合,有效降低了IT成本,提升了资源利用率和系统性能。

ce09efa8fbd4e826366533f84450c328.png

解决方案架构图

03

实践进阶,构建面向未来的多元数据库高性能运行平台

zData X 基于云和恩墨自研的高性能分布式存储软件 zStorage,实现存算分离架构,融合高性能计算、分布式全闪存存储、RoCE网络和数据库管理服务,支持多种商业、开源和国产数据库,包括 Oracle、MySQL、PostgreSQL、MogDB、达梦、人大金仓、openGauss 等,并可根据需求进行配置,满足不同规模系统对数据库性能、可靠性和扩展性的要求。在案例客户的数据库基础架构改造项目中,zData X 在技术层面实现了多项创新:

  • 自适应锁核能力:通过线程绑定固定CPU核,减少上下文切换开销,每I/O节省10-20微秒,降低关键业务时延。

  • 自适应Cache锁能力:数据库分布式存储读写线程绑核,减少锁的争抢和排队开销,使数据库读写性能提升4倍。

  • 支持双模副本能力:同时支持传统两副本、三副本模式和性能三副本模式,写时延降低50%,提供更强的分布式存储性能保障。

  • 高可用能力:能够应对各种故障场景,保障数据库稳定运行,提升业务系统稳定性。

从技术指标来看,基于 zData X 的分布式存储数据库架构,在整体性能上远超“x86+集中存储”的架构。以3个存储节点为例,单节点IOPS超过40万,系统总体IOPS超过百万。zData X 上线后,各项性能指标显著提升,DB Time降低至原来的1/20,SQL语句执行时间和I/O响应时间也均有大幅缩短。

从业务角度来看,该证券公司的常用业务功能(如:转岗人员统计、业务办理情况统计、人员职位信息变动、执业资格每日变动、转岗人员每日变动、员工考核角色设置等)的查询速度得到了大幅提升,基本都在10倍以上,前端用户体验显著改善。

04

小结

zData X 通过池化整合了案例客户的多元异构数据库环境,实现了多数据库共享存储资源池,资源利用率提升40%。zData X 具备的在线扩展能力,可以根据需求增加存储容量、存储节点和数据库节点,从而满足客户未来的扩容需求。同时,zData X 提供的软件定义存储能力,支持不同存储介质和不同品牌的服务器,构成不同的存储资源池,对该证券公司现有设备进行利旧使用,达到保护投资的目的。

通过本次基础架构的改造升级,案例客户的业务系统实现了性能、可用性和扩展性的全面提升,信创化程度显著提高;同时,资源使用单位成本和运维管理复杂度得到了有效降低。更重要的是,这为后续核心数据库的升级改造提供了可靠的实践路径参考。

f5d64ff0f06db0933a62133de8dc51f0.gif

数据驱动,成就未来,云和恩墨,不负所托!


云和恩墨创立于2011年,是业界领先的“智能的数据技术提供商”。公司总部位于北京,在国内外35个地区设有本地办公室并开展业务。

云和恩墨以“数据驱动,成就未来”为使命,致力于将创新的数据技术产品和解决方案带给全球的企业和组织,帮助客户构建安全、高效、敏捷且经济的数据环境,持续增强客户在数据洞察和决策上的竞争优势,实现数据驱动的业务创新和升级发展。

自成立以来,云和恩墨专注于数据技术领域,根据不断变化的市场需求,创新研发了系列软件产品,涵盖数据库、数据库存储、数据库云管和数据智能分析等领域。这些产品已经在集团型、大中型、高成长型客户以及行业云场景中得到广泛应用,证明了我们的技术和商业竞争力,展现了公司在数据技术端到端解决方案方面的优势。

在云化、数字化和智能化的时代背景下,云和恩墨始终以正和多赢为目标,感恩每一位客户和合作伙伴的信任与支持,“利他先行”,坚持投入于数据技术核心能力,为构建数据驱动的智能未来而不懈努力。

我们期待与您携手,共同探索数据力量,迎接智能未来。

c7abc9777881f23886e9b62ea454d8d8.gif

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/5850.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Windows php 安装 Memcached扩展、php缺失 Memcached扩展、Class ‘Memcached‘ not found

在Windows系统下如何安装 php Memcached 扩展 下载dll文件 pecl地址:https://pecl.php.net/package/memcached 根据版本进行选择 : 解压下载的文件后得到了这么样的文件结构: 配置 移动dll文件到相应文件位置 重点: libme…

FreeRTOS队列集(1-15)

队列集定义:def 队列集只允许任务间传递消息为同一种数据类型,如果需要在任务间传递不同数据类型的消息时,就可以使用队列集。 用于对多个信号量进行监听,其中不管哪一个消息到来,都可以让任务退出阻塞状态 假设&am…

如何利用MCU自动测量单元提高大坝安全监测效率

大坝作为重要的水利基础设施,其安全性直接关系到人民群众的生命财产安全和社会的稳定发展。因此,对大坝进行实时、准确的安全监测至关重要。近年来,随着微控制器单元(MCU)技术的不断发展,其在大坝安全监测领域的应用也越来越广泛。…

springboot配置WebMvcConfigurationSupport

一、在spring里有四个mvc配置类 1、mvc配置类 WebMvcConfigurer WebMvcConfigurerAdapter WebMvcConfigurationSupport WebMvcAutoConfiguration 2、WebMvcConfigurer为接口 3、WebMvcConfigurerAdapter是WebMvcConfigurer的实现类,且大部分为空方法,…

微服务架构面试题(二)

1. 请简述微服务中各组件的作用 ? 微服务架构中的组件各自扮演着关键的角色,它们协同工作以构建高效、可扩展和灵活的系统。以下是一些核心组件及其作用: 服务注册与发现组件:如Eureka,负责让其他服务知道当前服务的…

使用 Flask、Gunicorn 与 Shell 脚本构建高效 Web 应用部署流程

在使用 Flask 作为 Web 应用框架,并使用 Gunicorn 作为 WSGI 容器,使用shell 脚本来管理应用的启动、重启和停止。 启动脚本 start.sh: #!/bin/bash# 设置应用名称和端口 APP_NAME"my_flask_app" PORT8000# 设置 Flask 应用的路径…

【PCL】教程 supervoxel_clustering执行超体聚类并可视化点云数据及其聚类结果

[done, 417.125 ms : 307200 points] Available dimensions: x y z rgba 源点云milk_cartoon_all_small_clorox.pcd > Loading point cloud... > Extracting supervoxels! Found 423 supervoxels > Getting supervoxel adjacency 这段代码主要是使用PCL(Po…

【Linux】创建/扩容swap交换空间swap优化

一、当前交换空间大小 目前交换空间大小为2G 二、创建swap交换空间 #创建大小为2G的交换空间 [roothadoop01 data1]# dd if/dev/zero of/data1/swapfile bs1M count2048 #将文件设置为交换空间 [roothadoop01 data1]# mkswap /data1/swapfile #启用交换空间 [roothadoop01 da…

【Python】pandas.cut()函数的用法

pandas.cut() 函数是一个非常有用的工具,用于将数值型数据按照指定的分箱或区间进行分割,从而将连续的数值变量转换为离散的类别变量。这在数据分析和机器学习的特征工程中尤其有用,因为它可以帮助揭示不同区间内的数据分布特征,或…

【Qt问题】Qt Creator 如何链接第三方库

往期回顾 【QT问题】 Qt信号函数如果重名,调用怎么处理-CSDN博客 【Qt问题】Qt中文乱码问题解决方案(详细汇总)-CSDN博客 【Qt问题】Qt常用快捷键汇总-CSDN博客 【Qt问题】Qt Creator 如何链接第三方库 一、为什么会使用第三方库 在编写代码…

Java Web 开发 - 掌握拦截器和监听器

目录 深入了解Java Web的拦截器和监听器 拦截器(Interceptor) 拦截器的使用场景 拦截器实例 思维导图 ​编辑 监听器(Listener) 监听器的使用场景 监听器类型 监听器实例 思维导图​编辑 总结 深入了解Java Web的拦截器…

在UI界面中播放视频_unity基础开发教程

在UI界面中播放视频_unity基础开发教程 前言操作步骤结语 前言 之前我写过一篇在场景中播放视频的文章,但是在开发中有时候也会在UI的界面中播放视频,这期我们做一下在UI的界面中播放视频。 操作步骤 首先在场景中创建一个Raw Image,UI->…

DAO是什么?有什么用途?

DAO(Decentralized Autonomous Organization,去中心化自治组织)是一种基于区块链技术的组织形式,它没有中央管理层,而是通过智能合约和区块链上的代码来运作。DAO 的决策过程是透明的,通常由组织的成员通过…

java学习笔记11

20. 字符串类 字符串是指一连串的字符,它是由许多单个字符连接而成。字符串可以包含任意字符,这些字符必须包含在一对双引号""之内,例如:“abc”.java中封装了3个字符串类,分别是String类、StringBuffer类、StringBuilder类,都在java.lang包中。20.1 String类的…

孤独的城市公路(增加开始结束页面)

致敬 裴总 缺点 没有一个车没有背景音乐后期都会添加 为什么裴总良心 裴总真良心 还有音乐 还是3D 还有开始按钮 还能game 还有结尾 还有结尾提示 import arcadeSCREEN_WIDTH 700 SCREEN_HEIGHT 700 SCREEN_TITLE "孤独的城市公路" MOVEMENT_SPEED 5 …

go http框架下的静态资源代理实现(压缩,缓存验证自定义)

之前在这一篇文章里说了我的第一版静态资源代理,后面我又完善了一下: 上一种方案的问题: 首页未加入自定义代理中依赖了gin框架的file()方法反复访问本地文件,访问文件系统是很消耗性能的 所以本次我做了改进,思路是…

0418EmpTomCat项目 初次使用ajax实现局部动态离职

0418EmpTomCat项目包-CSDN博客 数据库字段: 员工部门表 分页查询; 多条件查询; 添加新员工; ajax点击离职操作效果:

【CTF Web】BUUCTF BUU CODE REVIEW 1 Writeup(代码审计+PHP弱类型漏洞+MD5的0e绕过+反序列化)

BUU CODE REVIEW 1 1 https://github.com/glzjin/buusec_2019_code_review_1 解法 <?php /*** Created by PhpStorm.* User: jinzhao* Date: 2019/10/6* Time: 8:04 PM*/highlight_file(__FILE__);class BUU {public $correct "";public $input ""…

Fabric,一个简洁远程系统管理Python库

Fabric,一个简洁远程系统管理Python库&#xff01; 什么是 Fabric 库&#xff1f; Fabric 是一个 Python 库,用于简化远程系统管理和部署任务的执行.它提供了一种简洁的方式来定义并运行SSH 命令,使得管理远程服务器变得更加高效和便捷. 安装与使用 # 通过 pip 来安装 Fabri…

动态数据结构中的表扩张性:摊还分析、伪代码与C语言实现

动态数据结构中的表扩张性&#xff1a;摊还分析、伪代码与C语言实现 引言表扩张性的概念摊还分析在表扩张性中的应用伪代码示例&#xff1a;TABLE-INSERT操作C语言实现结论 引言 在处理数据结构时&#xff0c;尤其是表&#xff08;或数组&#xff09;&#xff0c;我们经常面临…