池化整合多元数据库,zData X 一体机助力证券公司IT基础架构革新

news2024/11/19 5:56:07

引言

近期,云和恩墨 zData X 多元数据库一体机(以下简称 zData X)在某证券公司的OA、短信和CRM业务系统中成功上线,标志着其IT基础架构完成从集中式存储向池化高性能分布式存储的转变。zData X 成功整合了该证券公司使用的达梦、Oracle、MySQL、PostgreSQL等多套不同类型数据库,实现了资源利用率40%的提升,并显著降低了基础设施成本和运维管理复杂度。此外,业务系统的查询性能得到了10倍以上的提升,充分满足了业务系统对高性能、高可用、易扩展以及信创化的多方面要求。此次基础架构的升级改造不仅为案例客户的数据库系统建设提供了理论和技术支持,也为从一般业务系统向核心业务系统的渐进式改造奠定了基础。

01

金融科技和信创趋势下,券商布局IT基础架构革新

在业务快速发展的带动下,案例客户的业务系统变得越来越多样化,数据量也随之激增。为了支撑核心业务,该证券公司选择了 Oracle 和 MySQL 作为数据库引擎,并在近年来的政策和业务发展驱动下,逐步引入了达梦等国产数据库。目前,以 MySQL、Oracle 为主的数据库数量已超过百套。同时,为了提升数据分析效率,该证券公司还引入了数据仓库平台和大数据应用平台,以支撑分析类业务。

在这种多元数据库环境下,随着数据量的激增,数据架构规划和设计中的问题逐渐显现:

  • 性能问题日益突出:核心数据库的TOP SQL语句响应时间不断增加,受限于集中式存储控制器的瓶颈,I/O能力无法满足业务需求,导致CPU消耗增加,影响业务性能。

  • 数据库系统扩容困难:受限于集中式数据库的特性,大多数数据库缺乏有效的扩容方案,而 Oracle 的RAC虽然可以增加节点,但性能增益并不显著,无法实现真正的线性扩容。

  • 系统资源利用率不足:为确保数据库系统稳定运行,核心系统的数据库资源配置较高,导致IT成本居高不下。

  • 信创挑战:金融信创的落地应用需要将外部政策与监管要求转化为内部实践,同时探索更先进的数字化底层基础技术。

面对挑战,案例客户作为一家在国内证券行业具有竞争力和影响力的上市券商,积极探索一套能够稳定支撑、敏捷响应、降本增效且符合自主创新路径的IT基础架构,以适应未来业务发展的需求。

02

从集中式架构到池化分布式架构的成功迁移

2023年,该证券公司引入了云和恩墨的多元数据库一体机 zData X,将IT基础架构从集中式改造为分布式,实现了多元异构数据库系统的池化整合,有效降低了IT成本,提升了资源利用率和系统性能。

ce09efa8fbd4e826366533f84450c328.png

解决方案架构图

03

实践进阶,构建面向未来的多元数据库高性能运行平台

zData X 基于云和恩墨自研的高性能分布式存储软件 zStorage,实现存算分离架构,融合高性能计算、分布式全闪存存储、RoCE网络和数据库管理服务,支持多种商业、开源和国产数据库,包括 Oracle、MySQL、PostgreSQL、MogDB、达梦、人大金仓、openGauss 等,并可根据需求进行配置,满足不同规模系统对数据库性能、可靠性和扩展性的要求。在案例客户的数据库基础架构改造项目中,zData X 在技术层面实现了多项创新:

  • 自适应锁核能力:通过线程绑定固定CPU核,减少上下文切换开销,每I/O节省10-20微秒,降低关键业务时延。

  • 自适应Cache锁能力:数据库分布式存储读写线程绑核,减少锁的争抢和排队开销,使数据库读写性能提升4倍。

  • 支持双模副本能力:同时支持传统两副本、三副本模式和性能三副本模式,写时延降低50%,提供更强的分布式存储性能保障。

  • 高可用能力:能够应对各种故障场景,保障数据库稳定运行,提升业务系统稳定性。

从技术指标来看,基于 zData X 的分布式存储数据库架构,在整体性能上远超“x86+集中存储”的架构。以3个存储节点为例,单节点IOPS超过40万,系统总体IOPS超过百万。zData X 上线后,各项性能指标显著提升,DB Time降低至原来的1/20,SQL语句执行时间和I/O响应时间也均有大幅缩短。

从业务角度来看,该证券公司的常用业务功能(如:转岗人员统计、业务办理情况统计、人员职位信息变动、执业资格每日变动、转岗人员每日变动、员工考核角色设置等)的查询速度得到了大幅提升,基本都在10倍以上,前端用户体验显著改善。

04

小结

zData X 通过池化整合了案例客户的多元异构数据库环境,实现了多数据库共享存储资源池,资源利用率提升40%。zData X 具备的在线扩展能力,可以根据需求增加存储容量、存储节点和数据库节点,从而满足客户未来的扩容需求。同时,zData X 提供的软件定义存储能力,支持不同存储介质和不同品牌的服务器,构成不同的存储资源池,对该证券公司现有设备进行利旧使用,达到保护投资的目的。

通过本次基础架构的改造升级,案例客户的业务系统实现了性能、可用性和扩展性的全面提升,信创化程度显著提高;同时,资源使用单位成本和运维管理复杂度得到了有效降低。更重要的是,这为后续核心数据库的升级改造提供了可靠的实践路径参考。

f5d64ff0f06db0933a62133de8dc51f0.gif

数据驱动,成就未来,云和恩墨,不负所托!


云和恩墨创立于2011年,是业界领先的“智能的数据技术提供商”。公司总部位于北京,在国内外35个地区设有本地办公室并开展业务。

云和恩墨以“数据驱动,成就未来”为使命,致力于将创新的数据技术产品和解决方案带给全球的企业和组织,帮助客户构建安全、高效、敏捷且经济的数据环境,持续增强客户在数据洞察和决策上的竞争优势,实现数据驱动的业务创新和升级发展。

自成立以来,云和恩墨专注于数据技术领域,根据不断变化的市场需求,创新研发了系列软件产品,涵盖数据库、数据库存储、数据库云管和数据智能分析等领域。这些产品已经在集团型、大中型、高成长型客户以及行业云场景中得到广泛应用,证明了我们的技术和商业竞争力,展现了公司在数据技术端到端解决方案方面的优势。

在云化、数字化和智能化的时代背景下,云和恩墨始终以正和多赢为目标,感恩每一位客户和合作伙伴的信任与支持,“利他先行”,坚持投入于数据技术核心能力,为构建数据驱动的智能未来而不懈努力。

我们期待与您携手,共同探索数据力量,迎接智能未来。

c7abc9777881f23886e9b62ea454d8d8.gif

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1629515.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【VBA】获取指定目录下的Excel文件,并合并所有excel中的内容。

1.新建一个excel表格。并创建两个Sheet,名字分别命名为FileList 和 All information。 2.按ALTF11进入 VBA编程模块,插入模块。 3.将如下 第五部分代码复制到模块中。 点击运行即可,然后就能提取指定目录下的所有excel文件信息并合并到一起…

2021东北四省赛补题/个人题解

Dashboard - The 15th Chinese Northeast Collegiate Programming Contest - Codeforces I 模拟 #include <bits/stdc.h> using i64 long long; using namespace std; #define int long long int mp[8] {0, 7, 27, 41, 49, 63, 78, 108}; void solve() {int n; cin …

如何有效的将丢失的mfc140u.dll修复,几种mfc140u.dll丢失的解决方法

当你在运行某个程序或应用程序时&#xff0c;突然遭遇到mfc140u.dll丢失的错误提示&#xff0c;这可能会对你的电脑运行产生一些不利影响。但是&#xff0c;不要担心&#xff0c;以下是一套详细的mfc140u.dll丢失的解决方法。 mfc140u.dll缺失问题的详细解决步骤 步骤1&#x…

Atcoder Beginner Contest351 A-E Solution题解

文章目录 [A - The bottom of the ninth](https://atcoder.jp/contests/abc351/tasks/abc351_a)[B - Spot the Difference ](https://atcoder.jp/contests/abc351/tasks/abc351_b)[D - Grid and Magnet](https://atcoder.jp/contests/abc351/tasks/abc351_d)E Note&#xff1a;…

盲人地图使用的革新体验:助力视障人士独立、安全出行

在我们日常生活中&#xff0c;地图导航已经成为不可或缺的出行工具。而对于盲人群体来说&#xff0c;盲人地图使用这一课题的重要性不言而喻&#xff0c;它不仅关乎他们的出行便利性&#xff0c;更是他们追求生活独立与品质的重要一环。 近年来&#xff0c;一款名为蝙蝠…

《HCIP-openEuler实验指导手册》1.7 Apache虚拟主机配置

知识点 配置步骤 需求 域名访问目录test1.com/home/source/test1test2.com/home/source/test2test3.com/home/source/test3 创建配置文件 touch /etc/httpd/conf.d/vhost.conf vim /etc/httpd/conf.d/vhost.conf文件内容如下 <VirtualHost *.81> ServerName test1.c…

python中如何用matplotlib写雷达图

#代码 import numpy as np # import matplotlib as plt # from matplotlib import pyplot as plt import matplotlib.pyplot as pltplt.rcParams[font.sans-serif].insert(0, SimHei) plt.rcParams[axes.unicode_minus] Falselabels np.array([速度, 力量, 经验, 防守, 发球…

AtCoder Beginner Contest 351 G. Hash on Tree(树剖维护动态dp 口胡题解)

题目 n(n<2e5)个点&#xff0c;给定一个长为a的初始权值数组&#xff0c; 以1为根有根树&#xff0c; 树哈希值f计算如下&#xff1a; &#xff08;1&#xff09;如果一个点u是叶子节点&#xff0c;则f[u]a[u] &#xff08;2&#xff09;否则&#xff0c; q(q<2e5)次…

【C++】从零开始认识继承

送给大家一句话&#xff1a; 其实我们每个人的生活都是一个世界&#xff0c;即使最平凡的人也要为他生活的那个世界而奋斗。 – 路遥 《平凡的世界》 ✩◝(◍⌣̎◍)◜✩✩◝(◍⌣̎◍)◜✩✩◝(◍⌣̎◍)◜✩ ✩◝(◍⌣̎◍)◜✩✩◝(◍⌣̎◍)◜✩✩◝(◍⌣̎◍)◜✩ ✩◝(◍…

详解如何品味品深茶的精髓

在众多的茶品牌中&#xff0c;品深茶以其独特的韵味和深厚的文化底蕴&#xff0c;赢得了众多茶友的喜爱。今天&#xff0c;让我们一同探寻品深茶的精髓&#xff0c;品味其独特的魅力。 品深茶&#xff0c;源自中国传统茶文化的精髓&#xff0c;承载着世代茶人的智慧与匠心。这…

linux kernel内存泄漏检测工具之slub debug

一、背景 slub debug 是一个debug集&#xff0c;聚焦于kmem_cache 分配机制的slub内存&#xff08;比如kmalloc&#xff09;&#xff0c;这部分内存在内核中使用最频繁&#xff0c;slub debug其中有相当部分是用来处理内存踩踏&#xff0c;内存use after free 等异常的&#x…

【项目】仿muduo库One Thread One Loop式主从Reactor模型实现高并发服务器(Http板块)

【项目】仿muduo库One Thread One Loop式主从Reactor模型实现高并发服务器&#xff08;Http板块&#xff09; 一、思路图二、Util板块1、Splite板块&#xff08;分词&#xff09;&#xff08;1&#xff09;代码&#xff08;2&#xff09;测试及测试结果i、第一种测试ii、第二种…

PotatoPie 4.0 实验教程(29) —— FPGA实现摄像头图像均值滤波处理

图像的均值滤波简介 图像均值滤波处理是一种常见的图像处理技术&#xff0c;用于降低图像中噪声的影响并平滑图像。该方法通过在图像中滑动一个固定大小的窗口&#xff08;通常是一个正方形或矩形&#xff09;&#xff0c;将窗口中所有像素的值取平均来计算窗口中心像素的新值…

GateWay具体的使用之全链路跟踪TraceId日志

1.创建全局过滤器&#xff0c;在请求头上带入traceId参数&#xff0c;穿透到下游服务. package com.by.filter;import cn.hutool.core.collection.CollUtil; import cn.hutool.core.util.IdUtil; import cn.hutool.core.util.ObjectUtil; import cn.hutool.jwt.JWTValidator;…

【Kotlin】Channel简介

1 前言 Channel 是一个并发安全的阻塞队列&#xff0c;可以通过 send 函数往队列中塞入数据&#xff0c;通过 receive 函数从队列中取出数据。 当队列被塞满时&#xff0c;send 函数将被挂起&#xff0c;直到队列有空闲缓存&#xff1b;当队列空闲时&#xff0c;receive 函数将…

vue3 vite 路由去中心化(modules文件夹自动导入router)

通过路由去中心化可实现多人写作开发&#xff0c;不怕文件不停修改导致的冲突&#xff0c;modules中的文件可自动导入到index.js中 // 自动导入模块 const files import.meta.globEager(./modules/**.js); const modules {} for (const key in files) {modules[key.replace…

前端工程化Vue使用Node.js设置国内高速npm镜像源(踩坑记录版)

前端工程化Vue使用Node.js设置国内高速npm镜像源&#xff08;踩坑记录版&#xff09; 此篇仅为踩坑记录&#xff0c;并未成功更换高速镜像源&#xff0c;实际解决方法见文末跳转链接。 1.自身源镜像 自身镜像源创建Vue项目下载速度感人 2.更改镜像源 2.1 通过命令行配置 前提…

在Redux Toolkit中使用redux-persist进行状态持久化

在 Redux Toolkit 中使用 redux-persist 持久化插件的步骤如下: 安装依赖 npm install redux-persist配置 persistConfig 在 Redux store 配置文件中(例如 rootReducer.js)&#xff0c;导入必要的模块并配置持久化选项: import { combineReducers } from redux; import { p…

【MySQL关系型数据库】基本命令、配置、连接池

目录 MySQL数据库 第一章 1、什么是数据库 2、数据库分类 3、不同数据库的特点 4、MySQL常见命令&#xff1a; 5、MySQL基本语法 第二章 1、MySQL的常见数据类型 1、数值类型 2、字符类型 3、时间日期类型 2、SQL语句分类 1、DDL&#xff08;数据定义语言&#x…

mysql-sql-练习题-2-窗口函数

窗口函数 访问量max sum建表窗口函数连接 直播间人数 第1、3名建表排名sum 访问量max sum 每个用户截止到每月为止&#xff0c;最大单月访问次数&#xff0c;累计到该月的总访问次数 建表 create table visit(uid1 varchar(5) comment 用户id,month1 varchar(10) comment 月…