RISC-V公测平台发布 · 使用YCSB测试SG2042上的MySQL性能

news2024/11/25 10:43:56

实验介绍：

YCSB（全称为Yahoo! Cloud Serving Benchmark），该性能测试工具由Java语言编写（在之前的MC文章中也提到过这个，如果没看过的读者可以去看看之前MC那一期），主要用于云端或者服务器端的数据库性能测试工具，其内部涵盖了常见的NoSQL数据库产品，如Cassandra、MongoDB、HBase、Redis等等。

MySQL数据库服务是一个完全托管的数据库服务，可使用世界上最受欢迎的开源数据库来部署云原生应用程序。它是百分百由MySQL原厂开发，管理和提供支持。

当然，本次实验所用到的平台还是衡山-2（HS-2）RISC-V通用主板，该主板是一款专为开发者设计的标准mATX主板，该主板最高支持128GB内存，通过类似PC的丰富的接口和较强的兼容性，赋予开发者桌面级的RISC-V开发体验。

HS-2主板搭载了一颗国产的服务器级RISC-V 64核处理器（SG2042）。SG2042是目前已量产的性能最高的RISC-V处理器，主要针对高性能计算领域需求设计，适用于科学计算、工程计算、AI计算、融合计算等大算力应用场景。

实验材料：

MySQL/MySQL源代码

一台SG2042服务器（HS-2）

TPCC源代码

YCSB源代码

JDK（本教程使用系统自带的JDK 11）

实验过程：

安装MySQL：

方式一：直接通过apt安装

sudo apt install mysql-server

方式二：编译安装（此路不通）

下载源码

wget

https://cdn.mysql.com//Downloads/MySQL-8.0/mysql-8.0.34.tar.gz

如果wget太慢，可以先提前下载到电脑上，然后再传到服务器上。

解压并进入

tar -xzvf mysql-8.0.34.tar.gzcd mysql-8.0.34/mkdir buildcd build/

由于MySQL需要boost，而且直接下载boost比较慢，因此我们选择手动下载boost

https://boostorg.jfrog.io/artifactory/main/release/1.77.0/source/boost_1_77_0.tar.gz

解压

tar -xzvf boost_1_77_0.tar.gz

回到mysql的build文件夹下：

cd mysql-8.0.34/build/

运行cmake​​​​​​​

sudo cmake .. -DDEFAULT_CHARSET=utf8mb4 -DDEFAULT_COLLATION=utf8mb4_unicode_ci 
-DENABLED_LOCAL_INFILE=ON                                    -DWITH_SSL=system 
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql/server  -DMYSQL_DATADIR=/usr/local/mysql/data 
-DMYSQL_TCP_PORT=3306                                        -DDOWNLOAD_BOOST=0 
-DWITH_BOOST=/home/perfxlab01/boost_1_77_0/

编译并安装

sudo make -j64

结果提示SHM_Buffer.hpp上的代码报错，后来发现当时不支持RISC-V平台编译，因此在此建议还是通过包管理器安装mysql。

注意，如果是之前已经卸载并重装过mysql，如果出现sock无法访问，请参考：

https://stackoverflow.com/questions/70813122/getting-error-mysql-service-failed-because-the-control-process-exited-with-erro

如果提示mysql.cnf出错，只要执行以下命令即可修复。​​​​​​​

sudo touch /etc/mysql/mysql.cnf（新建mysql.cnf文件）sudo dpkg --configure -a（重新配置）

初始化设置：

sudo mysql_secure_installation

图片

 

发现没有权限

进入mysql

sudo mysql

执行以下命令：

ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password by '[你想设置的密码]';

然后退出mysql shell

接下来我们运行YCSB测试

获取YCSB

https://hub.yzuu.cf/brianfrankcooper/YCSB/releases/download/0.17.0/ycsb-0.17.0.tar.gz

或

https://github.com/brianfrankcooper/YCSB/releases/download/0.17.0/ycsb-0.17.0.tar.gz

如果wget下载太慢的话可以先在电脑上使用多线程下载工具下载到电脑上，然后上传到服务器上

传到服务器上后解压：

tar -xzvf ycsb-0.17.0.tar.gz

进入YCSB文

cd ycsb-0.17.0/

由于YCSB使用的Java语言编写，因此我们还需要JDK。不过系统以已经提前提供了JDK11，因此无需另外安装JDK。

登录数据库，创建数据库和表：​​​​​​​

create database ycsb;use ycsb;CREATE TABLE usertable (YCSB_KEY VARCHAR(255) PRIMARY KEY,FIELD0 TEXT, FIELD1 TEXT,FIELD2 TEXT, FIELD3 TEXT,FIELD4 TEXT, FIELD5 TEXT,FIELD6 TEXT, FIELD7 TEXT,FIELD8 TEXT, FIELD9 TEXT);

图片

 

编辑db.properties​​​​​​​

cd jdbc-binding/conf/mv db.properties db.properties.bakvim db.properties

db.properties内容如下：​​​​​​​

db.driver=com.mysql.cj.jdbc.Driverdb.url=jdbc:mysql://localhost:3306/ycsbdb.user=rootdb.passwd=[你的密码]

然后下载所需要的数据库驱动

wget

https://downloads.mysql.com/archives/get/p/3/file/mysql-connector-j-8.0.33.tar.gz

解压并将驱动安装到指定文件夹下：​​​​​​​

tar -xzvf mysql-connector-j-8.0.33.tar.gz cp mysql-connector-j-8.0.33/mysql-connector-j-8.0.33.jar ~/ycsb-0.17.0/jdbc-binding/lib/

载入数据：​​​​​​​

bin/ycsb load jdbc -P workloads/workloada -P ./jdbc-binding/conf/db.properties -cp ./jdbc-binding/lib/mysql-connector-j-8.0.33.jar

然后就是跑分时间：​​​​​​​

bin/ycsb run jdbc -P workloads/workloada -P ./jdbc-binding/conf/db.properties -cp ./jdbc-binding/lib/mysql-connector-j-8.0.33.jar

（上面两个步骤时间比较长，可以在等的时候顺便泡杯咖啡或者看一会番等等）

如果提示Python报错，那是因为YCSB使用的是Python 2代码，虽然有人试图将Python3支持与主仓库合并，但是却一直没有被合并进去（0.17.0依旧还是使用Python 2）。

先安装python2

sudo apt install python2

更改链接​​​​​​​

sudo rm /usr/bin/pythonsudo ln -s /usr/bin/python2 /usr/bin/python

测试一下：

python --version

如果提示Python 2.7.18那就说明已经成功将链接改到python 2了。

然后重新尝试执行载入数据并跑分

跑分结果：

[OVERALL], RunTime(ms), 1180970
[OVERALL], Throughput(ops/sec), 84.67615604122035
[TOTAL_GCS_Copy], Count, 127
[TOTAL_GC_TIME_Copy], Time(ms), 2214
[TOTAL_GC_TIME_%_Copy], Time(%), 0.18747300947526185
[TOTAL_GCS_MarkSweepCompact], Count, 6
[TOTAL_GC_TIME_MarkSweepCompact], Time(ms), 526
[TOTAL_GC_TIME_%_MarkSweepCompact], Time(%), 0.044539658077681905
[TOTAL_GCs], Count, 133
[TOTAL_GC_TIME], Time(ms), 2740
[TOTAL_GC_TIME_%], Time(%), 0.23201266755294375
[READ], Operations, 49947
[READ], AverageLatency(us), 1485119.70881134
[READ], MinLatency(us), 20192
[READ], MaxLatency(us), 66584575
[READ], 95thPercentileLatency(us), 3217407
[READ], 99thPercentileLatency(us), 3725311
[READ], Return=OK, 49947
[CLEANUP], Operations, 100
[CLEANUP], AverageLatency(us), 207285.48
[CLEANUP], MinLatency(us), 4828
[CLEANUP], MaxLatency(us), 6111231
[CLEANUP], 95thPercentileLatency(us), 999935
[CLEANUP], 99thPercentileLatency(us), 1299455
[UPDATE], Operations, 50053
[UPDATE], AverageLatency(us), 609746.7518030887
[UPDATE], MinLatency(us), 22224
[UPDATE], MaxLatency(us), 2666495
[UPDATE], 95thPercentileLatency(us), 1309695
[UPDATE], 99thPercentileLatency(us), 1539071
[UPDATE], Return=OK, 50053

总结：

从跑分结果来看，SG2042在数据库应用方面还是比较不错的，但是由于YCSB使用的是Python 2，而Python 2已于2020年1月1日停止支持，因此也希望YCSM尽快迁移到Python 3上。

参考资料：

MySQL中文官网：

https://www.mysql.com/cn/

YCSB的jdbc文档

https://github.com/brianfrankcooper/YCSB/tree/master/jdbc

Port ycsb to Python3 and also make it Python2 compatible #1421（Github）

https://github.com/brianfrankcooper/YCSB/pull/1421

MySQL server fails to build on RISC-V 64

https://bugs.mysql.com/bug.php?id=100356

正文完

  • About HS-2

HS-2 RISC-V通用主板是澎峰科技与合作伙伴共同研发的一款专为开发者设计的标准mATX主板，它预装了澎峰科技为RISC-V高性能服务器定制开发的软件包，包括各种标准bencmark、支持V扩展的GCC编译器、计算库、中间件以及多种典型服务器应用程序。

HS-2 RISC-V通用主板搭载了一颗国产RISC-V 64核处理器（SG2042）。SG2042是目前已量产的性能最高的RISC-V处理器，主要针对高性能计算领域需求设计，适用于科学计算、工程计算、AI计算、融合计算等大算力应用场景。

图片

  • 关于RISC-V公共测试平台

    图片

RISC-V高性能处理器公共测试云平台 ·快速使用指南，下载链接：https://www.kdocs.cn/l/cmnYcyFIlVRx

  • RISC-V公共测试云平台系列文章

  1.  RISC-V公测平台发布 ·Stream带宽完整测试

  2.  RISC-V公测平台发布 · 我的世界MohistMC

  3.  RISC-V公测平台发布 · 第一个WEB Server“Hello RISC-V world！”

  4.  RISC-V公测平台发布 ·如何在SG2042上玩转k3s

  5. “RISC-V成长日记” blog发布，第一个运行在RISC-V服务器上的blog?

  6. RISC-V公测平台发布：如何在SG2042上玩转OpenMPI

  7. RISC-V公测平台发布：Compiling The Fedora Linux Kernel Natively on RISC-V

  8.  RISC-V公测平台发布 · Unix Bench完整测试

  9. RISC-V公测平台发布 · 使用YCSB测试SG2042上的MySQL性能（本篇）

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/859431.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

WebSocket整合spring 一文全部搞定

WebSocket整合spring 一文全部搞定

文章声明 本文简单整合了webSocket 组件，涉及到的源码分解，原理什么的以后再说，本文只适合入门小白体验，不涉及复杂业务逻辑。 文章目录 1 引入webSocket依赖包2 声明式整合WebSocket(这是一道硬菜)2.1 webSocket 配置类2.2 webs…
阅读更多...
Java 数据库时间返回前端显示错误（差8个小时）

Java 数据库时间返回前端显示错误（差8个小时）

文章目录 JsonFormat 与 DateTimeFormat 使用0 可能错误截图1 在属性上加自定义Json返回注释 JsonSerialize2 新建实体类 CustomDateTimeSerializer3 前端传后端格式转换（ISO 日期格式）转（Data)4 一个注释解决双端转化问题 JsonFormat 与 Dat…
阅读更多...
Java 本地缓存之王：Caffeine 保姆级教程

Java 本地缓存之王：Caffeine 保姆级教程

一、Caffeine介绍 1、缓存介绍 缓存(Cache)在代码世界中无处不在。从底层的CPU多级缓存，到客户端的页面缓存，处处都存在着缓存的身影。缓存从本质上来说，是一种空间换时间的手段，通过对数据进行一定的空间安排，使得下…
阅读更多...
matplotlib 为图顶部和图右部的坐标轴添加标记label

matplotlib 为图顶部和图右部的坐标轴添加标记label

Matplotlib 中，默认情况下，只有底部和左侧的坐标轴有标记 1 设置底部坐标轴标签 通过使用ax.xaxis.set_label_position() 调整标签的位置 import matplotlib.pyplot as plt# 创建一个图表 fig, ax plt.subplots()# 生成示例数据 x [1, 2, 3, 4, 5] …
阅读更多...
激光焊接塑料多点测试全画面穿透率测试仪

激光焊接塑料多点测试全画面穿透率测试仪

工程塑料由于其具有高比强度、电绝缘性、耐磨性、耐腐蚀性等优点，已广泛应用于各个重要领域。另一方面，工程塑料还具有良好的焊接性，是制成复合材料的基体材料的优良选择，因此目前已成为国内外新型复合材料的研究热点。 工程塑料…
阅读更多...
网络安全 Day27-运维安全项目-iptables防火墙

网络安全 Day27-运维安全项目-iptables防火墙

iptables防火墙 1. 防火墙概述2. 防火墙2.1 防火墙种类及使用说明2.2 必须熟悉的名词2.3 iptables 执行过程※※※※※2.4 表与链※※※※※2.4.1 简介2.4.2 每个表说明2.4.2.1 filter表 :star::star::star::star::star:2.4.2.2 nat表 2.5 环境准备及命令2.6 案例01&#xff1a…
阅读更多...
c基础扫雷

c基础扫雷

和三子棋一样，主函数先设计游戏菜单界面，这里就不做展示了。 初始化棋盘 初级扫雷大小为9*9的棋盘，但排雷是周围一圈进行排雷(8格)，而边界可能会越界。数组扩大了一圈,行和列都加了2，所以我们用一个11*11的数组来初始化…
阅读更多...
【论文阅读】基于深度学习的时序预测——Informer

【论文阅读】基于深度学习的时序预测——Informer

系列文章链接 论文一：2020 Informer：长序列数据预测 论文二：2021 Autoformer：长序列数据预测 文章地址：https://arxiv.org/abs/2012.07436 github地址：https://github.com/zhouhaoyi/Informer2020 参考解读…
阅读更多...
MySql之主从复制延时

MySql之主从复制延时

MySql之主从复制延时 一、MySQL主从复制模型 一切都要从MySQL的主从复制模型开始说起，下图是最经典的MySQL主从复制模型架构图： 主从架构依赖于MySQL Binlog功能，Master节点上产生Binlog并将Binlog写入到Binlog文件中。 Slave节点上启动两…
阅读更多...
java+springboot+mysql小区宠物管理系统

java+springboot+mysql小区宠物管理系统

项目介绍： 使用javaspringbootmysql开发的小区宠物管理系统，系统包含超级管理员，系统管理员、用户角色，功能如下： 超级管理员：管理员管理；用户管理；宠物分类；宠物管理&…
阅读更多...
沁恒ch32V208处理器开发（二）工程配置

沁恒ch32V208处理器开发（二）工程配置

概述 MounRiver Studio在进行任何项目的开发时，为了提高效率，往往需要复用芯片厂家或第三方开发的成熟模块，这些模块通过一个.wvproj文件来进行组织，主要包含： 1）MCU厂家提供的硬件接口文件，包…
阅读更多...
20、stm32使用FMC驱动SDRAM(IS42S32800G-6BLI)

20、stm32使用FMC驱动SDRAM(IS42S32800G-6BLI)

本文将使用安富莱的STM32H743XIH板子驱动SDRAM 引脚连接情况 一、CubeMx配置工程 1、开启调试口 2、开启外部高速时钟 配置时钟树 3、开启串口1 4、配置MPU 按照安富莱的例程配置： /* ********************************************************************…
阅读更多...
用yum部署Zabbix（监控）！

用yum部署Zabbix（监控）！

目录 一、zabbix 是什么？ 二、zabbix 监控原理 三、 安装 zabbix 3.1部署 zabbix 服务端 3.2 解决 zabbix-server Web页面中文乱码问题 3.2.1 解决问题 3.3 部署 zabbix 客户端 3.3.1服务端和客户端都配置时间同步 3.3.2客户端配置时区，与服务器保…
阅读更多...
windows配置git公钥，读写远程git项目

windows配置git公钥，读写远程git项目

首先Windows电脑需要下载并安装git： 从官网直接下载然后安装即可：https://git-scm.com/download/win 添加公钥 ssh-keygen -t rsa -C "xxxxxxx.com"注意：这个xxxxxxx.com与github注册的邮箱一致 然后一路回车，生成完…
阅读更多...
centos7 安装wkhtmltopdf 0.12.6

centos7 安装wkhtmltopdf 0.12.6

最近恰好有html转图片的需要, 大约8年前也有使用过. 时间太久了, 也忘记, 以为有新技术出现, 百度了一圈, 都验证了下, 发现还是wkhtml功能最好用! 再次记录下, 方便使用的时候找的到, 也方便需要的小伙伴, 能更好的找到一份完整记录! wkhtmltopdf 看网上安装教程都是老版本的…
阅读更多...
章节2：客户端的Cookie

章节2：客户端的Cookie

章节2：客户端的Cookie 无状态的影响 现实：每个请求都是独立的 需求：保持会话 cookie内容 key/value 格式，例如： namewuya id99 islogin1 cookie怎么产生 Cookie格式 Set-Cookie：第一次访问&#…
阅读更多...
MyBatis框架常见面试题

MyBatis框架常见面试题

1、#{}和${}区别 ${}是Properties文件中的变量占位符，可以用于标签属性值和sql内部，属于静态文本替换，比如 : ${driver} 会被静态替换为com.mysql.jdbc.Driver #{}是 sql 的参数占位符，MyBatis 会将 sql 中的#{}替换为? 号&am…
阅读更多...
【Echart地图】jQuery+html5基于echarts.js中国地图点击弹出下级城市地图（附完整源码下载）

【Echart地图】jQuery+html5基于echarts.js中国地图点击弹出下级城市地图（附完整源码下载）

文章目录 写在前面涉及知识点实现效果1、实现中国地图板块1.1创建dom元素1.2实现地图渲染1.3点击地图进入城市及返回 2、源码分享2.1 百度网盘2.2 123云盘2.3 邮箱留言 总结 写在前面 这篇文章其实我主要是之前留下的一个心结，依稀记得之前做了一个大屏项目的时候&…
阅读更多...
springboot中@Async的简单用法

springboot中@Async的简单用法

springboot中Async的简单用法 文章目录 springboot中Async的简单用法开启配置Async的使用无返回值调用带返回值的调用 开启配置 在配置文件或者入口文件上新增注解: EnableAsync即可 Async的使用 对应需要异步调用的方法上添加Async注解即可 无返回值调用 controller代码 …
阅读更多...
中睿天下Coremail | 2023年第二季度企业邮箱安全态势观察

中睿天下Coremail | 2023年第二季度企业邮箱安全态势观察

今日，中睿天下联合Coremail邮件安全发布《2023第二季度企业邮箱安全性研究报告》，对2023第二季度和2023上半年的企业邮箱的安全风险进行了分析。 一 垃圾邮件同比下降16.38% 根据监测，2023年Q2垃圾邮件数量达到6.47亿封，环比下降…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023