Hadoop学习笔记（HDP）-Part.07 安装MySQL

news2024/11/29 0:31:31

目录
Part.01 关于HDP
Part.02 核心组件原理
Part.03 资源规划
Part.04 基础环境配置
Part.05 Yum源配置
Part.06 安装OracleJDK
Part.07 安装MySQL
Part.08 部署Ambari集群
Part.09 安装OpenLDAP
Part.10 创建集群
Part.11 安装Kerberos
Part.12 安装HDFS
Part.13 安装Ranger
Part.14 安装YARN+MR
Part.15 安装HIVE
Part.16 安装HBase
Part.17 安装Spark2
Part.18 安装Flink
Part.19 安装Kafka
Part.20 安装Flume

七、安装MySQL

mysql主从复制的原理：
1）master将数据改变记录到二进制日志（binary log）中，也即是配置文件log-bin指定的文件（这些记录叫做二进制日志事件，binary log events）；
2）slave将master的binary log events拷贝到它的中继日志（relay log）；
3）slave重做中继日志中的事件，将改变反映它自己的数据（数据重演）。
主从配置注意点：

  • 主、从DB server数据库的版本一致，主DB server和从DBserver数据库数据一致 主DB
  • server开启二进制日志，主DB server和从DB server的server_id都必须唯一

1.删除MariaDB

查询并删除原有的MariaDB

ansible nn -m shell -a 'rpm -qa | grep mariadb'
ansible nn -m shell -a 'rpm -e --nodeps mariadb-libs-5.5.64-1.el7.x86_64'

2.安装

创建/root/ansible/mysql.yml文件

---
- hosts: nn
  tasks:
    - name: install mysql
      unarchive:
        src: "/opt/mysql-5.7.25-linux-glibc2.12-x86_64.tar.gz"
        dest: "/usr/local/"
    - name: create group
      group:
        name: mysql
        state: present
    - name: create user
      user:
        name: mysql
        group: mysql
        state: present
    - name: create directory
      file:
        path: "/data01/mysql/mariadb"
        state: directory
        owner: mysql
        group: mysql
        recurse: yes
    - name: create file of log
      file:
        path: "/data01/mysql/mariadb/mariadb.log"
        state: touch
        owner: mysql
        group: mysql

执行安装

ansible-playbook mysql.yml

3.配置

创建配置文件/etc/my.cnf，hdp01的server-id为100，hdp02的server-id为200

[mysqld]
user = mysql   # mysqld程序在启动后将在给定UNIX/Linux账户下执行。mysqld必须从root账户启动才能在启动后切换到另一个账户下执行
basedir = /usr/local/mysql-5.7.25-linux-glibc2.12-x86_64/      # MySQL安装的绝对路径
datadir = /data01/mysql/data    # MySQL数据存放的绝对路径

socket = /data01/mysql/mysql.sock       # socket文件路径
port = 3306     # 服务端口号
server-id=100   # MySQL服务的唯一编号，每个MySQL服务的id需唯一

default_authentication_plugin = mysql_native_password

character-set-server = utf8mb4          # 数据库默认字符集, 主流字符集支持一些特殊表情符号（特殊表情符占用4个字节）
collation-server = utf8mb4_general_ci   # 数据库字符集对应一些排序等规则，注意要和character-set-server对应
init_connect='SET NAMES utf8mb4'        # 设置client连接mysql时的字符集,防止乱码
lower_case_table_names = 1              # 是否对 sql 语句大小写敏感，1 表示不敏感

key_buffer_size = 16M   # 用于指定索引缓冲区的大小
max_allowed_packet = 1024M # 设置一次消息传输的最大值，如果有BLOB对象建议修改成1G
sql_mode = TRADITIONAL  # 表示SQL模式的参数，通过这个参数可以设置检验SQL语句的严格程度
pid-file = /data01/mysql/data/mysql.pid # pid-file文件路径
log-bin=/data01/mysql/mysql-bin # 二进制文件存放路径，生产环境下建议将bin-log和data分磁盘存储，避免日志打满影响数据
max_connections = 1000                  # 设置最大连接数

[mysqld_safe]
log-error = /data01/mysql/mariadb/mariadb.log
pid-file = /data01/mysql/mariadb/mariadb.pid

[client]
port = 3306
socket = /data01/mysql/mysql.sock

4.初始化

【hdp01】【hdp02】初始化基础信息，得到数据库的初始密码，在root账号下执行

cd /usr/local/mysql-5.7.25-linux-glibc2.12-x86_64/bin/
./mysqld --initialize

5.配置系统服务

【hdp01】【hdp02】
配置mysqld系统服务文件/usr/lib/systemd/system/mysql.server.service

[Unit]
Description=Mysql
After=syslog.target network.target remote-fs.target nss-lookup.target

[Service]
Type=forking
PIDFile=/data01/mysql/data/mysql.pid
ExecStart=/usr/local/mysql-5.7.25-linux-glibc2.12-x86_64/support-files/mysql.server start
ExecReload=/bin/kill -s HUP $MAINPID
ExecStop=/bin/kill -s QUIT $MAINPID
PrivateTmp=false

[Install]
WantedBy=multi-user.target

重新加载

systemctl daemon-reload

通过系统服务启动mysql.server并查看服务状态

systemctl start mysql.server
systemctl status mysql.server

6.重置root密码

【hdp01】【hdp02】做软链接，方便登录

ln -s /usr/local/mysql-5.7.25-linux-glibc2.12-x86_64/bin/mysql /usr/local/sbin/mysql

使用初始化获得的root密码登录一直报错，所以需要按照如下方法免密进入。
在这里插入图片描述
先停掉原有的系统服务mysql.server，手工携带参数–skip-grant-tables启动MySQL程序，用以免密进入MySQL修改密码（系统服务已经写好了启动参数，因此手工携带参数单次启动）
systemctl stop mysql.server
cd /usr/local/mysql-5.7.25-linux-glibc2.12-x86_64/support-files/
./mysql.server start --skip-grant-tables
先清空root密码及修改为远程登录
mysql -uroot -p
use mysql;
update user set authentication_string=‘’,host=‘%’ where user=‘root’;
flush privileges;
手工停掉免密登录的MySQL进程，以服务形式启动MySQL
./mysql.server stop
systemctl start mysql.server
再次登陆的时候是空密码登陆，然后修改密码
mysql -uroot -p
alter user ‘root’@‘%’ identified by ‘lnyd@LNsy115’;
flush privileges;

7.主从配置

【hdp01】在mysql中，查看主节点信息

show master status;

在这里插入图片描述
创建用于slave同步日志的账号master

create user 'master'@'192.168.111.202' identified with mysql_native_password by 'Aa@123456';
grant replication slave on *.* TO 'master'@'192.168.111.202';
flush privileges;

【hdp02】在mysql中，配置为slave模式

stop slave;
reset slave;
change master to master_host="192.168.111.201", master_user="master",master_password="Aa@123456", master_log_file="mysql-bin.000014",master_log_pos=605;

CHANGE MASTER TO MASTER_HOST：主服务器的IP地址
MASTER_USER：主服务器上用于同步账号
MASTER_PASSWORD：同步账号的密码
MASTER_LOG_FILE：bin日志的文件名，取自主节点SHOW MASTER STATUS结果
MASTER_LOG_POS：bin Eposition值，取自主节点SHOW MASTER STATUS结果
启用从节点

start slave;

在这里插入图片描述
查看从节点状态

show slave status\G;

观察Slave_IO_Running和Slave_SQL_Running如果为YES，说明运行正常
在这里插入图片描述
如果出现NO，可能是slave机器重起后，事务回滚造成的，在从节点上执行如下：

stop slave;
set GLOBAL SQL_SLAVE_SKIP_COUNTER=1;
start slave;

8.测试

在主节点上创建测试账号及测试库，查看从节点是否同步
【hdp01】创建测试账号及测试数据库、测试表

create user 'test_user_0212'@'localhost';
flush privileges;
create database test_db_0212;
create table test_db_0212.test_table_0212 (id integer);

【hdp02】查看是否存在测试账号、测试数据库及测试表

select user,host from mysql.user where user='test_user_0212';

在这里插入图片描述

show databases;

在这里插入图片描述

describe test_db_0212.test_table_0212;

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1286374.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

手动创建spring bean并注入

手动创建spring bean并注入

文章目录 前言一、jar包中,相同class不同类加载器加载的时候是同一个class嘛？二、利用ConfigurableListableBeanFactory手动注册bean注册bean,并自动注入依赖bean根据类型获取注入的bean,两个bean是一个吗? 三、同一份字节码,class隔离,bean隔离总结 前言 注入一个…
阅读更多...
Linux的IO模型——阻塞IO

Linux的IO模型——阻塞IO

当要读数据recvfrom时，其实就需要两个阶段，一是将硬盘数据读到内核缓冲区，二是将内核缓冲区数据拷贝到用户缓冲区。而阻塞IO就是在两个阶段中用户进程都必须阻塞等待。
阅读更多...
ES通过抽样agg聚合性能提升3-5倍

ES通过抽样agg聚合性能提升3-5倍

一直以来，es的agg聚合分析性能都比较差（对应sql的 group by）。特别是在超多数据中做聚合，在搜索的条件命中特别多结果的情况下，聚合分析会非常非常的慢。 一个聚合条件：聚合分析请求的时间 search time a…
阅读更多...
网页开发 CSS

网页开发 CSS

目录 CSS 概述 CSS 引入方式 CSS 选择器 基本选择器 组合选择器 伪类选择器 样式继承 选择器优先级 CSS 属性操作 文本属性 背景属性 边框属性 列表属性 dispaly属性 盒子模型（重点） float属性（重点） CSS 概述 C…
阅读更多...
基于go文件同步工具的升级迭代

基于go文件同步工具的升级迭代

介绍 同样，该工具适用于多个项目不同版本的维护，文件更新和新增的同步(自动创建目录)，支持自动提交svn。 升级迭代 之前的文件同步工具，依赖chrome和http包，有时候js加载页面不太稳定，所以有空闲就升级迭…
阅读更多...
leetcode115.从中序与后序遍历序列构造二叉树，手把手带你构造二叉树（新手向）

leetcode115.从中序与后序遍历序列构造二叉树，手把手带你构造二叉树（新手向）

构造二叉树是树问题中的难点（相对于遍历二叉树），一开始做的读者会感觉无从下手，这道题在训练营专栏里讲过，是四道题一起讲的，但是现在看来讲的并不全面、具体，所以想单独出一期再来讲一下如何构…
阅读更多...
老师怎样克服公开课的心理恐惧？

老师怎样克服公开课的心理恐惧？

公开课是老师进修学习和交流教学经验的必要手段，但是，很多老师在面对公开课时会出现心理恐惧，在讲台上发挥不自如，影响教学效果。下面就是一些克服公开课心理恐惧的方法： 一、充分准备 准备充分是心理恐惧的最好解决方…
阅读更多...
2023.12.4 关于 Spring Boot 统一异常处理

2023.12.4 关于 Spring Boot 统一异常处理

目录 引言 统一异常处理 异常全部监测 引言 将异常处理逻辑集中到一个地方，可以避免在每个控制器或业务逻辑中都编写相似的异常处理代码，这降低了代码的冗余，提高了代码的可维护性统一的异常处理使得调试和维护变得更加容易，通…
阅读更多...
deepflow本地部署过程

deepflow本地部署过程

本地服务器配置，32C，48G内存 整个过程需要配置k8s，安装helm, 安装grafana, 安装deepflow以及deepflow-ctl，以及部署demo 在采用sealos进行ALL-IN-ONE部署之前， grafana 先安装它 wget -q -O /usr/share/keyrings/gr…
阅读更多...
VSCode + gdb + gdbserver调试ARM程序

VSCode + gdb + gdbserver调试ARM程序

在开发ARM嵌入式端C/C程序时，一般会在PC上编写代码，在Linux服务器上编译，然后将程序复制或挂载到ARM开发板上运行。如果程序出了问题，在不使用gdb的情况下，经常在代码中添加打印，编译，然后在开发…
阅读更多...
nodejs+vue+ElementUi小区社区公寓宿舍智能访客预约系统

nodejs+vue+ElementUi小区社区公寓宿舍智能访客预约系统

该系统将采用B/S结构模式，前端部分主要使用html、css、JavaScript等技术，使用Vue和ElementUI框架搭建前端页面，后端部分将使用Nodejs来搭建服务器，并使用MySQL建立后台数据系统，通过axios完成前后端的交互，…
阅读更多...
内网渗透Dump Hash之NTDS.dit

内网渗透Dump Hash之NTDS.dit

Ntds.dit 在活动⽬录中，所有的数据都保存在域控的ntds.dit⽂件中。 ntds.dit是⼀ 个⼆进制⽂件，⽂件路径为域控的%SystemRoot%\ntds\ntds.dit。NTDS.dit 包 含不限于⽤户名、散列值、组、GPP、OU等活动⽬录的信息。系统运维⼈员可以使⽤VSS实 现对该⽂件…
阅读更多...
金蝶云星空单据编辑界面，不允许批量填充操作【分条件】

金蝶云星空单据编辑界面，不允许批量填充操作【分条件】

文章目录 金蝶云星空单据编辑界面，不允许批量填充操作【分条件】前提说明案例演示开发设计测试填充值清空值 金蝶云星空单据编辑界面，不允许批量填充操作【分条件】 前提说明 上一个文章的设计，不管是填充值，还是清空值都一律不…
阅读更多...
【matlab程序】matlab画螺旋图|旋转图

【matlab程序】matlab画螺旋图|旋转图

%% 数学之美====》螺旋线 % 海洋与大气科学 % 20231205 clear;clc;close all; n=10; t=0:0.01:2pin; R=1; xx=nan(length(t),1);yy=nan(length(t),1); for i=1:length(t) xx(i)=Rcos(t(i)); yy(i)=Rsin(t(i)); R=R+1; end figure set(gcf,‘position’,[50 50 1200 1200],‘col…
阅读更多...
基于PIPNet的人脸106关键点检测

基于PIPNet的人脸106关键点检测

做美颜需要使用到人脸关键点，所以整理了一下最近的想法。 按模型结构分类： 1.Top-Down: 分为两个步骤，首先，对于原始输入图片做目标检测，比如做人脸检测，将人脸区域抠出，单独送进关键点检测模…
阅读更多...
sql-SQL练习生

sql-SQL练习生

推荐一款inscode内的模板SQL练习生，此文附带目前所有题的答案 如有错误欢迎斧正~ https://inscode.csdn.net/TPEngineer/SQLBoy 为了更好的体验，请按下面的方法打开： 1.运行一下 2.等待加载 3.在网页打开 温馨提醒：此处做题不会保…
阅读更多...
【交叉编译】

【交叉编译】

一、什么是交叉编译 二、为什么要交叉编译？ 三、交叉编译要用到的工具（工具链、交叉编译器） 四、交叉编译工具链的安装 五、配置环境变量 六、交叉编译工具编译 七、带wiringPi库的交叉编译如何进行 八、软链接、硬链接 九、Linux创建链接命令…
阅读更多...
nodejs+vue+ElementUi牙科诊所信息化系统

nodejs+vue+ElementUi牙科诊所信息化系统

该系统将采用B/S结构模式，前端部分主要使用html、css、JavaScript等技术，使用Vue和ElementUI框架搭建前端页面，后端部分将使用Nodejs来搭建服务器，并使用MySQL建立后台数据系统，通过axios完成前后端的交互，…
阅读更多...
认识异常 ---java

认识异常 ---java

目录 一. 异常的概念 二. 异常的体系结构 三. 异常的分类 三. 异常的处理 3.1 异常的抛出throw 3.2. 异常声明throws 3.3 捕获并处理try-catch finally 3.4异常的处理流程 四. 自定义异常类 一. 异常的概念 在 Java 中，将程序执行过程中发生的不正常行为称为…
阅读更多...
CPP-SCNUOJ-Problem P24. [算法课贪心] 跳跃游戏

CPP-SCNUOJ-Problem P24. [算法课贪心] 跳跃游戏

Problem P24. [算法课贪心] 跳跃游戏 给定一个非负整数数组 nums ，你最初位于数组的 第一个下标 。 数组中的每个元素代表你在该位置可以跳跃的最大长度 判断你是否能够到达最后一个下标。 输入 输入一行数组nums 输出 输出true/fasle 样例 标准输入 2 3 1 …
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023