【大数据存储与处理】第一次作业

news2025/2/4 6:37:23

hbase 启动步骤

1、启动 hadoop，master 虚拟机，切换 root 用户，输入终端命令：start-all.sh

2、启动 zookeeper，分别在 master、slave1、slave2 虚拟机终端命令执行：zkServer.sh start

3、启动 hbase，master 虚拟机终端输入命令：start-hbase.sh

4、输入 hbase shell，进入 hbase 操作命令。

hbase 关闭步骤

1、hbase shell 中输入 exit；

2、关闭 hbase，master 终端命令输入：stop-hbase.sh

3、关闭 zookeeper，分别在 master、slave1、slave2 虚拟机终端命令执行：zkServer.sh stop

4、关闭 hadoop，master 终端输入命令：stop-all.sh

Mongodb的启动与关闭

一、启动步骤

1、mongodb服务启动：

（1）master输入终端命令：mongod --journal -f /home/app/mongodb/master.conf

（2）slave1输入终端命令：mongod --journal -f /home/app/mongodb/slave1.conf

（3）slave2输入终端命令：mongod --journal -f /home/app/mongodb/arbiter.conf

2、打开数据库：master输入终端命令：mongo 192.168.226.132

二、关闭步骤：

1、master中mongodb数据库操作中输入：exit; 可以退出mongodb；

2、关闭mongodb服务：

（1）master输入终端命令：mongod --journal --shutdown -f /home/app/mongodb/master.conf（2）slave1输入终端命令：mongod --journal --shutdown -f /home/app/mongodb/slave1.conf（3）slave2输入终端命令：mongod --journal --shutdown -f /home/app/mongodb/arbiter.conf

Neo4j的启动与关闭

一、服务启动：

1、打开master、slave1、slave2虚拟机终端，输入：cd /home/app/neo4j/bin

2、master、slave1、slave2虚拟机终端分别输入: ./neo4j start3、master中打开浏览器输入网址：192.168.226.132:74744、用户名：neo4j，密码：123456

二、服务关闭：

master、slave1、slave2虚拟机终端分别输入: ./neo4j stop

Redis集群启动与关闭

一、服务启动：开机即启动Redis服务。

二、查看集群状态：redis-cli -h 192.168.126.140 -a 123456 #数据库密码：123456info replication

修改大数据在线平台的IP地址配置

1. 更新 /etc/hosts 文件

打开 hosts 文件：vi /etc/hosts
修改主节点（master）、从节点1（slave1）、从节点2（slave2）的IP地址。

2. 更新 Hive 配置

打开 hive-site.xml：vi /home/app/hive/conf/hive-site.xml
修改主节点的 javax.jdo.option.ConnectionURL。

3. 更新 MongoDB 配置

主节点：vi /home/app/mongodb/master.conf
- 修改：bind_ip=192.168.126.140
从节点1：vi /home/app/mongodb/slave1.conf
- 修改：bind_ip=192.168.126.141
从节点2：vi /home/app/mongodb/arbiter.conf
- 修改：bind_ip=192.168.126.142

4. 启动 MongoDB 服务

主节点：mongod --journal -f /home/app/mongodb/master.conf
从节点1：mongod --journal -f /home/app/mongodb/slave1.conf
从节点2：mongod --journal -f /home/app/mongodb/arbiter.conf

5. 打开 MongoDB 数据库

主节点：mongo 192.168.126.140

6. 更新 MongoDB 副本集配置

在 MongoDB shell 中执行以下命令：
- show dbs
- rs.status()
- rs.conf()
- 修改配置中的IP地址。
- rs.reconfig(config, { force: true })
- 检查状态：rs.status()

7. 更新 Neo4j 配置

主节点/从节点1/从节点2：vi /home/app/neo4j/conf/neo4j.conf
- 为不同设置更新IP地址。
- 例如从节点1的示例：
- ha.server_id=2
- ha.initial_hosts=192.168.126.140:5001,192.168.126.141:5001,192.168.126.142:5001
- dbms.mode=HA
- dbms.connectors.default_listen_address=192.168.126.141
- ha.server=192.168.126.140:6362