大数据技术——HBase安装配置DDLDML操作

news2024/11/17 8:54:56

HBase文章目录

  • 1. HBase 安装
    • 1.1 HBase下载
    • 1.2 HBase安装
    • 1.3 HBase 初始配置
  • 2. 配置高可用并且群起集群
    • 2.1 HBase高可用
    • 2.2 群起集群
    • 2.3 进入HBase客户端
  • 3. DDL&DML操作
    • 3.1 DDL操作
    • 3.2 DML操作

1. HBase 安装

1.1 HBase下载

HBase下载官方网站直达

  • 选择自己需要的版本,建议使用稳定版的

在这里插入图片描述

1.2 HBase安装

  • 安装步骤
    • 打开远程登录窗口,进入到将安装包存放的路径,直接拉拽到窗口,会自动传输
    • 解压到相应路径
      在这里插入图片描述
      在这里插入图片描述

1.3 HBase 初始配置

  • Ⅰ 进入到环境变量配置文件
vim /etc/profile.d/my_env.sh

在这里插入图片描述

#HBASE_HOME
export HBASE_HOME=/opt/module/hbase-2.4.11
export PATH=$PATH:$HBASE_HOME/bin
  • 进入到HBase的conf目录
    在这里插入图片描述
  • Ⅱ 对hbase-env.sh文件做如下修改
    在这里插入图片描述
  • Ⅲ 对hbase-site.xml修改如下
    在这里插入图片描述
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>
 <property>
 <name>hbase.zookeeper.quorum</name>
	 <value>hadoop102,hadoop103,hadoop104</value>
	 <description>The directory shared by RegionServers. </description>
 </property>
<!-- <property>-->
<!-- <name>hbase.zookeeper.property.dataDir</name>-->
<!-- <value>/export/zookeeper</value>-->
<!-- <description> 记得修改 ZK 的配置文件 -->
<!-- ZK 的信息不能保存到临时文件夹-->
<!-- </description>-->
<!-- </property>-->
 <property>
	 <name>hbase.rootdir</name>
	 <value>hdfs://hadoop102:8020/hbase</value>
	 <description>The directory shared by RegionServers. </description>
 </property>
  • Ⅳ 对regionservers文件做出修改【不要有任何空格】
hadoop102
hadoop103
hadoop104

2. 配置高可用并且群起集群

2.1 HBase高可用

  • 高可用实现的就是在master挂掉的时候,可以有一个备用的master作为管理者来管理集群,HBase是通过zookeeper来管理Region Server的

实现步骤:
Ⅰ在 conf 目录下创建 backup-masters 文件

touch conf/backup-masters

Ⅱ在 backup-masters 文件中配置高可用 HMaster 节点

echo hadoop103 > conf/backup-masters

Ⅲ完成所有配置将HBase分发到其他的机器

 xsync hbase-2.4.11

2.2 群起集群

操作步骤:
Ⅰ启动Hadoop集群

  • 有脚本的可以使用脚本,没有的参考以下命令
//注意启动的位置按照自己配置的进行启动
sbin/start-dfs.sh
sbin/start-yarn.sh

Ⅱ启动zookeeper集群

  • 三台机器分别进入到zookeeper所在目录执行
 bin/zkServer.sh start

Ⅲ 启动HBase

  • 这是群起命令
bin/start-hbase.sh

Ⅳ 到浏览器输入网址查看可视化界面

http://hadoop102:16010
大概长这样
在这里插入图片描述

2.3 进入HBase客户端

进入命令
在这里插入图片描述

输入help,查看帮助文档,对于HBase常用命令为namespace的操作,以及DDL和DML操作,增删改查命令如下:
在这里插入图片描述

3. DDL&DML操作

3.1 DDL操作

在此之前先创建一个namespace,或者也可以使用默认的namespace

//创建操作
 create_namespace 'bigdata'
 //查看操作
 list_namespace
  • 创建表
    • 创建表时只需要指定所在namespace,列族,以及维护版本信息即可
 create 'bigdata:person', {NAME => 'info', VERSIONS => 5}, {NAME => 'msg'}
  • 查看表

    • 查看表有两个命令:list 和 describe
      • list:查看所有的表名: list
      • describe:查看一个表的详情: describe ‘person’
  • 修改表

    • 表名创建时写的所有和列族相关的信息,都可以后续通过 alter 修改,包括增加删除列族。
      • 增加列族和修改信息都使用覆盖的方法
        • alter ‘person’, {NAME => ‘add’, VERSIONS => 3}
      • 删除信息使用特殊的语法
        • alter ‘person’, ‘delete’ => ‘add’
  • 删除表

    • shell 中删除表格,需要先将表格状态设置为不可用
 disable 'person'
 drop 'person'

3.2 DML操作

写入数据
- 在 HBase 中如果想要写入数据,只能添加结构中最底层的 cell
- 入相同 rowKey,相同列的数据,会写入多个版本进行覆盖

 put 'bigdata:person','1001','info:name','lisi'
 put 'bigdata:person','1001','info:age','18'

cell回顾:
在这里插入图片描述

  • 读取数据
    • 读取数据的方法有两个:get 和 scan
      • get 最大范围是一行数据,也可以进行列的过滤读取数据的结果为多行 cell
 get 'bigdata:person','1001'
 get 'bigdata:person','1001' , {COLUMN => 'info:name'}
  • scan 是扫描数据,能够读取多行数据:推荐使用 startRow 和stopRow 来控制读取的数据,默认范围左闭右开

    • scan ‘bigdata:person’,{STARTROW => ‘1001’,STOPROW => ‘1002’}
  • 删除数据

    • delete 表示删除一个版本的数据,即为 1 个 cell,不填写版本默认删除最新的一个版本
    • deleteall 表示删除所有版本的数据,即为当前行当前列的多个 cell
 delete 'bigdata:student','1001','info:name'
 deleteall 'bigdata:student','1001','info:name'

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/133950.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Allegro孔和线被做到器件里面如何解锁操作指导

Allegro孔和线被做到器件里面如何解锁操作指导 在做PCB设计的时候,会遇到孔和线被做到器件的情况,当需要移动器件的时候,孔和线也会跟着移动。如下图 具体操作如下 选择Route选择Convert Fanout

Acwing 796子矩阵的和

Acwing 796子矩阵的和 前缀和 更新 (前缀和数组)&#xff1a;s[i][j]s[i-1][j]s[i][j-1]-s[i-1][j-1]a[i][j] 查询(x1,y1)-------(x2,y2)矩阵的元素和 Ss[x2][y2]-s[x-1][y2]-s[x2][y1-1]s[x1-1][y1-1] 输入一个 n 行 m 列的整数矩阵&#xff0c;再输入 q 个询问&#xff0c;每…

QML教程(二)视觉对象

目录 一、矩形类型&#xff1a;Rectangle 二、图像类型&#xff1a;Image 三、基类类型&#xff1a;Item 一、矩形类型&#xff1a;Rectangle 矩形是最基本的视觉效果&#xff0c;Qt Quick提供了一个矩形类型来绘制矩形。这些矩形可以用颜色或垂直渐变着色。矩形类型还可以在…

【Linux】进程程序替换及shell的模拟实现

​&#x1f320; 作者&#xff1a;阿亮joy. &#x1f386;专栏&#xff1a;《学会Linux》 &#x1f387; 座右铭&#xff1a;每个优秀的人都有一段沉默的时光&#xff0c;那段时光是付出了很多努力却得不到结果的日子&#xff0c;我们把它叫做扎根 目录&#x1f449;进程程序替…

Mybatis-Plus 映射匹配兼容性

目录 问题一&#xff1a;表字段与编码属性设计不同步 问题二&#xff1a;编码中添加了数据库中未定义的属性 问题三&#xff1a;采用默认查询开放了更多的字段查看权限 TableField 问题四&#xff1a;表名与编码开发设计不同步 TableName 从表中查询出数据&#xff0c;并…

31.项目部署

目录 1 一些概念 1.1 项目部署 1.2 WSGI 1.3 uWSGI 1.4 Nginx 2 安装环境与迁移项目 2.1 项目内容 2.2 项目配置 2.2.1 DEBUG 2.2.2 STATIC_ROOT 2.2.3 ALLOWED_HOST 3 uWSGI 3.1 安装uWSGI 3.2 配置uWSGI 3.3 启动 uWSGI 3.4 停止 uWSGI 4 …

官方更新:基于VRA Tokenomics 社区常见问题解答

您好 Verasity 社区&#xff0c; 我们最近通过 Medium 发布了最新的代币经济学&#xff0c;您可以在此处阅读。 我们引入了一些新概念来促进我们作为产品的增长&#xff0c;例如我们的企业收购基金&#xff0c;我们还澄清了我们的流通和总供应量。 在我们的代币经济学文章发布…

SpringBoot概念、创建、运行、Spring Boot 配置文件

Spring Boot 就是 Spring 框架的脚⼿架&#xff0c;它就是为了快速开发 Spring 框架⽽诞⽣的。 1.Spring Boot 优点 快速集成框架&#xff0c;Spring Boot 提供了启动添加依赖的功能&#xff0c;⽤于秒级集成各种框架。内置运⾏容器&#xff0c;⽆需配置 Tomcat 等 Web 容器…

c++11 标准模板(STL)(std::deque)(五)

定义于头文件 <deque> std::deque 迭代器 返回指向容器第一个元素的迭代器 std::deque<T,Allocator>::begin, std::deque<T,Allocator>::cbegin iterator begin(); (C11 前) iterator begin() noexcept; (C11 起) const_iterator begin() const; (C11 前)…

Spring简介及IOC使用

Spring介绍 官网&#xff1a;https://spring.io/ Spring是一个对象的容器&#xff0c;负责管理对象的创建、销毁&#xff0c;以及对象的属性注入&#xff0c;对象的之间的依赖关系。 Spring可以整合其它框架&#xff0c;他基于IOC和AOP来构架多层JavaEE系统&#xff0c;以帮助分…

linux常用命令(六)- 文件属性查看

查看文件类型 - file file命令用于辨识文件类型。 语法 file [-bcvz] [文件或目录...]b&#xff1a;列出辨识结果时&#xff0c;不显示文件名称。c&#xff1a;详细显示指令执行过程&#xff0c;便于排错或分析程序执行的情形。v&#xff1a;显示版本信息。z&#xff1a;尝试…

基于麻雀搜索算法(SSA)优化长短期记忆神经网络参数SSA-LSTM冷、热、电负荷预测(Python代码实现)

&#x1f4a5;&#x1f4a5;&#x1f49e;&#x1f49e;欢迎来到本博客❤️❤️&#x1f4a5;&#x1f4a5; &#x1f3c6;博主优势&#xff1a;&#x1f31e;&#x1f31e;&#x1f31e;博客内容尽量做到思维缜密&#xff0c;逻辑清晰&#xff0c;为了方便读者。 ⛳️座右铭&a…

第三十六讲:无线AP胖AP模式配置与管理

胖AP(Fat AP)配置一个开放式WLAN非常方便&#xff0c;需要完成的操作包括有线和无线两部分的配置。有线部分即ethernet接口的配置&#xff0c;保证AP能够接入Internet,无线部分的配置包括关联WLAN与VLAN&#xff0c;广播SSID,启用VAP&#xff0c;若无其他DHCP服务器的话&#x…

万物皆有裂痕,那是光进来的地方|2022年个人总结

前两天朋友说要做个视频&#xff0c;记录下2022年的不平凡。突然想到今年是否要写年终总结呢&#xff1f;反复挣扎后&#xff0c;感觉还是应该写个总结&#xff0c;一则记录这一年的不平凡&#xff0c;二则检视这一年的生活与工作状态。- 1 - 工作的危与机2022年对所有的人来说…

Cocos Creator 常见错误排查方法

Cocos Creator 新手开发的时候经常会遇到一些错误不知道如何解决&#xff0c;今天把这些错误总结一下&#xff0c;下次遇到的时候&#xff0c;自己知道如何分析。 对啦&#xff01;这里有个游戏开发交流小组里面聚集了一帮热爱学习游戏的零基础小白&#xff0c;也有一些正在从…

【bp靶场portswigger-服务端2】身份认证漏洞-16个实验(全)

目录 一、身份验证定义 1、三个身份验证因素 2、身份验证和授权 3、身份验证漏洞的产生 4、实验的字典 二、基于密码的登录中的漏洞 1、强制策略 2、用户枚举 3、有缺陷的强力保护 实验1&#xff1a;通过不同响应的用户名枚举 实验4&#xff1a;通过细微不同的响应进…

【Web前端】一文带你吃透CSS(完结篇)

前端学习路线小总结&#xff1a; 基础入门&#xff1a;HTML CSS JavaScript 三大主流框架&#xff1a;VUE REACT Angular 深入学习&#xff1a;小程序 Node jQuery TypeScript 前端工程化 文章目录一.CSS布局-对齐1.水平对齐1.1元素居中对齐1.2文本居中对齐1.3图片居中对齐1.4使…

九章 - 2022年度文章大合集

今天&#xff0c;是九章成立的第639天&#xff0c;元旦节。九章全体员工在这里祝大家&#xff0c;2023年元旦快乐&#xff01;2022年&#xff0c;《九章智驾》这个账号里共发布了87篇原创深度内容&#xff0c;内容覆盖了自动驾驶的各个领域&#xff0c;有一直关注我们的读者的深…

怎么录屏?如何录制足球比赛直播视频?

等了多时&#xff0c;热血的足球赛事终于要来了。 不知道今年你看好哪支球队。皇马&#xff1f;曼联&#xff1f;拜仁&#xff1f; 虽然今年不用熬夜&#xff0c;但总是怕加班错过笔试。 今天给大家送一个安利神器&#xff0c;让你完美记录足球赛事精彩瞬间&#xff01; 如果您…

Eclipse JNI Demo --【Linux】

目录 1、建工程 2、建java类 3、生成头文件 4、CPP实现 5、配置及编译 6、验证 1、建工程 先创建一个android标准工程&#xff1a; 2、建java类 在com.phuket.tour.studio包下&#xff0c;建立一个Java文件Mp3Encoder.java&#xff0c;并且在文件中新增一个方法encode&…