Apache Ranger：(一)安装部署

news2024/12/30 3:17:09

1.Ranger简介

Apache Ranger提供一个集中式安全管理框架, 并解决授权和审计。它可以对Hadoop生态的组件如HDFS、Yarn、Hive、Hbase等进行细粒度的数据访问控制。通过操作Ranger控制台,管理员可以轻松的通过配置策略来控制用户访问权限。

说白了就是管理大多数框架的授权问题。

2.安装部署

2.1.环境准备

2.2.下载Ranger源码包

wget https://repo.huaweicloud.com/apache/ranger/2.0.0/apache-ranger-2.0.0.tar.gz

2.3.下载Maven并配置国内源

wget https://repo.huaweicloud.com/apache/maven/maven-3/3.6.3/binaries/apache-maven-3.6.3-bin.tar.gz

2.3.1解压并配置环境变量

tar -zxvf apache-maven-3.6.3-bin.tar.gz -C /opt/module/

#配置环境变量
vi /etc/profile

export MAVEN_HOME=/opt/module/apache-maven-3.6.3
export PATH=$PATH:$MAVEN_HOME/bin

2.3.2 配置国内源

华为

<mirror>
    <id>huaweicloud</id>
    <mirrorOf>*</mirrorOf>
    <url>https://repo.huaweicloud.com/repository/maven/</url>
</mirror>

或者阿里

                <mirror>
                         <id>alimaven</id>
                         <name>aliyun maven</name>
                         <url>http://maven.aliyun.com/nexus/content/groups/public/</url>
                         <mirrorOf>central</mirrorOf>
                </mirror>

2.3.3安装git

yum -y install git

2.4Ranger编译

#进入安装目录
[root@hadoop102 apache-ranger-2.0.0]# pwd
/opt/module/apache-ranger-2.0.0

编译命令

mvn clean compile package assembly:assembly install -DskipTests -Drat.skip=true

编译时间需要好久。

中间有报错的情况下，请仔细看日志具体原因。

编译完成后，会在Ranger安装目录下生成target目录，里面会生成许多相对应的 tar 包

3.Ranger Admin使用

3.1数据库环境准备

#创建元数据库
create database ranger;

#创建用户和密码
grant all privileges on ranger.* to ranger@'%' identified by 'ranger';

在创建用户和密码过程中可能会出现异常：ERROR 1819 (HY000): Your password does not satisfy the current policy requirements

解决方式：

set global validate_password_policy=LOW;
set global validate_password_length=6;


#再次使用以下命令创建用户和密码 就正常了
grant all privileges on ranger.* to ranger@'%' identified by 'ranger';

3.2解压ranger-admin

ranger-admin 就是上述编译后的包，存储在Ranger安装目录下的target目录下

本次路径为：

cd /opt/module/apache-ranger-2.0.0/target

解压命令：

tar -zxvf /opt/module/apache-ranger-2.0.0/target -C /opt/module/

3.3修改配置文件

进入ranger-admin 解压目录：

cd /opt/module/ranger-2.0.0-admin/

修改install.properties文件，这里使用的数据库是mysql，不安装solar服务

1) 数据库配置
DB_FLAVOR=MYSQL #指定使用的数据库类型
SQL_CONNECTOR_JAR=/opt/mysql-connector-java-8.0.21.jar #数据库链接jar包所在位置
db_root_user=[mysql用户]  #数据库t用户
db_root_password=[mysql密码] #用户密码
db_host=[数据库ip]  #数据库主机名

# 以下是设置ranger数据库的
# DB UserId used for the Ranger schema
#
db_name=ranger
db_user=ranger
db_password=ranger

# 不需要保存，为空，否则生成的数据库密码为'_'
cred_keystore_filename=

2）审计日志，如果没有安装solar，对应属性值为空

#Source for Audit Store. Currently only solr is supported.
# * audit_store is solr
audit_store=

3）策略管理配置，配置ip和端口。默认即可

policymgr_external_url=http://[本机ip]:6080

4）配置hadoop conf文件目录

hadoop_conf=[hadoop目录下的etc/hadoop]

5）rangerAdmin、rangerTagSync、keyadmin密码配置。默认为空，可以不配置。

rangerAdmin_password= #密码强度为 字母加数字
rangerTagsync_password=
rangerUsersync_password=
keyadmin_password=


6) 是否需要ranger用户

# 启动ranger是否需要创建ranger用户
# ------- UNIX User CONFIG ----------------
#
unix_user=ranger
unix_user_pwd=ranger
unix_group=ranger

3.4初始化ranger-admin 用户

cd /opt/module/ranger-2.0.0-admin

# 以root用户指定该脚本, 需要写入一些配置
./setup.sh

3.5启动ranger-admin

ranger-admin start
# 或者
./ews/ranger-admin-services.sh start

查看进程 jps，有 EmbeddedServer 进程就说明启动成功！

打开浏览器访问 http://ip:6080 ,登录界面密码为上文配置文件中配置rangerAdmin_password 的值，无配置默认为 admin。所以账号和密码都为 admin

4.Ranger-usersync安装部署

4.1解压Ranger-usersync安装包

和解压ranger-admin一样，切换到 target目录

cd /opt/module/apache-ranger-2.0.0/target

解压 Ranger-usersync 安装包

tar -zxvf ranger-2.0.0-usersync.tar.gz -C /opt/module/

4.2修改配置文件

修改install.properties 文件

# 配置ranger_admin地址
POLICY_MGR_URL = http://[IP]:6080

# 同步源系统类型
SYNC_SOURCE = unix

# 同步时间间隔设置（单位:分钟）
SYNC_INTERVAL = 1

# usersync程序运行的用户和用户组
#User and group for the usersync process
unix_user=ranger
unix_group=ranger

# 修改rangerusersync用户的密码。注意，此密码应与Ranger admin中install.properties的rangerusersync_password相同。此处可以为空，同样Ranger admin的也要为空

#change password of rangerusersync user. Please note that this password should be as per rangerusersync user in ranger
rangerUsersync_password=admin123456

# 配置hadoop 配置路径
hadoop_conf=[hadoop_home下etc/hadoop]

# 配置usersync的log路径 
#user sync log path
logdir=logs