Doris安装及使用

news2024/11/25 16:42:55

Doris简介

Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。基于此,Apache Doris 能够较好的满足报表分析、即席查询、统一数仓构建、数据湖联邦查询加速等使用场景,用户可以在此之上构建用户行为分析、AB 实验平台、日志检索分析、用户画像分析、订单分析等应用。仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。Apache Doris的分布式架构非常简洁,易于运维,并且可以支持10PB以上的超大数据集。

 

FE ,主要负责用户请求的接入、查询解析规划、元数据的管理、节点管理相关工作。(leader, Follower, Observer)

BE 主要负责数据存储、查询计划的执行。

官网: Apache Doris: Open-Source Real-Time Data Warehouse - Apache Doris

下载二进制文件: Download - Apache Doris

查看Linux系统的CPU架构: uname -m

x86_64 对应 avx2

我用的是Ubuntu22.04   安装过程如下:

// 先安装java 和 mysql
apt-get install openjdk-8-jdk
java -version

apt install mysql-server
mysql -V

// 解压
tar xf apache-doris-x.x.x.tar.xz

# 配置 FE
cd apache-doris-x.x.x/fe
vim conf/fe.conf
priority_networks=192.168.16.0/24   // 假如你的ip是 192.168.16.230
./bin/start_fe.sh --daemon    // 测试可以先不用加  --daemon
curl http://127.0.0.1:8030/api/bootstrap   // 或者直接 ip:8030

mysql -uroot -P9030 -h127.0.0.1
show frontends\G;   // 如果 IsMaster、Join 和 Alive 三列均为true,则表示节点正常。

# ./bin/stop_fe.sh  // 停止命令


# 配置 BE
cd apache-doris-x.x.x/be
priority_networks=192.168.16.0/24 
JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64

// Please set vm.max_map_count to be 2000000 under root using 'sysctl -w vm.max_map_count=2000000'
// Please set the maximum number of open file descriptors to be 65536 using 'ulimit -n 65536'

./bin/start_be.sh --daemon     // 启动BE

// 先启动FE, 在连接mysql
mysql -uroot -P9030 -h127.0.0.1
ALTER SYSTEM ADD BACKEND "192.168.16.230:9050";   // 同上面服务器ip
SHOW BACKENDS\G       // Alive : true表示节点运行正常


// ./bin/stop_be.sh  // 停止命令

// 查看日志
fe/log文件夹下   和  be/log文件夹下


本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/922787.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

怎么做出老板看得懂的财务数据分析报表?

财务数据分析报表的主要作用就是为决策提供必不可少的数据信息,让老板以及管理层在充分了解企业现金流情况、债务能力、还债能力、进账情况等财务信息后,更科学地做出运营管理决策。因此,财务数据分析报表必须做得直观易懂,毕竟不…

Linux监控基础命令

Linux资源监控 一.资源监控常用命令汇总 内存:top、free、vmstat、pmap I/O:vmstat、sar CPU:top、vmstat、mpstat、iostat 二.监控命令 日常检测使用top和free就足够了,如果要对系统进行日常监控可以使用zabbix或者prometh…

微软宣布在 Excel 中使用 Python:结合了 Python 的强大功能和 Excel 的灵活性。

自诞生以来,Microsoft Excel 改变了人们组织、分析和可视化数据的方式,为每天使用它的数百万人提供了决策基础。今天,我们宣布发布 Excel 中的 Python 公共预览版,从而使 Excel 中的分析功能取得重大进展。 Excel 中的 Python 可…

网易2023年Q2财报:营收240亿元,游戏技术跨产业创造数字就业

8月24日,网易发布2023年Q2财报。二季度,网易继续聚焦主营业务,业绩表现稳健;净收入240亿元,非公认会计准则下归属于公司股东的持续经营净利润90亿元,研发投入39亿元,相当于拿出近一半利润投入研…

同城分类信息便民公众号抖音百度支付宝小程序开发

同城分类信息便民公众号抖音百度支付宝小程序开发 用户注册和登录功能:允许用户通过手机号或第三方账号登录,并进行个人信息补充和修改。发布信息功能:用户可以发布需要出售或者需要购买的商品、服务或者其他资源信息,并填写详细…

专访 Hyper Oracle:可编程的 zkOracle 打造未来世界的超算

许多 Web3 应用在实现的过程中,常常会遇到基础设施方面的限制,包括去中心化自动化、预言机、链上信息搜索等问题。绝大部分区块链的中间件网络都是依赖于节点质押来保证节点执行的诚实性,这样的模式会产生诸多衍生问题,例如安全性…

linux centos7 sort命令的学习与训练

sort命令的功能是对文件中的各行进行排序。sort命令有许多非常实用的选项,这些选项最初是用来对数据库格式的文件内容进行各种排序操作的。实际上,sort命令可以被认为是一个非常强大的数据管理工具,用来管理内容类似数据库记录的文件。 sort…

Centos7防火墙启动失败问题

下面记录一下防火墙启动失败问题排查和解决的过程。防火墙启动失败的错误信息如下: ERROR: Exception DBusException: org.freedesktop.DBus.Error.AccessDenied: Conn...n file 比较郁闷的地方是之前防火墙是正常启动的,后面不知道服务器修改了什么配置…

[MyBatis系列②]Dao层开发的两种方式

目录 1、传统开发 1.1、代码 1.2、存在的问题 2、代理开发 2.1、开发规范 2.2、代码 ⭐mybatis系列①:增删改查 1、传统开发 传统的mybatis开发中,是在数据访问层实现相应的接口,在实现类中用"命名空间.id"的形式找到对应的映…

ARM汇编【5】:STACK AND FUNCTIONS

在这一部分中,我们将研究称为堆栈的进程的一个特殊内存区域。本章介绍了Stack的用途和相关操作。此外,我们还将介绍ARM中函数的实现、类型和差异。 STACK 一般来说,堆栈是程序/进程中的一个内存区域。这部分内存是在创建进程时分配的。…

《信息安全技术 数据安全风险评估方法》(征求意见稿)解读

8月21日,全国信息安全标准化技术委员会秘书处发布关于征求国家标准《信息安全技术 数据安全风险评估方法》(征求意见稿)意见的通知,面向社会广泛征求意见。 一、数据安全相关政策法规 此前,国家也发布了多部数据安全相…

dockerfile镜像及Harbor私有仓库搭建的应用

目录 搭建私有仓库harbordockerfile构建镜像1,先创建一个目录2,编写dockerfile3,构建4, 验证镜像5,标记镜像6,上传镜像 搭建私有仓库harbor 首先安装容器编排工具:docker compose 我使用的是离…

企业如何做好实施数字工厂管理系统前的需求分析

随着工业4.0的到来,数字工厂系统解决方案已经成为企业提高生产效率、优化资源配置和提升产品质量的重要工具。在考虑实施数字工厂管理系统之前,企业需要进行详细的需求分析,以确保系统的实施能够真正满足企业的业务需求。本文将探讨企业如何做…

基于Spark框架的新闻推荐系统的设计与实现

1.摘要 离线ALS算法,以及基于内容的推荐算法进行结合.实时计算部分,使用Spark平台上的Spark Streaming流处理技术,处理日志收集框架Flume收集的日志信息. 2.需要的技术 jieba分词工具 LDA分词处理技术 LDA(Latent Dirichlet Allocatio

Java“牵手”天猫店铺所有商品API接口数据,通过店铺ID获取整店商品详情数据,天猫API申请指南

天猫商城是一个网上购物平台,售卖各类商品,包括服装、鞋类、家居用品、美妆产品、电子产品等。天猫商品详情可以帮助消费者更好的了解宝贝信息,从而做出购买决策。同时,消费者也可以通过商品详情了解其他买家对宝贝的评价&#xf…

一些总结C++(2)

1.windwos 不推荐使用redis 强行使用的话,可以用这个 hiredis-for-windowshttps://gitee.com/yokel007/hiredis-for-windows 使用方法:编译静态库。然后将所有文件作文C 包含目录,静态库作为库目录,然后添加链接。 不要使用wi…

海思Hi3861L开发三-新建自定义项目

一、简介 上一篇文章,介绍了如何下载安装SDK,并且编译和下载。但都是基于SDK原生提供的demo。那本节我们就来介绍一下,如果创建一个自己的项目。 二、新建目录结构 先看SDK提供的目录结构,如下图: 因为是基于应用的开发,所以我们只关注app这个文件夹。可以看到…

CentOS7.9安装docker服务,配置镜像加速器

目录 一、安装docker服务 二、配置镜像加速器 三、下载系统镜像(Ubuntu、 centos ) 四、基于下载的镜像创建两个容器(容器名一个为自己名字全拼,一个为首名字字母 ) 五、容器的启动、 停止及重启操作 六、查看正在…

2023国赛数学建模思路 - 案例:随机森林

文章目录 1 什么是随机森林?2 随机深林构造流程3 随机森林的优缺点3.1 优点3.2 缺点 4 随机深林算法实现 建模资料 ## 0 赛题思路 (赛题出来以后第一时间在CSDN分享) https://blog.csdn.net/dc_sinor?typeblog 1 什么是随机森林&#xff…

启动audit服务报错

启动centos audit服务报错 错误信息 $service auditd restart Stopping logging: [FAILED] Redirecting start to /bin/systemctl start auditd.service Job for auditd.service failed because the control process exited with error code. See “systemctl status auditd.s…