大数据-Hadoop部署模式

news2024/11/14 20:21:33

一、JDK安装与配置

1、下载JDK压缩包

在这里插入图片描述

2、上传到master虚拟机

将JDK压缩包上传到master虚拟机/opt目录在这里插入图片描述
查看上传的JDK压缩包
在这里插入图片描述

3、在master虚拟机上安装配置JDK

执行命令:tar -zxvf jdk-8u231-linux-x64.tar.gz -C /usr/local,将JDK压缩包解压到指定目录在这里插入图片描述
执行命令:ll /usr/local/jdk1.8.0_231,查看解压之后的jdk1.8.0_231目录
在这里插入图片描述
执行命令:vim /etc/profile,配置环境变量在这里插入图片描述
存盘退出,执行命令:source /etc/profile,让配置生效在这里插入图片描述
查看JDK版本
在这里插入图片描述
编写一个Java程序 - HelloWorld.java
在这里插入图片描述
存盘退出后,执行命令:javac HelloWorld.java,编译成字节码文件在这里插入图片描述
执行命令:java HelloWorld
在这里插入图片描述

4、将JDK分发到slave1和slave2虚拟机

执行命令:scp -r $JAVA_HOME root@slave1:$JAVA_HOME(-r: recursive - 递归)
在这里插入图片描述
在slave1虚拟机上查看JDK是否拷贝成功在这里插入图片描述
执行命令:scp -r $JAVA_HOME root@slave2:$JAVA_HOME(-r: recursive - 递归)在这里插入图片描述
在slave2虚拟机上查看JDK是否拷贝成功在这里插入图片描述

5、将环境配置文件分发到slave1和slave2虚拟机

执行命令:scp /etc/profile root@slave1:/etc在这里插入图片描述
执行命令:scp /etc/profile root@slave2:/etc在这里插入图片描述
在slave1与slave2虚拟机上执行命令:source /etc/profile,让环境配置生效在这里插入图片描述
在这里插入图片描述
在slave1虚拟机上查看JDK版本在这里插入图片描述
在slave2虚拟机上查看JDK版本在这里插入图片描述
课堂练习:将主节点上的Java程序HelloWorld.java分发到slave1节点,然后编译执行在这里插入图片描述
在这里插入图片描述

二、Hadoop安装

1、下载Hadoop压缩包在这里插入图片描述

2、上传Hadoop压缩包到虚拟机

将Hadoop压缩包上传到master虚拟机/opt目录在这里插入图片描述
查看上传的Hadoop压缩包在这里插入图片描述

3、将Hadoop压缩包解压到指定目录

执行命令:tar -xzvf hadoop-3.3.4.tar.gz -C /usr/local
在这里插入图片描述
查看解压之后的hadoop目录在这里插入图片描述
查看bin目录在这里插入图片描述
查看etc/hadoop目录,主要是hadoop配置文件在这里插入图片描述
查看sbin目录在这里插入图片描述

4、配置Hadoop环境变量

执行命令:vim /etc/profile在这里插入图片描述
存盘退出,执行命令source /etc/profile,让配置生效在这里插入图片描述

5、验证Hadoop环境

执行命令:hadoop version,检查Hadoop安装是否成功在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/67515.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【VUE3】保姆级基础讲解(一):初体验与指令

目录 安装和引入 CDN 本地引入 VUE初体验 MVVM模型 data属性 与 methods属性 VUE基础-模板语法 Mustache双大括号语法 v-once指令 v-html v-pre v-cloak v-memo v-bind(重要) 对象语法 v-bind直接绑定对象 v-on 条件渲染 v-for 基础使…

antd级联选择器(a-cascader)动态加载和动态回显效果实现

文章目录1、介绍2、效果图如下图所示:(只实现3层的)3、实现方法(1)层级可单独选择(2)组件使用(3)data数据(4)实现动态加载数据1、 提示&#xff1…

模糊预测|RFIS与ANFIS模糊模型预测的比较(Matlab代码实现)

💥💥💥💞💞💞欢迎来到本博客❤️❤️❤️💥💥💥🏆博主优势:🌞🌞🌞博客内容尽量做到思维缜密,逻辑清…

vue2中实现右键菜单

vue2中实现右键菜单 效果图-右键菜单 1、安装 npm install vue-contextmenujsyarn add vue-contextmenujsCDN <script src"https://unpkg.com/vue-contextmenujs/dist/contextmenu.umd.js">2、使用 2.1、引入 src/main.js import Contextmenu from "…

python sklearn knn快速实现,保姆级教学

目录介绍KNN实战加载模块读取数据训练、测试数据分割关键环节&#xff1a;训练预测sklearn官方代码实例介绍 首先上链接 https://www.sklearncn.cn/ scikit-learn是基于Python语言的机器学习库&#xff0c;具有&#xff1a; 简单高效的数据分析工具 可在多种环境中重复使用 …

一套Altair Feko复杂结构模型散射和天线辐射仿真建模攻略

导读&#xff1a;Feko软件广泛应用于电磁散射、电磁辐射仿真&#xff0c;例如&#xff1a;天线、天线布局、天线罩、屏蔽效能、电磁散射、频选结构、线束EMC等方面。问题种类繁多&#xff0c;但是无论仿真哪一类问题&#xff0c;其仿真流程是相同的&#xff0c;我们只需掌握了这…

VirtualBox Ubuntu 16.04 磁盘不相邻分区扩容解决方案

前言 博主做期末大作业时用到 VirtualBox 6.1 安装的 Ubuntu 16.04 LTS 虚拟机&#xff0c;开始只分配了 20GB 硬盘&#xff0c;跑实验时发现空间不够&#xff0c;需要对磁盘扩容&#xff0c;折腾了半天&#xff0c;在此做一个小记录。 警告&#xff1a;博主并不精通 Linux&am…

风险评估具体操作流程

概述 风险评估应贯穿于评估对象生命周期 各阶段中。评估对象生命周期各阶段中涉及的风险评估原则和方法昆一致的&#xff0c;但由干各阶段实施内容对象、安全需求不同.使得风险评估的对象、目的、要求等各方面也有所不同。在规划设计阶段&#xff0c;通过风险评估以确定评估对…

摄影师接单小程序开发,自由交易平台

在网红直播经济的强势发展下&#xff0c;年轻一代对于摄影方面的需求急速增长&#xff0c;但是年轻人群体在摄影方面的要求更趋向于个性化&#xff0c;普通的影楼不仅拍摄价格高&#xff0c;在拍摄风格上也比较单调&#xff0c;缺乏创新&#xff0c;难以满足用户消费需求。对于…

cubeIDE开发, stm32的ADC(模数转换器) 开发要点

一、ADC模数转换简介 ADC(Analog-to-Digital Converter&#xff0c;模数转换器) 是将连续变化的模拟信号转换为离散的数字信号的器件。真实世界的模拟信号&#xff0c;例如温度、压力、声音或者图像等&#xff0c;需要转换成更容易储存、处理和发射的数字形式。模数转换器可以实…

cesium切片底图正常出来但控制台一直报错的方法

1、部署ngnix服务 2、修改ngnix配置 在location 下的路径配置如下内容 add_header Access-Control-Allow-Origin *; add_header Access-Control-Allow-Methods GET, POST, OPTIONS; add_header Access-Control-Allow-Headers DNT,X-Mx-ReqToken,Keep-Alive,User-Agent,X-Re…

程序员需知的8个视频教程网站,建议收藏

上一篇介绍的是在线教程网站以文字性内容为主&#xff0c;同样收藏了一些以视频为主的一些网站&#xff0c;相比较而言&#xff0c;更容易上手&#xff0c;当然&#xff0c;也更加耗时间。 1、B站 简 介&#xff1a;没错&#xff0c;bilibili也可以用来学习&#xff0c;除了番…

吉林优美姿文化:抖音小店店铺评分怎么提升?

现在大家都在抖音平台上购物&#xff0c;只用等商家发货就行了&#xff0c;但是抖音发货也是有一定相关规定的&#xff0c;也需要各位商家去遵守的&#xff0c;那么抖音的发货时效方面有着什么样的规定呢&#xff1f;跟着吉林优美姿小编来看一下吧&#xff01;发货时间&#xf…

TPE-3-CHO;CAS:2351847-81-7;AIE聚集诱导发光

中文名 4,4,4,4-(乙烯-1,1,2,2-四基)四(([1,1-联苯]-3-甲醛)) 英文名 4,4,4,4-(Ethene-1,1,2,2-tetrayl)tetrakis(([1,1-biphenyl]-3-carbaldehyde)) 中文别名 四(3-甲醛基联苯基)乙烯 | 4,4,4,4-(乙烯-1,1,2,2-四基)四(([[1,1-联苯] -3 -甲醛)) 物理化学性质 密度 1.2200.06 g…

spring的BeanPostProcessor分析

spring常见的set注入&#xff0c;就是通过配置文件给变量赋值&#xff0c;这属于第一步注入。BeanPostProcessor还能进行第二次注入&#xff0c;简单来说就是第二是给变量赋值 1、首先定义一个实体类EntityObject&#xff0c;声明get和set方法 package beanPost;public class…

C语言---函数---总结

&#x1f680;write in front&#x1f680; &#x1f4dd;个人主页&#xff1a;认真写博客的夏目浅石. &#x1f381;欢迎各位→点赞&#x1f44d; 收藏⭐️ 留言&#x1f4dd;​ &#x1f4e3;系列专栏&#xff1a;鹏哥带我学c带我飞 &#x1f4ac;总结&#xff1a;希望你看…

一文了解Linux内核网络设备驱动

1. 接收数据包过程概述 介绍数据包收包过程&#xff0c;有助于我们了解Linux内核网络设备在数据收包过程中的位置&#xff0c;下面从宏观的角度介绍数据包从被网卡接收到进入 socket 接收队列的整个过程&#xff1a; 加载网卡驱动&#xff0c;初始化数据包从外部网络进入网卡…

月子会所管理系统| 月子会所小程序| 数字化门店转型

随着二孩三孩政策的相继开放&#xff0c;中国母婴市场呈现出稳定增长的局面&#xff0c;据相关数据显示&#xff0c;2019年中国母婴市场规模达34950亿元&#xff0c;预计2024年将增长到70000亿元。母婴行业的细分类高&#xff0c;同时还可与多行业进行对接。 母婴月子会所近些年…

Vue3 事件处理

Vue3 事件处理1.基本使用2.事件修饰符3.按键修饰符1.基本使用 我们可以使用 v-on 指令来监听 DOM 事件&#xff0c;从而执行 JavaScript 代码。 v-on 指令可以缩写为 符号。 语法格式&#xff1a; v-on:click"methodName" 或 click"methodName"一个最…

基于jsp+ssm的驾校预约管理系统-计算机毕业设计

项目介绍 驾校预约管理系统是一个高校用来管理教员和学员的授课信息并存储档案必需的一个管理系统&#xff0c;由于时代的进步&#xff0c;它成为了一个现代化管理不可缺少的一部分。它的查询的方便简洁&#xff0c;可以为一个驾校经营者节约足够的时间&#xff0c;为驾校迅速…