Hadoop集群之模板虚拟机的安装

news2024/10/7 14:23:09

Hadoop集群之模板虚拟机的安装


文章目录

  • Hadoop集群之模板虚拟机的安装
    • 0. 写在前面
    • 1. CentOS的安装
      • 1.1 配置电脑
        • 1.1.1 进入VMware
        • 1.1.2 自定义新的虚拟机
        • 1.1.3 解决虚拟机的兼容性
        • 1.1.4 选择当前虚拟机的操作系统
        • 1.1.5 选择虚拟机将来需要安装的系统
        • 1.1.6 电脑的具体配置
        • 1.1.7 选择CPU的个数
        • 1.1.9 选择虚拟机上网方式
        • 1.1.10 选择对应的文件系统的IO方式
        • 1.1.11 选择磁盘的类型
        • 1.1.12 选择磁盘的种类
        • 1.1.13 选择虚拟机的磁盘大小
        • 1.1.14 虚拟机文件的存放位置
        • 1.1.15 电脑配置完毕
      • 1.2 安装系统(CentOS7)
        • 1.2.1 选择cd/dvd的方式安装系统
    • 在这里插入图片描述
        • 1.2.2 系统安装引导界面
        • 1.2.3 需要定制化的内容
    • 在这里插入图片描述
        • 1.2.4 虚拟机的使用引导界面
        • 1.2.5 切换root用户
    • 2. 网络配置
      • 2.1 编辑VMware的网络配置
      • 2.2 Windows的网络配置
    • 3. 虚拟机网络IP修改地址配置
    • 4. 修改主机名和hosts文件


0. 写在前面

  • Linux版本:CentOS-7.5-x86-1804
  • Hadoop版本:Hadoop-3.1.3
  • 虚拟机软件:VMware WorkStation Pro15

提前安装号虚拟机软件VMware WorkStation

1. CentOS的安装

Linux系统的安装需要分为两个步骤:

第一步得配置一台电脑,选配CPU,内存,磁盘,网卡等硬件。

第二步才是安装系统。

1.1 配置电脑

1.1.1 进入VMware

双击VMware图标,看到如下界面

在这里插入图片描述

1.1.2 自定义新的虚拟机

在这里插入图片描述

1.1.3 解决虚拟机的兼容性

在这里插入图片描述

1.1.4 选择当前虚拟机的操作系统

我们先配置电脑,再安装系统。

在这里插入图片描述

1.1.5 选择虚拟机将来需要安装的系统

因为不同的操作系统需要解决不同的兼容性问题,所以需要选择将来用什么系统,提前做适配。

在这里插入图片描述

1.1.6 电脑的具体配置

给自己配置电脑取个名字,并存放在物理机的位置在哪。

在这里插入图片描述

1.1.7 选择CPU的个数

有个原则就是选满(跟物理机的CPU个数相同,但是不能超过)

  • 查看物理机CPU个数(Windows10为例)

在这里插入图片描述

  • 设置虚拟机处理器的数量

在这里插入图片描述

1.1.8 设置虚拟机的内存

内存大小有一定要求,建议4G,不能给太多,后期会有多台虚拟机同时启动

在这里插入图片描述

1.1.9 选择虚拟机上网方式

  • 选择NAT的方式

在这里插入图片描述

  • 没有VMware之前物理机的网络适配器信息(每个人不同,我只有3个)

在这里插入图片描述

  • 安装VMware之后物理机的网络适配器信息(会多两个vmnet1和vmnet8)

在这里插入图片描述

注:vmnet8是虚拟机使用NAT模式上网的网卡

1.1.10 选择对应的文件系统的IO方式

在这里插入图片描述

1.1.11 选择磁盘的类型

在这里插入图片描述

1.1.12 选择磁盘的种类

在这里插入图片描述

1.1.13 选择虚拟机的磁盘大小

在这里插入图片描述

1.1.14 虚拟机文件的存放位置

在这里插入图片描述

1.1.15 电脑配置完毕

在这里插入图片描述

1.2 安装系统(CentOS7)

在这里插入图片描述

注意:在安装系统之前需要检查自己虚拟机的bios的虚拟化是否打开(大部分的电脑都是打开的,大家可以先尝试直接安装,如果出现错误再去调试,没有出错就不用管了)

以下是查看虚拟机bios是否开启的方式

  • window10

在这里插入图片描述

  • window7里面看不到(得去bios里面看)

  • 如果发现bios虚拟化没有开启怎么办,重启电脑,在加载界面时按f1-f10,或者电脑旁边一个小洞,具体怎么进入得去查一下(按照自己电脑的型号去查)

  • 修改虚拟化为开启(thinkpad为例)找到security 里面的VT并改成enabled

在这里插入图片描述

注:如果虚拟化没有开启报的是以下错误
在这里插入图片描述

1.2.1 选择cd/dvd的方式安装系统

在这里插入图片描述

在这里插入图片描述


在这里插入图片描述

1.2.2 系统安装引导界面

你得需要将鼠标点击进入界面中,但是鼠标会消失,你此刻得用键盘的上下键来控制选项,图标变白了表示当前选中的是哪个选项,然后敲回车,表示执行所选选项。

注意:如果这个时候你需要鼠标可以使用ctrl+alt一起按呼出鼠标

在这里插入图片描述

  • 耐心等待它的安装

在这里插入图片描述

  • 会自动跳转下面的界面

在这里插入图片描述

1.2.3 需要定制化的内容

  • 按照编号依次点击
    在这里插入图片描述

  • 调整时间差

在这里插入图片描述

  • 安装GHOME(图形化界面的方式)注意图上标注的点击顺序
    在这里插入图片描述

配置磁盘分区

在这里插入图片描述

  • 手动添加分区

在这里插入图片描述

  • 添加boot区 给上1G容量后点击添加挂载点

在这里插入图片描述


在这里插入图片描述

  • 添加swap交换分区

在这里插入图片描述


在这里插入图片描述

在这里插入图片描述

配置根(/)目录

在这里插入图片描述

根目录作为存储使用,将剩下的空间都给他(50 - 4 - 1)= 45

在这里插入图片描述

3个分区都配置完毕过后可以点击完成
在这里插入图片描述

分区配置完毕,点击接受更改

在这里插入图片描述

关闭kdump本身虚拟机内存就不够,他会吃掉一部分内存,我们尽量省一点

在这里插入图片描述

修改主机名

在这里插入图片描述

是否打开安全协议(开启与否都可以)
在这里插入图片描述

开始安装
在这里插入图片描述

安装时间比较长,大概需要10几分钟(设置root用户密码,一定要设置)**

在这里插入图片描述

密码设置成什么自己决定,但是不要忘 建议使用(123456)

在这里插入图片描述

1.2.4 虚拟机的使用引导界面

安装完成,重启虚拟机

在这里插入图片描述

进入引导界面(以下内容就按照图片走,不做过多解释)

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

顺利安装完成

1.2.5 切换root用户

当前登录的用户是刚刚创建的用户,权限会缺少,所以使用root,修改一些内容更加方便

在这里插入图片描述

  • 切换root用户

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

刚才的引导再来一遍(此处不再放图片了)
在这里插入图片描述

最后的用户变成root表示切换成功

2. 网络配置

对安装好的VMware进行网络配置,方便虚拟机连接网络,本次设置建议选择 NAT模式,需要宿主机的Windows和虚拟机的Linux能够进行网络连接,同时虚拟机的Linux可以通过宿主机的Windows进入互联网。

2.1 编辑VMware的网络配置

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

然后全部点击确定,VMware的网络配置就好了。

2.2 Windows的网络配置

以下以Window10为例

1)找到

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

按如上格式修改IP信息(地址,网关,DNS服务器),修改完毕后全部点击确定退出。

3. 虚拟机网络IP修改地址配置

(1)修改网络IP地址为静态IP地址,避免IP地址经常变化,从而方便节点服务器间的互相通信。

[root@hadoop01 ~]#vim /etc/sysconfig/network-scripts/ifcfg-ens33 

(2)以下加粗的项必须修改,有值的按照下面的值修改,没有该项的则需要增加。

TYPE=“Ethernet” #网络类型(通常是Ethemet)

PROXY_METHOD=“none”

BROWSER_ONLY=“no”

**BOOTPROTO=“static” **

DEFROUTE=“yes”

IPV4_FAILURE_FATAL=“no”

IPV6INIT=“yes”

IPV6_AUTOCONF=“yes”

IPV6_DEFROUTE=“yes”

IPV6_FAILURE_FATAL=“no”

IPV6_ADDR_GEN_MODE=“stable-privacy”

NAME=“ens33”

UUID=“e83804c1-3257-4584-81bb-660665ac22f6” #随机id

DEVICE=“ens33”

ONBOOT=“yes” #系统启动的时候网络接口是否有效(yes/no)

#IP地址

IPADDR=192.168.10.100

#网关

GATEWAY=192.168.10.2

#域名解析器

DNS1=192.168.10.2

参数解析

  • BOOTPROTO="static" :IP的配置方法[none|static|bootp|dhcp](引导时不使用协议|静态分配IP|BOOTP协议|DHCP协议)
  • DEVICE="ens33":接口名(设备,网卡)
  • ONBOOT="yes" :系统启动的时候网络接口是否有效(yes/no)

(3)修改IP地址后的结果如图所示,执行“:wq”命令,保存退出
在这里插入图片描述

(4)执行systemctl restart network命令,重启网络服务。如果报错,则执行“reboot”命令,重启虚拟机

[root@hadoop01 ~]# systemctl restart network

(5)使用ifconfig命令查看当前IP

[root@hadoop01 ~]# ifconfig

在这里插入图片描述

(6)保证Linux系统ifcfg-ens33文件中IP地址、虚拟网络编辑器地址和Windows系统VM8网络IP地址相同

4. 修改主机名和hosts文件

(1)修改主机名称

[root@hadoop01 ~]# vim /etc/hostname
hadoop01

(2)配置Linux克隆机主机名称映射hosts文件,打开/etc/hosts

[root@hadoop01 ~]# vim /etc/hosts

添加如下内容

192.168.10.100 hadoop01
192.168.10.101 hadoop02
192.168.10.102 hadoop03
192.168.10.103 hadoop04

(3)重启克隆机hadoop03**

[root@hadoop01 ~]# reboot

(4)修改windows的主机映射文件(hosts文件)**

  • 如果操作系统是window7,可以直接修改
    • 进入C:\Windows\System32\drivers\etc路径
    • 打开hosts文件并添加如下内容,然后保存
192.168.10.100 hadoop01
192.168.10.101 hadoop02
192.168.10.102 hadoop03
192.168.10.103 hadoop04
  • 如果操作系统是window10,先拷贝出来,修改保存以后,再覆盖即可

    • 进入C:\Windows\System32\drivers\etc路径
    • 拷贝hosts文件到桌面
    • 打开桌面hosts文件并添加如下内容
    192.168.10.100 hadoop01
    192.168.10.101 hadoop02
    192.168.10.102 hadoop03
    192.168.10.103 hadoop04
    
    • 将桌面hosts文件覆盖C:\Windows\System32\drivers\etc路径hosts文件

全文结束!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/651946.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

KUKA机器人通过示教器进行关机冷启动的具体方法演示

KUKA机器人通过示教器进行关机冷启动的具体方法演示 如下图所示,首先需要登录管理员权限,默认密码:KUKA,然后点击左上角的机器人图标进行菜单选项,找到并点击“关机”选项, 如下图所示,找到并点击“重新启动控制系统PC”, 如下图所示,此时系统提示:确实要重新启动…

chatgpt赋能python:Python生成序列的方法详解

Python生成序列的方法详解 在Python编程中,序列(Sequence)是常用的数据类型之一。序列是有序的,可以通过下标访问其中的元素。Python中有多种方法可以生成序列,下面将对常用的几种方法进行详细介绍。 利用range函数生…

2023-06-16 Android Studio 使用CMakeList编译JNI ,最简单的demo源码

一、代码结构图,代码路径https://download.csdn.net/download/qq_37858386/87913001 二、cmakedemo\app\build.gradle 加下面的代码 externalNativeBuild {cmake {cppFlags "-frtti -fexceptions"}}externalNativeBuild {cmake {path src/main/jni/CMakeL…

国内大模型研究

自从chatgpt发布以来,国内大模型发展非常迅速。我对这项目技术也保持了非常多的持续关注,我一直认识,chatGPT以及其他GPT会给社会带来更大的变革。经过专业训练的大模型可以替代部分客服,部分程序员,部分美工&#xff…

Vue全家桶实战 从零独立开发企业级电商系统(免费升级Vue3.0)

Vue全家桶高仿小米商城–项目简介 文章目录 Vue全家桶高仿小米商城--项目简介电商项目选型--小米商城的页面流程:业务开发流程:项目内容:商城组件部分:课程所包含的知识图谱:章节介绍: 商城的界面展示&…

基于web漏洞扫描及分析系统设计_kaic

基于web漏洞扫描及分析系统设计 摘 要 随着信息技术的发展和网络应用在我国的普及,针对我国境内信息系统的恶意网络攻击也越来越多,并且随着黑客攻击技术的不断地更新,网络犯罪行为变得越来越难以应对,用户日常访问的网站是否安全…

【八大排序(六)】快排终极篇-快速排序非递归版

💓博主CSDN主页:杭电码农-NEO💓   ⏩专栏分类:八大排序专栏⏪   🚚代码仓库:NEO的学习日记🚚   🌹关注我🫵带你学习排序知识   🔝🔝 快排非递归版 1. 前情回顾2. 快排非递归基…

A100 GPU服务器安装CUDNN教程

大家好,我是爱编程的喵喵。双985硕士毕业,现担任全栈工程师一职,热衷于将数据思维应用到工作与生活中。从事机器学习以及相关的前后端开发工作。曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。喜欢通过博客创作的方式对所学的…

从Window中先多瞥几眼

JavaFx17官方文档中有如下的描述: Window类是一个顶层窗口类,在其中可以承载场景,并与用户交互。窗口可以是Stage、PopupWindow或其他类似的顶层窗口。 JavaFX Stage类是顶级的JavaFX容器。初级阶段由平台搭建。其他Stage对象可以由应用程序构造。 许多Stage属性是只读的…

chatgpt赋能python:Python入门:如何添加Seaborn库

Python入门:如何添加Seaborn库 Python是一种易于学习的、功能强大的编程语言,在数据分析和科学计算方面尤其闻名。Seaborn是一个建立在Matplotlib之上的Python可视化库,它提供了一组简单易用的界面,用于绘制优美的统计图形——包…

几个Caller-特性的妙用

System.Runtime.CompilerServices命名空间下有4个以“Caller”为前缀命名的Attribute,我们可以将它标注到方法参数上自动获取当前调用上下文的信息,比如当前的方法名、某个参数的表达式、当前源文件的路径,以及当前代码在源文件中的行号。 一…

RedisSon高并发分布式锁实战RedisSon源码解读

Redis高并发分布式锁实战 1.分布式场景下的synchronized失效的问题–用redis实现分布式锁 synchronized是通过monitor实现的jvm级别的锁,如果是分布式系统,跑在不同的虚拟机上的tomcat上,会导致synchronized无法锁住对象 ----------- 需要分…

读数据压缩入门笔记05_字典转换

1. 瓶颈 1.1. 在网络带宽有限、存储昂贵的时期 1.2. 移动设备正日益成为人们访问互联网的首选的今天 1.3. 数据压缩成了缓解这些瓶颈的关键 2. 字典转换 2.1. dictionary transforms 2.2. 完全改变了人们对数据压缩的认知 2.2.1. 压缩变成了一种对各种类型的数据都有用的…

《C和指针》读书笔记(第十一章 动态内存分配)

目录 0 简介1 为什么使用动态内存分配2 malloc和free3 calloc和realloc4 使用动态分配的内存5 常见的动态内存错误6 内存分配实例6.1 排序一列整型值6.2 复制字符串6.3 变体记录的创建与销毁 7 总结 0 简介 在实际开发中(C语言),数组的元素存…

JDK,JRE,JVM有什么区别?跨平台?跨语言?

JDK Java Development Kit(Java开发工具包),提供了Java的开发环境和运行环境。包含Java源文件的编译器Javac,还有调试和分析工具。 JRE Java Runtime Environment(Java运行环境)包含了Java虚拟机&#xff…

WPF开发txt阅读器10:语音播报快进快退

文章目录 MySpeech类快进 文章目录 MySpeech类快进 txt阅读器系列: 需求分析和文件读写目录提取类💎列表控件与目录字体控件绑定💎前景/背景颜色书籍管理系统💎用树形图管理书籍语音播放💎播放进度显示 MySpeech类 …

MySQL 中有哪些锁?

数据库中锁的设计初衷处理并发问题,作为多用户共享资源,当出现并发访问的时候,数据库需要合理控制资源访问规则。锁就是实现这些访问规则中的重要数据。 锁的分类 根据加锁范围,MySQL 里面的锁可以分成全局锁、表级锁、行锁三类…

计算机视觉算法——BEV Perception算法总结

计算机视觉算法——BEV Perception算法总结 计算机视觉算法——BEV Perception算法总结1. Homograph Based——3D LaneNet2. Depth Based——LSS3. MLP Based——PON4. Transformer Based——BEVFormer5. Transformer Based——Translating Image into Maps 计算机视觉算法——…

急于生成人工智能是有风险的:如何保护数据

每天的业务用户都在尝试使用 ChatGPT 和其他生成式 AI 工具。事实上, Gartner 预测, 到 2025 年,30% 的营销内容将由生成式人工智能创建并由人类增强。 然而,像三星这样的公司已经发现,不了解新技术风险的用户正在成…

linux(线程控制)

目录: 1.线程创建 2.线程等待 3.线程终止 4.线程分离 5.线程ID -------------------------------------------------------------------------------------------------------------------------------- 1.线程创建 pthread_create pthread_t *pthread 是一个输出型…