Hadoop2.x源码64位编译

news2025/4/26 6:22:54

编译必须环境:hadoop源码【使用的是2.10.2版本】、JDK8、maven、ant 、protobuf【版本必须是2.5.0,否则编译会报错org.apache.maven.plugin.MojoExecutionException: protoc version is 'libprotoc 3.21.12', expected version is '2.5.0'

安装 glibc-headers 和 g++ 、make和cmake、openssl库、ncurses-devel库

yum install -y glibc-headers

yum install -y gcc-c++

yum install -y make

yum install -y cmake

yum install -y openssl-devel

yum install -y ncurses-devel

Maven 阿里国内仓库

<mirror>
    <id>nexus-aliyun</id>
    <mirrorOf>central</mirrorOf>
    <name>Nexus aliyun</name>
    <url>http://maven.aliyun.com/nexus/content/groups/public</url>
</mirror>

解压protobuf ,进入到解压后protobuf主目录

./configure

make

make install

ldconfig

最后把所有的 安装软件JDK8、maven、ant 、protobuf 配置 vi /etc/profile

export LD_LIBRARY_PATH=/opt/module/protobuf-2.5.0 注意一定要使用 LD_LIBRARY_PATH作为变量名【安装时有提示】

export PATH=$PATH:$LD_LIBRARY_PATH

其他省略

protoc --version、java -version、mvn -v 、ant -version 都正确后说明环境准备完毕

进入到hadoop源码主目录、通过maven执行编译命令

mvn package -Pdist,native -DskipTests -Dtar 中途有问题可以多试几次

成功的64位hadoop包在/opt/hadoop-x.y.z-src/hadoop-dist/target下

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/103163.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【剧前爆米花--爪哇岛寻宝】Comparator,Comparable接口以及toString和equals方法的重写应用

作者&#xff1a;困了电视剧 专栏&#xff1a;《JavaSE语法与底层详解》 文章分布&#xff1a;这是一篇关于接口的文章&#xff0c;在本篇文章中我会将接口常用的一些实例进行讲解&#xff0c;以及部分方法在重写中的思想。 目录 Comparable和Comparator接口使用 Object类 t…

敏捷的发展史(二)

2010年之前&#xff0c;大多数敏捷管理的例子都是在软件开发团队中&#xff0c;几乎没有看到大型组织实施敏捷。 2015年&#xff0c;开始有一些非常大的组织成功地在组织的大部分区域内采用敏捷管理的讨论。 为了验证&#xff0c;史蒂夫丹宁邀请那些拥抱敏捷的公司聚在一起分享…

天天说手撕AVL树?你真的能撕下来吗?(详细解释+代码注释)

目录 前言 一、什么是AVL树&#xff1f; 二、模拟实现AVL树 2.1、定义AVL树 2.2、插入结点功能 2.2.1、先把值为val的结点插入到AVL树中 2.2.2、根据平衡因子来对树进行调整 2.3、AVL树的旋转 2.3.1、右单旋 2.3.2、左单旋 2.3.3、左右双旋 2.3.4、右左双旋 2.3、验证AVL树…

zabbix监控Gbase8a

部署​参考文章 部署zabbix [rootgba02 ~]# cat /etc/redhat-release CentOS Linux release 8.5.2111 [rootgba02 ~]# uname -a Linux gba02 4.18.0-348.el8.x86_64 #1 SMP Tue Oct 19 15:14:17 UTC 2021 x86_64 x86_64 x86_64 GNU/Linux 安装nginx [rootgba02 ~]# systemctl…

漏洞扫描原理及X-Scan安装

漏洞扫描原理及X-Scan使用 漏洞扫描原理 1.概念&#xff1a; 漏洞扫描技术是建立在端口扫描技术的基础之上的&#xff0c;从对黑客的攻击行为的分析和收集的漏洞来看&#xff0c;绝大多数都是针对某一个特定的端口的&#xff0c;所以漏洞扫描技术以与端口扫描技术同样的思路来开…

外汇天眼:流动性风险加剧!欧洲天然气价格上限180欧,WTI原油回升

欧盟天然气价格上限协议达成、美欧原油期货持仓降至2015年以来的最低水平&#xff1b;能源价格流动性风险进一步加剧&#xff0c;WTI原油继续“寻底”。 每兆瓦时180欧元&#xff01;欧盟天然气价格上限协议达成 周一&#xff08;12月19日&#xff09;经历两个月谈判后&#x…

图解NumPy,这是理解数组最形象的一份教程了

本文用可视化的方式介绍了 NumPy 的功能和使用示例。NumPy 软件包是 Python 生态系统中数据分析、机器学习和科学计算的主力军。它极大地简化了向量和矩阵的操作处理。Python 的一些主要软件包&#xff08;如 scikit-learn、SciPy、pandas 和 tensorflow&#xff09;都以 NumPy…

MySQL使用MyCat实现分库分表

MySQL分库分表的实现方式有&#xff1a; shardingJDBC&#xff1a;基于AOP原理&#xff0c;在应用程序中对本地执行的SQL进行拦截&#xff0c;解析、改写、路由处理。需要自行编码配置实现&#xff0c;只支持java语言&#xff0c;性能较高。MyCat&#xff1a;数据库分库分表中…

我国盆栽行业发展向好 服务、信息、性价比高度结合的销售模式势在必行

盆栽系由中国传统的园林艺术变化而来&#xff0c;其定义是指栽在盆里的活体植物的总称。盆栽是温室花卉生产的主要方式之一&#xff0c;即便于控制各种生活条件&#xff0c;有利于花卉的促控栽培&#xff0c;还便于搬移&#xff0c;即可陈设于室内&#xff0c;又可布景于庭院。…

Metal每日分享,基于色温调整白平衡滤镜效果

本案例的目的是理解如何用Metal实现基于色温调整白平衡效果滤镜&#xff0c;主要就是消除或减轻日光下偏蓝和白炽灯下偏黄&#xff0c;简单讲把应该是白色的调成白色或接近白色&#xff0c;不使其严重偏色&#xff1b; Demo HarbethDemo地址iDay每日分享文档地址 实操代码 /…

如何多人配音?告诉你这几个实用的配音技巧

大家平常在刷短视频时&#xff0c;有没有刷到过一些搞笑配音视频呢&#xff1f;有些视频是由多人互动或者一人扮演多角而成的&#xff0c;这些创作者把当下比较热门的话题通过配音的方式呈现出来&#xff0c;或让我们捧腹大笑、或让我们引起思考。如果你也想通过这种方式来制作…

JVS低代码基础介绍

企业信息化底座 JVS是面向软件开发团队可以快速实现应用的基础开发脚手架&#xff0c;主要定位于企业信息化通用底座&#xff0c;采用微服务分布式框架&#xff0c;提供丰富的基础功能&#xff0c;集成众多业务引擎&#xff0c;它灵活性强&#xff0c;界面化配置对开发者友好&a…

Git仓库创建、代码更新、代码提交完整版(Gitee、Github、GitLab对比)

区别 Gitee、Github、GitLab三个都提供了 个人和团队存储、分享、发布和协同开发项目的中心化云存储功能 名称代码版块控制管理工具是否收费搭建环境联网/github git 公有仓库免费 私有仓库收费&#xff08;鼓励代码共享&#xff09; 企业私有需要搭建可离线&#xff08;分布…

在英特尔独立显卡上部署YOLOv5 v7.0版实时实例分割模型

作者&#xff1a;贾志刚 英特尔物联网创新大使  目录 1.1 YOLOv5实时实例分割模型简介 1.2 英特尔消费级锐炫™ A 系列显卡简介 1.3 在英特尔独立显卡上部署YOLOv5-seg模型的完整流程 1.3.1 搭建YOLOv5开发环境和OpenVINO部署环境 1.3.2 验证YOLOv5开发环境和OpenVINO部…

Spring Cloud之acos服务注册与Dubbo

Spring Cloud之acos服务注册与Dubbo nacos是springcloud的扩展&#xff0c;注册中心功能通过NacosDiscoveryClient 继承DiscoveryClient&#xff0c;在springcloud中&#xff0c;与Eureka可以无侵入的切换。注册中心可以手动剔除服务实例&#xff0c;通过消息通知客户端更新缓…

【推荐】数据湖技术及实践与案例资料汇总合集47篇

数据湖或hub的概念最初是由大数据厂商提出的&#xff0c;表面上看&#xff0c;数据都是承载在基于可向外扩展的HDFS廉价存储硬件之上的。但数据量越大&#xff0c;越需要各种不同种类的存储。最终&#xff0c;所有的企业数据都可以被认为是大数据&#xff0c;但并不是所有的企业…

30多条立马执行的站内SEO优化建议

站内SEO优化,讲来讲去很多年,但是国内很少有比较全面的Check List。国外的文章,一般都是教你如何优化一篇文章。而不是教你如何打造一个一个商业化的产品页。本篇文章是结合我这几年的独立站SEO项目经验,对站内SEO进行的一些总结,有30多条立马执行的站内SEO优化建议。 其实…

SpringBoot+Actuator+Prometheus+Grafana进行可视化应用监控

最终效果 actuator actuator是什么 看一看chatGPT怎么说&#xff1f; Spring Boot Actuator是Spring Boot的一个子项目&#xff0c;它为监视和管理Spring Boot应用程序提供了附加功能。它提供了一组端点&#xff0c;允许您监视和管理应用程序&#xff0c;如运行状况检查、度量…

[附源码]计算机毕业设计Python电影推荐网站(程序+源码+LW文档)

该项目含有源码、文档、程序、数据库、配套开发软件、软件安装教程 项目运行 环境配置&#xff1a; Pychram社区版 python3.7.7 Mysql5.7 HBuilderXlist pipNavicat11Djangonodejs。 项目技术&#xff1a; django python Vue 等等组成&#xff0c;B/S模式 pychram管理等…

使用FastDeploy在英特尔CPU和独立显卡上端到端高效部署AI模型

目录 1.1 产业实践中部署AI模型的痛点 1.1.1 部署模型的典型流程 1.1.2 端到端的AI性能 1.1.3 部署模型的难点和痛点 1.2 FastDeploy简介 1.3 英特尔独立显卡简介 1.4 使用FastDeploy在英特尔CPU和独立显卡上部署模型的步骤 1.4.1 搭建FastDeploy开发环境 1.4.2 下载…