一、CDH和HDP、CDP
CDP数据中心类似于CDH和HDP,直接安装在硬件服务器上,目前支持市面上主流的X86服务器,包括国内海光服务器,
CDH不支持ARM
以上两种大数据平台都仅支持x86架构,早在几年期RedHat联手cloudera公司发表声明将推出64位ARM版,据悉目前Centos7.5以上版本系统已经支持arm架构,cloudera公司产品未见推出arm机构大数据平台,且Cloudera和Hortonworks合并后的CDH和HDP版本都无法下载
基于ARM64银河麒麟V10系统(PK体系)适配安装Ambari2.7.3+HDP3.1 - 行业资讯 - 电子产品设计开发与电子技术学习交流!基于ARM64银河麒麟V10系统(PK体系)适配安装Ambari2.7.3+HDP3.1https://www.52dianzi.com/category/article/37/286439.html
二、 FusionInsight HD(华为云服务器CPU架构x86和鲲鹏区别对比及选择
智能数据湖_FusionInsight_数据湖应用场景_大数据-华为云智能数据湖FusionInsight基于Lakehouse湖仓一体架构,实现存算分离,让一份数据支持多种分析,让一个架构同时支持SQL、BI和AI。https://www.huaweicloud.com/product/FusionInsight.html
为加速政企数字化转型,助力传统大数据向云原生数据湖升级,原FusionInsight HD与华为云MRS强强结合,架构、内核归一,已全面升级到FusionInsight MRS云原生架构,将为客户提供一企一湖、一城一湖的解决方案
华为云服务器x86计算和鲲鹏计算有什么区别?x86和鲲鹏是指CPU架构的两个系列,x86采用复杂指令集(CISC),鲲鹏采用精简指令集(RISC)。云服务器吧来详细说下华为云服务器CPU架构x86计算和鲲鹏计算的区别:
华为云CPU架构x86和鲲鹏
华为云x86计算和鲲鹏计算对比
华为云服务器的CPU架构分为x86计算型和鲲鹏计算型,x86采用复杂指令集(CISC),鲲鹏采用精简指令集(RISC)。可以参考官方文档:华为云鲲鹏与X86 CPU架构文档说明。
CISC复杂指令集和RISC简单指令集
x86是典型的CISC复杂指令集代表,RISC的典型代表是ARM,二者的区别在于指令集复杂度。从硬件角度来看:
- CISC处理的是不等长指令集,CISC必须对不等长指令进行分割,因此CISC在执行单一指令的时候需要进行较多的处理工作;
- RISC执行的是等长精简指令集,CPU在执行指令的时候速度较快且性能稳定。
综上,在并行处理方面RISC是优于CISC的,RISC可以同时执行多条指令,RISC精简指令集的制造工艺简单价格便宜。Windows是基于CISC的,所以CISC复杂指令集更被我们所熟知。
三、阿里云ODPS(dataworks、MaxCompute)
阿里云大数据_数据分析_ODPS_大数据-阿里云阿里云大数据是简单、易用、全托管的云原生大数据服务。核心产品阿里云一体化大数据智能计算平台ODPS(Open Data Platform and Service),自09年开始建设至今,提供离线计算、实时交互式分析、机器学习等可扩展的智能计算引擎。是目前中国唯一自研,规模最大,能同时支持超过10万台服务器并行计算的大数据平台。https://www.aliyun.com/product/bigdata/apsarabigdata
阿里云宣布全面兼容X86、ARM、RISC-V等多种芯片架构
在2021云峰会上,阿里云宣布:飞天操作系统正在全面兼容X86、ARM、RISC-V等多种芯片架构,实现“一云多芯”。
阿里云智能总裁张建锋表示,传统IT时代围绕芯片建立IT生态,但云计算从根本上改变了这一模式,云操作系统可以将服务器芯片、专用芯片等硬件封装成标准算力,无论底层芯片是X86、ARM、RISC-V还是硬件加速,给客户提供的都是标准的、高质量的云计算服务。
据悉,飞天是由阿里自研的云计算操作系统。一云多芯的实现,是阿里云“做深基础”战略的重要进展。这意味着阿里云不再依赖单一芯片架构,未来拥有更多可能性。
支持多种硬件平台。满足企业上云需求,支持多种硬件平台。除了支持传统X86平台,也应当兼容ARM平台,同时支持利用GPU、FPGA等新兴硬件进行加速。
• 极致性价比。充分利用硬件性能,精选最佳算法和算子实现,提升硬件执行效率。对于密集、复杂的计算,使用特殊算法特殊硬件来提升效率。
• SQL 兼容性高。高度兼容现有的SQL标准、优化器标准、存储标准,减少用户的迁移难度和学习难度。用户无需改写SQL,无需重新学习优化技术,无需迁移数据,仅需要进行小版本软件升级,即可享受到最新的性能优化技术。
阿里云的体系架构、技术架构(云计算 & 大数据)(42页)-原创力文档
四、星环科技 TDH大数据平台
TDH是星环科技自主研发的企业级一站式多模型大数据基础平台,兼容X86、ARM
TDH采用“四层统一的多模型技术架构”,包括了11款核心产品:实时流计算引擎Slipstream、关系型分析引擎Inceptor、宽表数据库Hyperbase、搜索引擎Scope、文档数据库DocStore、图数据库StellarDB、时空数据库Spacture、时序数据库TimeLyre、键值数据库KeyByte、事件存储库Event Store、数据科学平台Sophon Discover,能够满足用户不同应用场景的需求。同时配套Aquila Insight、Manager、Audit、Guardian等工具,使TDH的安装、管理、开发、运维、升级十分便捷,给用户带来极致的开发和运维体验。
百度安全验证https://baijiahao.baidu.com/s?id=1736770562489571354&wfr=spider&for=pc
数仓/数集场景下,星环科技TDH结合Arm服务器平台较开源大数据软件部署在X86平台的测试结果平均领先幅度较大
五、腾讯大数据云平台TBDS
2021腾讯云首款ARM架构实例重磅发布
在此背景下,腾讯云重磅推出搭载 ARM 架构处理器的新一代 CVM 标准型 SR1,并于即日起正式开启公测!标准型实例 SR1 搭载主频达 2.8GHz 的 Ampere® Altra® 处理器,基于全新优化虚拟化平台,提供了平衡、稳定的计算、内存和网络资源。
搭载了 ARM 处理器的云服务器性能究竟如何?和常见的 X86 云服务器有哪些区别?用数据说话,深度了解更有「升」度的 ARM 云服务器
腾讯云全新 ARM 架构实例,有「升」度 - 知乎随着人工智能、云计算等技术的兴起,5G 网络的不断成熟,万物互联的时代应用需求日益多样化的同时,对于芯片架构的需求也越来越多样化。ARM 架构在提供可靠性能的基础上,低功耗、低开销的特点使得它被越来越广泛…https://zhuanlan.zhihu.com/p/448990046?utm_id=0
六、百度智能云大数据产品
百度安全验证https://baijiahao.baidu.com/s?id=1713934353483471735&wfr=spider&for=pc企业级托管大数据平台-百度智能云
数据湖管理与分析平台EDAP_数据分析_数据开发-百度智能云
七、天翼云
多云部署
大数据平台支持常见基于X86架构的服务器,基于ARM架构的国产鲲鹏服务器,也支持基于虚拟机部署,同时支持鲲鹏与X86混合部署,满足公有云、专有云、混合云、边缘云部署要求。
天翼云工业大数据解决方案-打造资源富集、应用繁荣、产业进步、治理有序的工业大数据生态 - TOP云通过促进工业数据汇聚共享、深化数据融合创新、提升数据治理能力、加强数据安全管理,打造资源富集、应用繁荣、产业进步、治理有序的工业大数据生态体系。https://topyun.vip/index.php/news/content/420.html
基于ARM64银河麒麟V10系统(PK体系)适配安装Ambari2.7.3+HDP3.1