信创-大数据平台CPU架构支持

2023-11-18

 

一、CDH和HDP、CDP

        CDP数据中心类似于CDH和HDP,直接安装在硬件服务器上,目前支持市面上主流的X86服务器,包括国内海光服务器,

CDH不支持ARM

以上两种大数据平台都仅支持x86架构,早在几年期RedHat联手cloudera公司发表声明将推出64位ARM版,据悉目前Centos7.5以上版本系统已经支持arm架构,cloudera公司产品未见推出arm机构大数据平台,且Cloudera和Hortonworks合并后的CDH和HDP版本都无法下载

基于ARM64银河麒麟V10系统(PK体系)适配安装Ambari2.7.3+HDP3.1 - 行业资讯 - 电子产品设计开发与电子技术学习交流!基于ARM64银河麒麟V10系统(PK体系)适配安装Ambari2.7.3+HDP3.1https://www.52dianzi.com/category/article/37/286439.html

二、 FusionInsight HD(华为云服务器CPU架构x86和鲲鹏区别对比及选择

智能数据湖_FusionInsight_数据湖应用场景_大数据-华为云智能数据湖FusionInsight基于Lakehouse湖仓一体架构,实现存算分离,让一份数据支持多种分析,让一个架构同时支持SQL、BI和AI。https://www.huaweicloud.com/product/FusionInsight.html

为加速政企数字化转型,助力传统大数据向云原生数据湖升级,原FusionInsight HD与华为云MRS强强结合,架构、内核归一,已全面升级到FusionInsight MRS云原生架构,将为客户提供一企一湖、一城一湖的解决方案

华为云服务器x86计算和鲲鹏计算有什么区别?x86和鲲鹏是指CPU架构的两个系列,x86采用复杂指令集(CISC),鲲鹏采用精简指令集(RISC)。云服务器吧来详细说下华为云服务器CPU架构x86计算和鲲鹏计算的区别:

华为云CPU架构x86和鲲鹏

华为云x86计算和鲲鹏计算对比

华为云服务器的CPU架构分为x86计算型和鲲鹏计算型,x86采用复杂指令集(CISC),鲲鹏采用精简指令集(RISC)。可以参考官方文档:华为云鲲鹏与X86 CPU架构文档说明

CISC复杂指令集和RISC简单指令集

x86是典型的CISC复杂指令集代表,RISC的典型代表是ARM,二者的区别在于指令集复杂度。从硬件角度来看:

  • CISC处理的是不等长指令集,CISC必须对不等长指令进行分割,因此CISC在执行单一指令的时候需要进行较多的处理工作;
  • RISC执行的是等长精简指令集,CPU在执行指令的时候速度较快且性能稳定。

综上,在并行处理方面RISC是优于CISC的,RISC可以同时执行多条指令,RISC精简指令集的制造工艺简单价格便宜。Windows是基于CISC的,所以CISC复杂指令集更被我们所熟知。

三、阿里云ODPS(dataworks、MaxCompute)

阿里云大数据_数据分析_ODPS_大数据-阿里云阿里云大数据是简单、易用、全托管的云原生大数据服务。核心产品阿里云一体化大数据智能计算平台ODPS(Open Data Platform and Service),自09年开始建设至今,提供离线计算、实时交互式分析、机器学习等可扩展的智能计算引擎。是目前中国唯一自研,规模最大,能同时支持超过10万台服务器并行计算的大数据平台。https://www.aliyun.com/product/bigdata/apsarabigdata

阿里云宣布全面兼容X86、ARM、RISC-V等多种芯片架构

在2021云峰会上,阿里云宣布:飞天操作系统正在全面兼容X86、ARM、RISC-V等多种芯片架构,实现“一云多芯”。

阿里云智能总裁张建锋表示,传统IT时代围绕芯片建立IT生态,但云计算从根本上改变了这一模式,云操作系统可以将服务器芯片、专用芯片等硬件封装成标准算力,无论底层芯片是X86、ARM、RISC-V还是硬件加速,给客户提供的都是标准的、高质量的云计算服务。

据悉,飞天是由阿里自研的云计算操作系统。一云多芯的实现,是阿里云“做深基础”战略的重要进展。这意味着阿里云不再依赖单一芯片架构,未来拥有更多可能性。

支持多种硬件平台。满足企业上云需求,支持多种硬件平台。除了支持传统X86平台,也应当兼容ARM平台,同时支持利用GPU、FPGA等新兴硬件进行加速。

• 极致性价比。充分利用硬件性能,精选最佳算法和算子实现,提升硬件执行效率。对于密集、复杂的计算,使用特殊算法特殊硬件来提升效率。

• SQL 兼容性高。高度兼容现有的SQL标准、优化器标准、存储标准,减少用户的迁移难度和学习难度。用户无需改写SQL,无需重新学习优化技术,无需迁移数据,仅需要进行小版本软件升级,即可享受到最新的性能优化技术。

阿里云的体系架构、技术架构(云计算 & 大数据)(42页)-原创力文档

四、星环科技 TDH大数据平台

TDH是星环科技自主研发的企业级一站式多模型大数据基础平台,兼容X86、ARM

TDH采用“四层统一的多模型技术架构”,包括了11款核心产品:实时流计算引擎Slipstream、关系型分析引擎Inceptor、宽表数据库Hyperbase、搜索引擎Scope、文档数据库DocStore、图数据库StellarDB、时空数据库Spacture、时序数据库TimeLyre、键值数据库KeyByte、事件存储库Event Store、数据科学平台Sophon Discover,能够满足用户不同应用场景的需求。同时配套Aquila Insight、Manager、Audit、Guardian等工具,使TDH的安装、管理、开发、运维、升级十分便捷,给用户带来极致的开发和运维体验。

百度安全验证https://baijiahao.baidu.com/s?id=1736770562489571354&wfr=spider&for=pc

数仓/数集场景下,星环科技TDH结合Arm服务器平台较开源大数据软件部署在X86平台的测试结果平均领先幅度较大

 五、腾讯大数据云平台TBDS

2021腾讯云首款ARM架构实例重磅发布

在此背景下,腾讯云重磅推出搭载 ARM 架构处理器的新一代 CVM 标准型 SR1,并于即日起正式开启公测!标准型实例 SR1 搭载主频达 2.8GHz 的 Ampere® Altra® 处理器,基于全新优化虚拟化平台,提供了平衡、稳定的计算、内存和网络资源。

搭载了 ARM 处理器的云服务器性能究竟如何?和常见的 X86 云服务器有哪些区别?用数据说话,深度了解更有「升」度的 ARM 云服务器

腾讯云全新 ARM 架构实例,有「升」度 - 知乎随着人工智能、云计算等技术的兴起,5G 网络的不断成熟,万物互联的时代应用需求日益多样化的同时,对于芯片架构的需求也越来越多样化。ARM 架构在提供可靠性能的基础上,低功耗、低开销的特点使得它被越来越广泛…https://zhuanlan.zhihu.com/p/448990046?utm_id=0

六、百度智能云大数据产品

百度安全验证https://baijiahao.baidu.com/s?id=1713934353483471735&wfr=spider&for=pc企业级托管大数据平台-百度智能云

数据湖管理与分析平台EDAP_数据分析_数据开发-百度智能云

基于ARM64银河麒麟V10系统(PK体系)适配安装Ambari2.7.3+HDP3.1

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

信创-大数据平台CPU架构支持 的相关文章

随机推荐

  • R-CNN史上最全讲解

    文章目录 一 初识R CNN 网络结构 二 训练步骤 1 RP的确定 2 模型pre training 3 Fine Tunning 4 提取并保存RP的特征向量 5 SVM的训练 6 bbox regression的训练 三 测试步骤 s
  • MySQL8--Windows下使用msi(图形界面)安装的方法

    原文网址 MySQL8 Windows下使用msi 图形界面 安装的方法 的博客 CSDN博客 简介 本文介绍Windows使用图形界面安装MySQL8的方法 下载地址 1 网址入口 进入MySQL的官方网站 https dev mysql
  • 后端开发缓存篇之缓存及缓存模式的介绍

    一 什么是缓存 缓存 简单说就是为了节约对原始资源重复获取的开销 而将结果数据副本存放起来以供获取的方式 二 什么时候使用缓存 1 以 幂等和安全的方式对资源的获取操作 2 缓存数据必须是重复获取的 缓存能生效的本质是空间换时间 缓存的命中
  • Centos 7 升级Openssh7.4到9.2

    本次使用在线升级 因此要求系统yum wget等功能能正常使用 环境 cat etc redhat release CentOS Linux release 7 6 1810 Core ssh V OpenSSH 7 4p1 OpenSSL
  • wired xdisplay只能复制无法拓展

    我出现的问题是ipad可以复制屏幕 但是在系统显示设置中却没有显示有第二块屏幕 如果显示有第二块屏幕 直接win p调成拓展就可以解决了 如果出现的问题和我一样 可以按下面步骤解决 1 ipad和桌面端连接 2 PC端xDisplay 高级
  • 微软和Facebook推出Docs.com

    来源 德胜网 4月22日 据国外媒体报道 Facebook和微软在联手一项在线文件共享服务 看起来多一点像Google Docs 周三在Facebook的F8会议Docs com上线 该网站允许Facebook用户使用Facebook连接登
  • 2.虚拟机CentOS7.6安装SOA

    1 安装JDK8 1 1检查是否自带OpenJDK rpm qa grep jdk 卸载openjdk sudo yum y remove java openjdk 验证是否卸载了openjdk 1 2上传安装包 解压安装包 tar zxv
  • Seata源码分析——@GlobalTransactional

    Seata源码分析 GlobalTransactional 前言 脑图 Seata三大角色 GlobalTransactional 源码入口 GlobalTransactionScanner 初始化TM RM wrapIfNecessary
  • 软考:中级软件设计师:多媒体基础,音频,图像,颜色,多媒体技术的种类,图像音频视频的容量计算,常见的多媒体标准

    软考 中级软件设计师 多媒体基础 提示 系列被面试官问的问题 我自己当时不会 所以下来自己复盘一下 认真学习和总结 以应对未来更多的可能性 关于互联网大厂的笔试面试 都是需要细心准备的 1 自己的科研经历 科研内容 学习的相关领域知识 要熟
  • 第24讲 Python 复数数据类型详解(complex)

    您的 关注 和 点赞 是认可 是支持 是动力 如意见相佐 可留言 本人必将竭尽全力试图做到准确和全面 终其一生进行修改补充更新 本文首发在IT羊资源网 IT羊资源网 网址 https www ityangzy com IT羊资源网是IT世界
  • 我30岁了,转行学编程可以吗? 排除法告诉你答案 ...

    我30岁了 转行学编程可以吗 排除法告诉你答案 白月黑羽网站的读者在群里问过好几次 这个问题 但是这个问题太笼统了 其实不好回答 白月黑羽的这篇博客将根据的你的自身状况 不断的添加 自身条件的假设 采用排除法 认真的回答这个问题 既然有 转
  • ImageJ按照Little-Endian格式存储raw文件

    opencv图像处理是针对little endian数据 多帧堆叠情况下 否则结果错误 下面介绍如何用imageJ存储raw 参考 https imagej nih gov ij docs menus file html 1 在ImageJ
  • 毕设 STM32的FRID高速收费系统(源码+硬件+论文)

    文章目录 0 前言 1 主要功能 2 系统架构 3 硬件设计原理图 4 软件设计流程 称重模块HX711模块子流程 步进电机子流程 5 关键代码 6 最后 0 前言 这两年开始毕业设计和毕业答辩的要求和难度不断提升 传统的毕设题目缺少创新和
  • Python库这么多,如何记住呢?

    大家不要着急去收藏Python库 了解python的一些常用库就可以了 具体学到什么方向可以找个项目直接做 过程中接触到什么库再去学 下面给大家介绍几种查找Python库的方法 一 查看官方文档 要知道有哪些 大家可以查看官方文档 比如常用
  • 关键字static的理解

    1 概念 像在VB C C C Java PHP Objective C JavaScript中我们可以看到static作为关键字和函数出现 在其他的高级计算机语言如FORTRAN ALGOL COBOL BASIC LISP SNOBOL
  • Kotlin - 文件类 File

    文件操作 遍历 walk 自上而下 深度优先 遍历整个文件夹 walkBottomUp 自下而上的顺序遍历文件目录和内容 walkTopDown 自上而下的顺序遍历文件目录和内容 名称 extension 文件名的后缀格式 不包含 例如 m
  • [激光原理与应用-45]:《焊接质量检测》-2- 常见焊接缺陷与检验方法

    目录 一 概述 二 焊接缺陷的分类 2 1 按产生原因 2 2 按性质分有 2 3 按在焊缝中的位置分有 三 焊接缺陷检验的常用方法 一 概述 对于一个金属结构来说 焊接检验就是对所有焊缝或焊接接头而言的 也就是对焊接缺陷的检验 但焊接接头
  • idea 编译成功启动失败

    环境 Windows10 IntelliJ IDEA 2021 2 3 Ultimate Edition Apache Maven 3 8 3 SpringBoot版本 2 1 13 RELEASE 问题描述 SpringBoot项目启动时
  • html输入浮点型,input框限定输入值为浮点型代码分享

    本文主要为大家带来一篇对于input 框限定输入值为浮点型的js代码 小编觉得挺不错的 现在就分享给大家 也给大家做个参考 一起跟随小编过来看看吧 希望能帮助到大家 在一些项目中 比如金额用到浮点型 对于input 限定可以参考以下 fun
  • 信创-大数据平台CPU架构支持

    一 CDH和HDP CDP CDP数据中心类似于CDH和HDP 直接安装在硬件服务器上 目前支持市面上主流的X86服务器 包括国内海光服务器 CDH不支持ARM 以上两种大数据平台都仅支持x86架构 早在几年期RedHat联手clouder