Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
分布式系统详解--框架(Hadoop-单机版搭建)
分布式系统详解 框架 Hadoop 单机版搭建 前面讲了这么多的理论知识 也有一些基础的小知识点 很简单的概括了一下 从这篇文章开始 就会进入到一个理论实践相结合中 这篇文章主要是讲的Hadoop 讲解它的基础认识 安装 常用命令 还有就是
Hadoop
分布式
Redis哨兵模式高可用原理
我们知道主从复制是高可用的基石 从库宕机依然可以将请求发送给主库或者其他从库 但是 Master 宕机 只能响应读操作 写请求无法再执行 所以主从复制架构面临一个严峻问题 主库挂了 无法执行 写操作 无法自动选择一个 Slave 切换为 M
网络
分布式
数据库
Redis
Java
rabbitmq基础4——单机多节点集群、多机集群部署、基础功能测试
文章目录 一 一机多实例集群 1 1 三机启动 1 2 立主纳从 1 3 查看集群状态 1 4 web监控 1 5 测试 1 5 1 数据同步 1 5 2 一从死 主仍战 1 5 3 从复活 死亡期间数据同步 1 5 4 主死 从活但不可用
rabbitmq
javarabbitmq
分布式
Linux
运维
大数据课程K13——Spark的距离度量&&相似度度量
文章作者邮箱 yugongshiye sina cn 地址 广东惠州 本章节目的 掌握Spark的距离度量和相似度度量 掌握Spark的欧氏距离 掌握Spark的曼哈顿距离 掌握Spark的切比雪夫距离 掌握Spark的最小二乘法 一 距离
大数据
spark
分布式
MPP架构、常见OLAP引擎分析
MPP架构 常见OLAP引擎分析 一 MPP架构 1 SMP 2 NUMA 3 MPP 二 批处理架构和MPP架构 三 MPP架构的OLAP引擎 1 只负责计算 不负责存储的引擎 1 Impala 2 Presto 2 既负责计算 又负责存
分布式
服务器
数据库
运维
Interview preparation -- spring cloud seata
分布式事务 事物ACID特性 A Atomic 原子性 构成事物的所有操作 要么全部成功 要么全部失败 不存在部分成功或失败情况 C Conststency 一致性 在事物完成时候 所有数据必须保持一致 I Isolation 隔离性 并发
分布式
seata
Java
Interview
分布式系统详解--框架(Hadoop--RPC协议)
分布式系统详解 框架 Hadoop RPC协议 在之前的一篇文章当中已经写过一篇文章是关于RPC通信协议的文章 是 分布式系统详解 基础知识 通信 是讲的关于网络通信的最基本的知识 这篇文章也简单讲一下关于hadoop内部的网络通信 一 h
Hadoop
分布式
rpc
分布式最小生成树算法
分布式最小生成树算法 作为分布式算法中的经典算法之一 GHS分布式最小生成树算法的相关资料却并不多见 相关的原理介绍只是范范而谈 代码实现也比较少见 本文将汇总目前网络上可查阅的相关参考资料并结合自己的理解 旨在深入理解GHS的算法核心与实
密码学与隐私计算
算法
分布式
Kafka原理
生产者原理解析 生产者工作流程图 一个生产者客户端由两个线程协调运行 这两个线程分别为主线程和 Sender 线程 在主线程中由kafkaProducer创建消息 然后通过可能的拦截器 序列化器和分区器的作用之后缓存到消息累加器 Recor
kafka
Java
分布式
自主设计,模拟实现 RabbitMQ - 多虚拟主机管理
目录 前言 一 多虚拟主机管理 1 1 需求分析 1 1 1 回顾 1 1 2 实现方案 1 2 具体实现 lt
RabbitMQ(扩展模拟实现)
rabbitmq
服务器
分布式
阿里P8精心整理的微服务系统架构设计手册,一睹微服务架构世界
近几年 微服务架构在大量技术社区迅速蹿红 被认为是 IT 软件架构的未来方向 一线互联网公司由于具有大量的业务体量和业务场景 比如阿里 百度 网易 很早就开始入坑微服务架构 随着云端办公以来 发现微服务越来越重要了 Docker 容器技术和
Java
微服务
分布式
PySpark环境配置
首先 要知道PySpark是Spark为Python提供的API库 因此使用 pip install pyspark 下载pyspark不等于下载了spark 因此 配置pyspark环境 首先需要下载spark 1 linux下载spar
大数据
spark
分布式
大数据从入门到精通(超详细版)之Hadoop详解
前言 嗨 各位小伙伴 恭喜大家学习到这里 不知道关于大数据前面的知识遗忘程度怎么样了 又或者是对大数据后面的知识是否感兴趣 本文是 大数据从入门到精通 超详细版 的一部分 小伙伴们如果对此感谢兴趣的话 推荐大家按照大数据学习路径开始学习哦
大数据从入门到精通(超详细版)
大数据
Hadoop
分布式
Redis7之实现分布式锁(九)
9 1 分布式锁需要的条件和刚需 独占性 任何时刻有且只有一个线程持有这个锁 高可用 若redis集群环境下 不能因为某一个节点挂了而出现获取锁和释放锁失败的情况 高并发请求下 依旧性能很好 防死锁 不能出现死锁问题 必须有超时重试机制或者
Redis
分布式
Java
Hadoop集群搭建记录
本文目录 写在前面 写在前面 本系列文章索引以及一些默认好的条件在 传送门 因为课程需要 我们要进行Eclipse的安装操作 eclipse需要是CentOS下的 网址在 传送门 在出现的页面中 根据自身的机型选择合适的类型 博主为x86
云计算
云计算
分布式
Hadoop
centOS
【软件开发】服务端高并发分布式架构演进之路
服务端高并发分布式架构演进之路 本文以淘宝作为例子 介绍从一百个到千万级并发情况下服务端的架构的演进过程 同时列举出每个演进阶段会遇到的相关技术 让大家对架构的演进有一个整体的认知 文章最后汇总了一些架构设计的原则 在介绍架构之前 为了避免
软件架构
分布式
架构
服务器
高并发
分布式系统架构网络之IDC机房
我们开发的互联网应用被部署到IDC机房里的某个服务器上 从而完成了应用互联网的接入 所以我们接下来学习一些IDC机房的相关知识 IDC机房又被称为互联网数据中心 Internet Data Center 或者数据中心 IDC不仅是数据存储的
架构师
分布式系统基础专栏
IDC
系统架构
分布式
什么是集群、分布式、集中式、伪分布式
1 集中式 将项目等部署到同一台机器上 对机器性能要求比较高 一般会用多台机器备份 否则 如果机器出现死机等状况 整个项目将不能运行 eg 就好比你要盖一座房子 你房子就给一个人盖 如果这个人生病或者有事 你还没有合适的人来代替这个人 你的
网络基础
分布式
集中式
集群
伪分布式
Hadoop分布式集群时间同步(ntp)配置
目录 时间服务器配置 必须root用户 1 查看所有节点ntpd 时间服务器 服务状态和开机自启状态 2 修改hadoop102的ntp conf配置文件 3 重新启动ntpd服务并设置开机自启 配置其他服务器 1 关闭所有节点上的ntpd
Hadoop
分布式
服务器
大数据
【分布式】分布式事务:2PC
分布式事务的问题可以分为两部分 并发控制 concurrency control 原子提交 atomic commit 分布式事务问题的产生场景 一份数据被分片存在多台服务器上 那么每次事务处理都涉及到了多台机器 可序列化 并发控制 定义了
MIT6824分布式论文
分布式
«
1 ...
50
51
52
53
54
55
56
57
»