Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
hadoop map reduce 中的错误处理
根据文档 有几种方法可以在 MapReduce 中执行错误处理 以下是一些 A 使用枚举的自定义计数器 每个失败记录的增量 b 记录错误并稍后分析 计数器给出失败记录的数量 然而 为了获取失败记录的标识符 可能是其唯一键 以及发生异常的详细
Hadoop
errorhandling
MapReduce
DistributedSystem
网络断开后,raft follower如何重新加入?
我在木筏上遇到了问题 在论文 寻找一种可理解的共识算法 扩展版 中写道 要开始选举 追随者会增加其当前的 任期并过渡到候选状态 第 5 2 节 它还说 AppendEntries RPC 和 RequestVot RPC 中的接收者应为 R
distributedcomputing
DistributedSystem
raft
为什么Hadoop文件系统不支持随机I/O?
分布式文件系统 例如 Google 文件系统和 Hadoop 不支持随机 I O 不能修改之前写入的文件 只能写入和追加 他们为什么要这样设计文件系统 该设计有哪些重要优点 P S 我知道 Hadoop 将支持修改写入的数据 但他们表示 它
fileio
filesystems
Hadoop
DistributedSystem
GFS
适用于商品 Linux 存储场的最佳分布式文件系统 [关闭]
Closed 这个问题是基于意见的 help closed questions 目前不接受答案 我有很多闲置的英特尔 Linux 服务器 数百台 并且希望将它们用于 Web 托管和文件共享环境中的分布式文件系统 这不适用于 HPC 应用程序
Linux
filesystems
distributedcomputing
DistributedSystem
在 RAFT 中,是否有可能对某个日志条目达成多数共识,但该条目尚未提交?
考虑一下官方的这个模拟筏网页 https raft github io Why is term 2 index 1尽管没有承诺S2 leader S3 and S4同意日志吗 我运行了几分钟以确保所有通信均已完成 奇怪的是 如果我再添加一个
Algorithm
computerscience
DistributedSystem
Consensus
raft
paxos 与 raft 进行领导者选举
读完paxos和raft paper后 我有以下困惑 paxos论文仅描述了单个日志条目的共识 相当于raft算法中的领导者选举部分 在raft的leader选举中 paxos的方式相对于简单的随机超时方式有什么优势呢 一个常见的误解是原始
DistributedSystem
Consensus
paxos
raft
如何使用消息代理和数据库设计分布式应用程序?
我想实现一个分布式销售点系统 有点像中描述的系统销售点应用程序架构建议 https stackoverflow com questions 2454629 point of sale app architecture advice 它是一个
clientserver
Messaging
pointofsale
Architecture
DistributedSystem
PHP 会话很难跨分布式系统扩展吗?
在工作中 我们几乎用 Java 和 Perl 完成所有工作 但我想使用 PHP 和会话构建一个功能 有些人认为尝试在我们的系统上进行 PHP 会话是一个坏主意 因为它分布到许多服务器 具体问题会是什么 您还可以使用自定义会话保存处理程序 h
php
Session
DistributedSystem
节点如何知道哪些节点已经看到集群当前状态?
我正在阅读 akka 文档 并在理解他们的实现方式时遇到了一些麻烦Gossip 文档在这里 http doc akka io docs akka 2 4 common cluster html Gossip Protocol 让我困惑的部分
Java
scala
akka
DistributedSystem
gossip
消息总线和消息队列理解
我想知道我对消息总线和消息队列工作原理的理解是否正确 首先 我需要明确命名 服务巴士可以与以下互换使用消息总线 这是一种发布者 订阅者类型的系统 其中消息被添加到任意数量的发布者的消息集合中 并且任意数量的订阅者可以从中读取消息 到目前为止
Architecture
MessageQueue
servicebus
DistributedSystem
messagebus
为什么 CAP 定理中 RDBMS 不能容忍分区,但为什么它可用?
关于 RDBMS 是 CAP 定理中的 CA 我不明白的两点 1 它说RDBMS是not 分区容忍但 RDBMS 怎么样 any less比 MongoDB 或 Cassandra 等其他技术更具有分区容错性 是否有一种 RDBMS 设置可
distributedcomputing
RDBMS
DistributedSystem
captheorem
NoSQL
基于 paxos 的复制键值存储的领导者选举
我将使用多个 Paxos 实现一个键值存储 我会有几个节点 其中一个是主节点 该主节点接收更新请求并将值复制到从节点 我的问题是如何选择主节点 或领导者 我还可以使用Paxos算法吗 如果是这样 您认为有必要将paxos实现抽象为一个单元
DistributedSystem
keyvaluestore
paxos
Amazon S3架构[关闭]
就目前情况而言 这个问题不太适合我们的问答形式 我们希望答案得到事实 参考资料或专业知识的支持 但这个问题可能会引发辩论 争论 民意调查或扩展讨论 如果您觉得这个问题可以改进并可能重新开放 访问帮助中心 help reopen questi
amazonwebservices
Hadoop
amazons3
couchdb
DistributedSystem
我可以使用什么库来进行简单、轻量级的消息传递?
我将启动一个需要分布式节点之间通信的项目 该项目是用 C 编写的 我需要一个轻量级消息传递库来在节点之间传递非常简单的消息 基本上只是文本字符串 图书馆必须具备以下特点 无需外部设置 我需要能够在我的代码中启动并运行所有内容 我不想要求用户
c
messagepassing
DistributedSystem
如何监控ZeroMQ服务器是否存在?
我想在发送 ZeroMQ 请求之前检查服务器的存在 状态 但我不知道该怎么做 Q 我想在发送 ZeroMQ 请求之前检查服务器的存在 状态 解决方案是设置并使用zmq socket monitor Read one event off th
c
zeromq
DistributedSystem
pyzmq
multiagent
跨多个微服务的 2PC 分布式事务?
I read some information about 2 Phase Commit XA distributed transactions and how JTA does support it Seems to be that th
redis分布式锁解决什么问题?
所以我刚刚读到了有关 redlock 的内容 我的理解是它需要3台独立的机器才能工作 所谓独立 意味着所有机器都是主机 它们之间没有复制 这意味着它们服务于不同类型的数据 那么为什么我需要锁定三个独立的 Redis 实例 作为主实例 中存在
Redis
locking
DistributedSystem
Java:正确关闭多线程服务器的套接字
我正在尝试创建一个多线程服务器 多个客户端可以连接并提供服务 但是 我不确定在需要时如何正确释放我的资源 我的服务器运行一个输入线程 等待用户输入 和一个处理线程 处理连接和用户 我在服务器类中打开一个 ServerSocket 并将其传递
Java
Sockets
TCP
DistributedSystem
运行多个工作守护进程 SLURM
我想在一台机器上运行多个工作守护进程 按照达米安弗朗索瓦的回答关于slurm 集群的最少计算机数量是多少可以办到 问题是目前我只能在一台机器上执行 1 个工作守护进程 例如 当我跑步时 sudo slurmd N linux1 cDvv s
clustercomputing
distributedcomputing
DistributedSystem
slurm
CAP定理含义
分布式系统 Distributed System 最大的难点就是各个节点的状态如何同步 CAP定理就是这方面最基本的定理 也是理解分布式的起点 同时也是 NoSql数据库的基石 一 分布式的三个指标 1 Consistency k n s
DistributedSystem