程序员经验分享-hwhale

格式化 HDFS 时出现 UnknownHostException

2024-03-28

我已经使用以下命令在伪分布式模式下在 CentOS 6.3 64 位上安装了 CDH4指示 https://ccp.cloudera.com/display/CDH4DOC/Installing+CDH4+on+a+Single+Linux+Node+in+Pseudo-distributed+Mode#InstallingCDH4onaSingleLinuxNodeinPseudo-distributedMode-InstallingCDH4withMRv1onaSingleLinuxNodeinPseudodistributedmode。 Hadoop 配置文件中的所有内容均设置为 localhost。但是，当我格式化名称节点时，仍然会出现以下异常。当我添加一个192.168.1.101 CentOSHost进入到/etc/hostsfile 异常消失，我能够运行 format/start HDFS 并运行 MR 作业。

即使我没有连接到网络，我也想运行 MR 作业，而不向/etc/hosts文件。如何完成这件事？

12/08/27 22:17:15 警告 net.DNS：无法确定主机的地址 - 回退到“localhost”地址 java.net.UnknownHostException：CentOSHost：CentOSHost
在 java.net.InetAddress.getLocalHost(InetAddress.java:1360)
在 org.apache.hadoop.net.DNS.resolveLocalHostIPAddress(DNS.java:283)
在 org.apache.hadoop.net.DNS。(DNS.java:59) 在 org.apache.hadoop.hdfs.server.namenode.NNStorage.newBlockPoolID(NNStorage.java:1017)
在 org.apache.hadoop.hdfs.server.namenode.NNStorage.newNamespaceInfo（NNStorage.java:565）
在org.apache.hadoop.hdfs.server.namenode.FSImage.format（FSImage.java:145）
在 org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:724)
在 org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1095)
在 org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1193)


看起来有些配置正在返回/使用主机名作为CentOSHost.

什么是hostname --fqdn返回给你吗？

对于 Hadoop，名称查找和反向查找成功进行非常重要。您应该能够解析 ip 地址并从 ip 地址解析主机名（反向解析）。可以使用上述命令进行测试。

反向解析需要进入 /etc/hosts 才能工作。除非条目和配置指向本地主机。即使在这种情况下hostname --fqdn应该返回为localhost.

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)

Exception

Hadoop

HDFS

格式化 HDFS 时出现 UnknownHostException 的相关文章

随机推荐

  • 多个 Grok 过滤器不存储第一个过滤器匹配记录

    我正在使用 Logstash 来解析 postfix 日志 我主要关注从后缀日志获取退回的电子邮件日志 并将其存储在数据库中 为了获取日志 首先我需要找到 postfix 生成的与我的消息 ID 相对应的 ID 然后使用该 ID 我需要查找

  • 如何在 Android Studio 中实现 Google Distance/Matrix Api？

    我正在编写一个应用程序来计算路线中的两个位置 我已经实现了 google place API 来根据名称或地址获取纬度 经度 但我无法实现距离 API 当我尝试导入时 类 方法不会出现 下面是我正在尝试做的事情的一个例子 private s

  • `unique_ptr< T const [] >` 应该接受 `T*` 构造函数参数吗？

    Code include

  • 在 SWIG 接口中忽略 __attribute__((packed)) 总是安全的吗？

    由于 SWIG 无法解析 attribute packed 在我想要包装的一些 C 结构上 我通过放置一个来解决这个问题 define attribute x in my i file 这东西什么时候才会来咬我 这实际上是完全理智的 SWI

  • 右键单击 NSStatusItem

    我有一个NSStatusItem我想通过右键单击该项目来弹出一个菜单 我对 NSView 进行了子类化并覆盖了 void rightMouseDown NSEvent event方法 我也实施了 void mouseDown NSEvent

  • 如何在 laravel 背包中指定 IN 子句？

    我如何添加INlaravel 中的背包条款 这就是我正在寻找的 this gt crud gt addClause where customer id in 1 3 5 6 7 应该翻译成这样 select from customer wh

  • HttpWebRequest 抛出 404 异常

    我发现 HttpWebRequest 对不存在的资源抛出 WebException 在我看来 这很奇怪 因为 HttpWebResponse 有 StatusCode 属性 NotFount 项存在 您认为这有什么原因吗 或者这只是开发人员

  • 为什么 .append() 方法不适用于字符串，它们的行为不像列表吗？

    即使字符串实际上是字符常量列表 为什么此语句会产生错误 string name string name append hello word 我希望它能起作用的原因是 当我们使用 for 循环时 我们可以使用以下语句 for i in str

  • 方案按引用传递

    如何在方案中通过引用传递变量 我想要的功能的示例 define foo lambda x set x 5 define y 2 foo y display y outputs 5 另外 有没有办法通过引用返回 See http commun

  • oAuth 实现：当前域重要吗？

    我是一名前端开发人员 帮助用户体验团队开发浏览器插件的界面 该插件基于 HTML CSS JS 需要身份验证 目前 我们的线路中有标准的 u p 字段 但客户想知道是否可以进行社交登录 由于插件的接口被注入到用户访问的每个页面中 这意味着身

  • “copyfiles”是标准的 Ant 任务吗？

    我有一个 NetBeans 项目 我正在尝试从命令行手动编译ant 当在安装了 NetBeans 的同一台计算机上运行时 它可以完美运行 但是 如果我跑ant在中央持续集成服务器 未安装 NetBeans 上 它在

  • WordPress 获取自定义帖子类型的分类列表

    我正在为我的 WordPress 网站使用 视频 主题 在此主题中 定义了视频帖子类型和 视频类别 分类法 这是分类法的注册代码 add action init custom posttype menu wp admin1 function

  • 状态模式与 ENUM

    有时需要支持对象的状态 据我了解有两种方法 枚举 简单 STATE模式 OC原理 显然需要使用状态模式来达到这样的目的 我不确定 但是阅读其他代码时 我经常遇到的只是枚举而不是状态模式 状态模式有权力吗 通常 ENUM 方法涉及某种状态和转

  • 在保护模式下读取键盘

    我正在尝试制作 PS 2 键盘控制器 但无法正常工作 outb 0x60 0xED outb 0x60 2 Turn on CapsLock LED doesn t works char c 0 while c 1 if inb 0x60

  • 如何正确清除singleTop Activity中的意图数据？

    场景是 在清单中声明了 singleTop 的活动 这个活动被称为带有一些额外的内容 我能够清除意图数据并能够翻转屏幕等 而无需调用原始意图 问题是 当系统终止该活动并且用户返回该活动时 它会使用创建该活动的原始意图重新启动 我该如何删除这

  • 获取用于 Azure Web PubSub Rest API 的 JWT 承载令牌进行身份验证

    我正在开发一个项目 其中我通过 Azure Web PubSub 服务构建一个发布 订阅系统 JavaScript 客户端 订阅者 通过套接字连接 能够接收 Hub 上和 Group 中发布的消息 为此 我遵循了本教程 https lear

  • 如何指定浮点数的舍入模式？

    我想将浮点数四舍五入到最接近的整数 当存在 最接近的整数 时 趋向正无穷大 use std num Float fn main assert eq 0 0 0 5 round fails 但是 文档round say 将中途情况舍入到远离

  • Windows XP 性能监视器应用程序 (perfmon) 中缺少处理器/内存计数器

    Perfmon 是一个 Windows 实用程序 可通过测量系统计数器帮助开发人员找到应用程序中的瓶颈 我正在读一本性能监控教程 http adminfoo net 2007 04 windows perfmon top ten count

  • 使用串口通过 Arduino 将多个值发送到 Raspberry

    我有一个关于 Arduino 和 Raspberry Pi 之间串行通信的问题 事实上 我想使用 Arduino 将 2 个变量发送到 Raspberry Pi 并以不同的方式使用它们 这是我的 Arduino 草图 int one 1 i

  • 格式化 HDFS 时出现 UnknownHostException

    我已经使用以下命令在伪分布式模式下在 CentOS 6 3 64 位上安装了 CDH4指示 https ccp cloudera com display CDH4DOC Installing CDH4 on a Single Linux N

热门标签