AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 403150
Accepted
ILikeFood
ILikeFood
Asked: 2012-06-29 10:07:51 +0800 CST2012-06-29 10:07:51 +0800 CST 2012-06-29 10:07:51 +0800 CST

Hadoop DataNode 给我一个不兼容的命名空间 ID

  • 772

当我从我的主节点运行 start-all.sh 脚本时,我的一些 DataNodes 无法启动;日志文件报告 Java IOException:/tmp/$MY_USER_NAME 中不兼容的命名空间 ID。

hadoop hdfs
  • 2 2 个回答
  • 6684 Views

2 个回答

  • Voted
  1. Best Answer
    mgorven
    2012-06-29T11:02:55+08:002012-06-29T11:02:55+08:00

    当 NameNode 被格式化时,会生成一个命名空间 ID,它本质上标识了分布式文件系统的特定实例。当 DataNode 首次连接到 NameNode 时,它​​们将命名空间 ID 与数据块一起存储,因为这些块必须属于特定的文件系统。

    如果一个DataNode后来连接到一个NameNode,NameNode声明的命名空间ID与DataNode上存储的命名空间ID不匹配,将拒绝操作并报“incompatible namespace ID”错误。这意味着 DataNode 已连接到不同的 NameNode,并且它存储的块不属于该分布式文件系统。

    这通常意味着您以某种方式放错了 NameNode 元数据。如果您有多个 HDFS 安装,您的 DataNode 可能会连接到错误的 NameNode。如果您只有一个安装,那么您的 NameNode 要么使用不同的元数据目录运行,要么您以某种方式丢失了元数据并从新格式化的文件系统开始(这应该只能通过运行来实现hadoop namenode -format)。尝试找到正确的 NameNode 元数据或从备份中恢复它。

    • 3
  2. ILikeFood
    2012-06-29T10:07:51+08:002012-06-29T10:07:51+08:00

    每次 NameNode 重新格式化时,它都会生成一个新的命名空间 ID,而您的一些机器没有收到备忘录。解决这个问题最简单的方法是重新格式化分布式文件系统;从 HDFS 检索任何文件,然后rm -Rf /tmp/hadoop-$MY_USER_NAME在每台服务器上运行(目录路径可能不同,具体取决于您的配置)。然后hadoop namenode -format从您的主服务器运行。在那之后,bin/start-all.sh应该做的伎俩。

    • 0

相关问题

  • gitosis 干扰 hadoop

  • HDFS 中的“流式数据访问”是什么意思?

  • hadoop - 数据节点退役

  • 什么是 Hadoop,它的用途是什么?[关闭]

  • Hadoop 集群。2 台快速、4 台中等、8 台较慢的机器?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve