Cloudera Manager-HDFS复制不足的块

格子衬衫

我使用的全新安装CDH 5.5.2Cloudera Manager我看来,这HDFS是一个至关重要的健康问题。集群中有1NameNode和1 DataNode

复制不足的块

复制不足的块

578在群集中的复制块下。集群中共有580个块。复制区块下的百分比:99.66%。临界阈值:40.00%

我应该如何解决这个问题?

更新:Cloudera Manager(CDH 5.0.2) -> HDFS -> Configuration -> View and Edit -> Service-Wide -> Replication -> Replication Factor (dfs.replication) -> 1在这种情况下不起作用。

OkezieE

要检查的几件事:

  • namenode可能正在使用过时的配置运行。如果是这样,请重新启动名称节点以确保其正在使用cloudera manager中显示的当前配置运行。
  • 有时也需要重新启动cloudera代理以使其正确生成配置
  • 如果这不起作用,请运行 hadoop fsck /|egrep -v '^\.+$'|grep -i replica
  • 查找受影响的文件,并验证复制因子设置为1,因为您只有一个数据节点
    • 您可以通过运行来检查文件的复制因子,hadoop fs -ls /path/to/file.txt然后查看输出中第二列中的数字

注意:请确保将HDFS网关角色添加到hadoop要从中运行命令的服务器

还可以考虑将cloudera Manager升级到5.5.1-您的版本是非常早期的版本,从那时起他们进行了很多更改。

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

Cloudera Manager与Apache

来自分类Dev

Cloudera Manager无法启动

来自分类Dev

麻烦cloudera-manager-server

来自分类Dev

Cloudera Impala:如何从HDFS块读取数据?

来自分类Dev

Cloudera Impala:如何从HDFS块读取数据?

来自分类Dev

cloudera Manager集群配置被覆盖

来自分类Dev

来自Cloudera Manager的电子邮件警报

来自分类Dev

为什么Cloudera Manager报告磁盘已满?

来自分类Dev

Cloudera Manager未显示完成的Impala查询

来自分类Dev

Cloudera Manager API 获取 Flume 代理列表

来自分类Dev

在 Cloudera Manager 上启动 JobHistoryServer 时出错

来自分类Dev

无法在Cloudera Quickstart VM 5.3.0中使用Cloudera Manager添加新服务

来自分类Dev

Cloudera Manager检查器未在主机上运行

来自分类Dev

如何在cloudera manager上配置flume服务?

来自分类Dev

Cloudera:在HDFS异常中上传文件

来自分类Dev

Cloudera Hadoop VM 5.10 - 找到 HDFS 路径?

来自分类Dev

无法将文件从本地文件系统复制到Cloudera上的hadoop / hdfs

来自分类Dev

在伪分布式模式下使用Cloudera Manager设置Hadoop-Datanode无法启动

来自分类Dev

CDH4将Cloudera Manager还原到现有群集

来自分类Dev

是否应将Cloudera Manager 5安装在计算节点或独立服务器上?

来自分类Dev

Errno 14 PYCURL错误6; 无法解析Cloudera Manager 7.x升级中的主机

来自分类Dev

在伪分布式模式下使用Cloudera Manager设置Hadoop-Datanode无法启动

来自分类Dev

使用CDH4 + Cloudera Manager时将JDBC驱动程序放在哪里?

来自分类Dev

使用Cloudera Manager的哪个版本的CDH会自动安装JDK1.7?

来自分类Dev

无法将Impala-Kudu连接到Apache Kudu(没有Cloudera Manager):获取TTransportException错误

来自分类Dev

通过Cloudera Manager REST API为纱线创建动态资源池

来自分类Dev

添加从服务器时,Cloudera问题,cloudera-manager-agent必须具有Version = 5.3.0和Build = 155,退出关闭日志文件描述符

来自分类Dev

无法通过Java API(Cloudera-CDH4.4.0)访问HDFS

来自分类Dev

切换包含cloudera hadoop / hdfs / hbase数据的磁盘

Related 相关文章

  1. 1

    Cloudera Manager与Apache

  2. 2

    Cloudera Manager无法启动

  3. 3

    麻烦cloudera-manager-server

  4. 4

    Cloudera Impala:如何从HDFS块读取数据?

  5. 5

    Cloudera Impala:如何从HDFS块读取数据?

  6. 6

    cloudera Manager集群配置被覆盖

  7. 7

    来自Cloudera Manager的电子邮件警报

  8. 8

    为什么Cloudera Manager报告磁盘已满?

  9. 9

    Cloudera Manager未显示完成的Impala查询

  10. 10

    Cloudera Manager API 获取 Flume 代理列表

  11. 11

    在 Cloudera Manager 上启动 JobHistoryServer 时出错

  12. 12

    无法在Cloudera Quickstart VM 5.3.0中使用Cloudera Manager添加新服务

  13. 13

    Cloudera Manager检查器未在主机上运行

  14. 14

    如何在cloudera manager上配置flume服务?

  15. 15

    Cloudera:在HDFS异常中上传文件

  16. 16

    Cloudera Hadoop VM 5.10 - 找到 HDFS 路径?

  17. 17

    无法将文件从本地文件系统复制到Cloudera上的hadoop / hdfs

  18. 18

    在伪分布式模式下使用Cloudera Manager设置Hadoop-Datanode无法启动

  19. 19

    CDH4将Cloudera Manager还原到现有群集

  20. 20

    是否应将Cloudera Manager 5安装在计算节点或独立服务器上?

  21. 21

    Errno 14 PYCURL错误6; 无法解析Cloudera Manager 7.x升级中的主机

  22. 22

    在伪分布式模式下使用Cloudera Manager设置Hadoop-Datanode无法启动

  23. 23

    使用CDH4 + Cloudera Manager时将JDBC驱动程序放在哪里?

  24. 24

    使用Cloudera Manager的哪个版本的CDH会自动安装JDK1.7?

  25. 25

    无法将Impala-Kudu连接到Apache Kudu(没有Cloudera Manager):获取TTransportException错误

  26. 26

    通过Cloudera Manager REST API为纱线创建动态资源池

  27. 27

    添加从服务器时,Cloudera问题,cloudera-manager-agent必须具有Version = 5.3.0和Build = 155,退出关闭日志文件描述符

  28. 28

    无法通过Java API(Cloudera-CDH4.4.0)访问HDFS

  29. 29

    切换包含cloudera hadoop / hdfs / hbase数据的磁盘

热门标签

归档