美文网首页程序员大数据开发
hadoop一直开机一直处于安全模式

hadoop一直开机一直处于安全模式

作者: 晨冉1688 | 来源:发表于2020-05-01 11:58 被阅读0次

查询集群健康状态

hdfs fsck 

发现有1860个快损坏

/weblog/dim_time.dat: MISSING 1 blocks of total size 601 B.Status: CORRUPT
 Total size:    27258959146 B (Total open files size: 435679 B)
 Total dirs:    1211
 Total files:   2050
 Total symlinks:        0 (Files currently being written: 1)
 Total blocks (validated):  2044 (avg. block size 13336085 B) (Total open file blocks (not validated): 1)
  ********************************
  UNDER MIN REPL'D BLOCKS:  1860 (90.99804 %)
  dfs.namenode.replication.min: 1
  CORRUPT FILES:    1860
  MISSING BLOCKS:   1860
  MISSING SIZE:     24467172505 B
  CORRUPT BLOCKS:   1860
  ********************************
 Minimally replicated blocks:   184 (9.001957 %)
 Over-replicated blocks:    0 (0.0 %)
 Under-replicated blocks:   0 (0.0 %)
 Mis-replicated blocks:     0 (0.0 %)
 Default replication factor:    3
 Average block replication: 0.27005872
 Corrupt blocks:        1860
 Missing replicas:      0 (0.0 %)
 Number of data-nodes:      3
 Number of racks:       1
FSCK ended at Mon Mar 09 05:51:52 CST 2020 in 629 milliseconds


The filesystem under path '/' is CORRUPT

解决方法:

离开安全模式(处于安全模式是无法删除损坏块的)

hadoop dfsadmin -safemode leave

删除损坏块
如果是生产请尝试使用hdfs debug

hdfs fsck  /  -delete

相关文章

  • hadoop一直开机一直处于安全模式

    查询集群健康状态 发现有1860个快损坏 解决方法: 离开安全模式(处于安全模式是无法删除损坏块的) 删除损坏块如...

  • HDFS文件损坏解决方法

    自己虚拟机搭建的伪分布Hadoop,没有停止进程,不小心点到关机。再次启动时就一直处于安全模式,而且说损坏了20个...

  • HDFS的安全模式

    安全模式是hadoop的一种保护机制,用于保证集群中的数据块的安全性。如果HDFS处于安全模式,则表示HDFS是只...

  • Mac 以安全模式进入系统及抹掉磁盘

    1、以安全模式进入系统的方式开机键 --> 一直按着 shift 键 --> 出现账号 --> 进入设置助理(此过...

  • Hadoop启动后一直处于SafeMode

    问题:HDFS启动后一直处于安全状态解决过程:1.查看hadoop namenode的启动日志 发现是因为缺少bl...

  • day627——郁闷的一天。

    手机坏掉了,一直处于那种关机重启中,无法开机。开机好了不大一会,就自动关机了,还一直不会开机。哎,郁闷了呀一上午就...

  • Hadoop安全模式

    自动进入安全模式的原因可能有:1) 集群进行节点的剔除(此时有些数据副本的block被发现丢失,因此会进入安全模...

  • 鹦鹉播放认知

    你一直处于一种播放模式,而你所处的环境让这个播放模式是有效的,你就会一直处于这种模式。但播放模式是远离认知...

  • 一直处于淡然

    清明假期,转眼就过去了。什么事都没有做,也没有去旅个游。 闲来没事的时候做了个饭,在床上空想了两天。一个身影打破了...

  • 3.01 原来我一直处于等死模式

    今天是2018年三月的第一天 又是一个开始 这一天,朋友圈还是一如既往得有仪式感,每个人都在问侯着 你好 三月 而...

网友评论

    本文标题:hadoop一直开机一直处于安全模式

    本文链接:https://www.haomeiwen.com/subject/lxofghtx.html