SuCicada - 蘇曉蝉
  文章分類
datelog 1 Flink 1 Java 1 dict 32 log 2 lyrics 17 mind 3 CS 24 TODO 3 TOOL 1 dream 1 Akka 2 Flink 4 Git 1 Hadoop 2 Hbase 1 Hudi 2 JVM 1 Scala 1 network 4 设计模式 2 SQL 1
因为truncate意外导致EditsLog错误，致使NameNode退出无法重启 因为truncate意外导致EditsLog错误，致使NameNode退出无法重启
简单来说就是在某种极端情况下，两个客户端对同一个块同时进行close和truncate操作导致edit log异常。 场景举例[todo]：Flink 使用BucketingSink 写Hdfs时，故障恢复的时候会对文件进行 trunc
2024-05-27 dict CS Hadoop
Kerberos 身份验证因时间设置不同导致失败 Kerberos 身份验证因时间设置不同导致失败
有时候我们在有kerberos的Hadoop集群节点上执行 Hadoop 有关操作会遇到:javax.security.auth.login.LoginException: Clock skew too great (37) 32295:C
2024-05-27 dict CS Hadoop