-
Hadoop 集动态添加或删除节点
Hadoop 集动态添加或删除节点 1. 下线节点 1.1.1 NameNode 节点上 dfs.exclude 文件,看配置文件怎么配置的,里每行添加一个服务器名,如我要下线 emr-worker-7,emr-work…
-
脱机二进制部署 Kubernetes 生产集群
目录 1. 架构基础 1.1 Master 组件 1.1.1 etcd 为 kube-apiserver 提供数据存储、watch 服务。 1.1.2 kube-apiserver 整个集群的唯一入口,并提供认证、授权、…
-
Hadoop/EMR 生产故障排查
Hadoop/EMR 生产故障排查 1. HDFS 1.1 重新上电启动 HDFS 集群,日志显示在安全模式 解决 # 手动退出安全模式 hdfs dfsadmin -safemode leave # 查看当前安全模式状…
-
自定义 NameNode Xmx等参数
自定义 NameNode Xmx等参数 参考1: 如何优雅设置hadoop相关组件的jvm Xmx 参考2: 合理设置Hdfs Xmx 总结 不建议直接修改hadoop-env.sh的HADOOP_HEAPSIZE,因为…