温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

学习笔记-hadoop的安全模式和目录快照

发布时间:2020-07-04 09:28:57 来源:网络 阅读:869 作者:厦小岗 栏目:大数据

安全模式

1、namenode启动时,合并p_w_picpath和edit成新的p_w_picpath,并产生新的edit log  

2、整个智能safe模式下,客户端只能读取

3、查看nameode是否位于安全模式

hdfs dfsadmin -safemode get    //查看安全模式

hdfs dfsadmin -safemode enter    //进入安全模式

hdfs dfsadmin -safemode leave    //离开安全模式

hdfs dfsadmin -safemode wait    //等待安全模式

4、手动保存名字空间:dfsadmin -saveNamespace


5、手动保存镜像文件:hdfs dfsadmin -fetchImage


6、保存元数据:(保存在hadoop_home下即:hadoop /logs/下)hdfs dfsadmin -metasave xxx.dsds


7、start-balancer.sh :启动均衡器,目的让集群数据存储上更加平均,提高整个集群的性能(一般我们在增加节


点的情况下才启动均衡器)

8、hadoop fs -count统计目录



--------------------------------------------------

Hadoop Snapshot快照:就是把当前的情况拍照保存起来。一般目录默认的情况是不能创建快照的。必须执行hdfs 


dfsadmin -allowSnapshot /user/ubuntu/data。允许创建快照,后面跟的是你想创建快照的地址路径。在这里允许


创建快照后我们就可以执行adoop fs -createSnapshot /user/ubuntu/data snap-1创建快照了。snap-1是你创建快


照名。查看快照的话直接hadoop fs -ls -R /user/ubuntu/data/.snapshot/。还有你在创建快照的情况下是不能禁


用快照的



1、创建快照hadoop fs [-createSnapshot <snapshotDir> [<snapshotName>]]


2、删除快照hadoop fs [-deleteSnapshot<snapshotDir> <oldName> <newName>]


3、重命名快照hadoop fs [-renameSnappshot<snapshotDir> <oldName> <newName>]


4、允许目录快照hadoop dfsadmin [-allowSnapshot <snapshotDir>]


5、禁用目录快照hadoop dfsamdin[-disallowSnapshot<snapshotDir>]


向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI