当前位置: Oracle DBA培训网-优技培训 >> Hadoop大数据 > Hadoop培训教程 >

Hadoop认证培训:HDFS配额管理

Hadoop认证培训:HDFS配额管理

Hadoop认证培训:HDFS配额管理,Hadoop分布式文件系统HDFS允许管理员为每个目录设置配额。新建立的目录是没有配额的,最大的配额是Long.Max_Value。配额为1可以强制目录保持为空。

目录配额是对目录树上该目录下的文件及目录总数进行硬性限制,如果创建文件或目录时超过了配额,该操作会失败;重命名不会改变该目录的配额,如果重命名操作导致违反配额限制,该操作将会失败;如果尝试设置一个配额而现有文件数量已经超出了这个新配额,则设置失败。

配额和fsimage保持一致。当启动时,如果fsimage违反了某个配额限制(也许fsimage被偷偷改变了),则启动失败并生成错误报告。设置或删除一个配额会创建相应的日志记录。

下面的新命令或新选项是用于支持配额的,其中前两个是管理员命令。

hadoop dfsadmin -setQuota ...

把每个目录配额设为quota。这个命令会在每个目录中尝试,如果quota不是一个正的长整型(long)数值,或者目录不存在,或是文件名不存在,或者目录超过配额,则会发送错误报告。

hadoop dfsadmin –clrQuota ...

这个命令可以为每个目录删除配额。该命令会在每个目录中尝试,如果目录不存在或是文件名不存在,则会发送错误报告;如果目录原来没有设置配额,则不会报错。

hadoop fs -count[-q]

在以上命令中使用-q选项,会报告每个目录设置的配额,以及剩余配额。如果目录没有设置配额,会报告none和inf。

技术沙龙MORE+

标签错误:<!-- #Label# labelId=20160707140604 moduleId=1 classId=12231768634 orderby=2 fields=url,title,u_info attribute= datatypeId=22192428132 recordCount=3 pageSize= <htmlTemplate><dt><img src="/images/index_26${index}.jpg" width="100" height="62" /><a href="$url" title="${title}">${title}</a><span>${api.left(u_info,60)}</span></dt></htmlTemplate> -->
我要参加技术沙龙