当前位置: Oracle DBA培训网-优技培训 >> Hadoop大数据 > Hadoop培训教程 >

Hadoop认证培训:HDFS配额管理

Hadoop认证培训:HDFS配额管理

Hadoop认证培训:HDFS配额管理,Hadoop分布式文件系统HDFS允许管理员为每个目录设置配额。新建立的目录是没有配额的,最大的配额是Long.Max_Value。配额为1可以强制目录保持为空。

目录配额是对目录树上该目录下的文件及目录总数进行硬性限制,如果创建文件或目录时超过了配额,该操作会失败;重命名不会改变该目录的配额,如果重命名操作导致违反配额限制,该操作将会失败;如果尝试设置一个配额而现有文件数量已经超出了这个新配额,则设置失败。

配额和fsimage保持一致。当启动时,如果fsimage违反了某个配额限制(也许fsimage被偷偷改变了),则启动失败并生成错误报告。设置或删除一个配额会创建相应的日志记录。

下面的新命令或新选项是用于支持配额的,其中前两个是管理员命令。

hadoop dfsadmin -setQuota ...

把每个目录配额设为quota。这个命令会在每个目录中尝试,如果quota不是一个正的长整型(long)数值,或者目录不存在,或是文件名不存在,或者目录超过配额,则会发送错误报告。

hadoop dfsadmin –clrQuota ...

这个命令可以为每个目录删除配额。该命令会在每个目录中尝试,如果目录不存在或是文件名不存在,则会发送错误报告;如果目录原来没有设置配额,则不会报错。

hadoop fs -count[-q]

在以上命令中使用-q选项,会报告每个目录设置的配额,以及剩余配额。如果目录没有设置配额,会报告none和inf。

技术沙龙MORE+

Oracle技术沙龙:【数据保护顶尖技术-MAA】首次全国首播12c MAA技术 云数据库加上MAA技术组成最豪华的技...
Oracle技术沙龙第49期:【Oracle 数据库云技术分享】Oracle技术沙龙第49期:【Oracle 数据库云技术分享】本次技术沙...
Oracle技术沙龙第48期:【Oracle 12c RAC安装】小编:今天讲什么内容呢?以后有什么用呢? 大师:今天讲的是12c...
我要参加技术沙龙