当前位置: Oracle DBA培训网-优技培训 >> Hadoop大数据 > Hadoop培训教程 >

Hadoop大数据课程:HDFS配置参数

Hadoop大数据课程:HDFS配置参数

Hadoop大数据课程:HDFS配置参数,1.权限检查配置,2.Web服务器用户权限配置,3.其他相关配置

1.权限检查配置

一个非常重要的权限配置就是权限检查,可以通过dfs.permissions配置参数进行配置,代码如下:

dfs.permissions = true

如果是true,则打开权限检查系统;如果是false,权限检查就是关闭的,但是其他行为没有改变。这个配置参数的改变并不改变文件或目录的模式、所有者和组等信息。

不管权限模式是开还是关,chmod、chgrp和chown总是会检查权限。这些命令只有在权限检查背景下才有用,所以不会有兼容性问题。这样就能让管理员在打开常规的权限检查之前可以放心地设置文件的所有者和权限。

2.Web服务器用户权限配置

同样可以对Web服务器的用户进行配置,使用dfs.web.ugi参数,代码如下:

dfs.web.ugi = webuser,webgroup

此参数用于设置Web服务器使用的用户名,如果将这个参数设置为超级用户的名称,则所有Web客户就可以看到所有的信息。如果将这个参数设置为一个不使用的用户,则Web客户就只能访问到other权限可访问的资源。额外的组可以加在后面,形成一个用逗号分隔的列表。

需要注意的是NameNode并没有真实用户的概念,但是Web服务器表现得就像它具有管理员选定的用户的身份(用户名和组)一样。除非这个选定的身份是超级用户,否则会有名称空间中的一部分内容对Web服务器来说不可见。

3.其他相关配置

(1)超级用户的组名

dfs.permissions.supergroup = supergroup

应用在defaultPermission中,是系统的超级组。

(2)升级时的初始模式

dfs.upgrade.permission = 777

文件永不会被设置x权限。在配置文件中,可以使用十进制数511。

(3)umask参数

dfs.umask = 022

umask参数在创建文件和目录时使用。在配置文件中,可以使用十进制数18。

(4)用户文件属主和文件组

hadoop.job.ugi

本地文件的用户文件属主和文件组,如果没有设置,那么将使用启动HDFS的用户(通过whoami获得)和该用户所在的组(通过groups获得)作为值。

技术沙龙MORE+

标签错误:<!-- #Label# labelId=20160707140604 moduleId=1 classId=12231768634 orderby=2 fields=url,title,u_info attribute= datatypeId=22192428132 recordCount=3 pageSize= <htmlTemplate><dt><img src="/images/index_26${index}.jpg" width="100" height="62" /><a href="$url" title="${title}">${title}</a><span>${api.left(u_info,60)}</span></dt></htmlTemplate> -->
我要参加技术沙龙