hadoop集群上存储数据，同时基于mapreduce计算框架可以实现计算任务，那么无论是从数据保护的角度，还是从提交计算任务占用资源的角度来看，都需要存在一种权限管理与分配机制，能够很好地限制哪些人可以在hdfs上存储数据，哪些人可以利用集群的资源来处理特定的计算任务。当然，如果能够非常完美地解决这些问题是最好的。当前hadoop本身提供的权限管理功能还不能满足普遍的需要，或者我们从hadoop已有的一些简单或复杂的认证机制选择适合自己所在组织机构需要的，或者我们在外围开发一些权限管理系统与hadoop整合作为补充。
对比kerberos认证（authentication）配置方式与sla授权（service level authorization）方式，kerberos配置相当复杂，而且还要依赖于外部的密钥分发中心kdc（key distribution center）服务器，如果kdc出现问题，那么就会导致依赖于kdc认证的整个hadoop集群无法使用，鉴于此，对于一些相对小的开发团队来说还是更倾向于粗粒度的hadoop sla授权机制。
hadoop sla基于hadoop的各种服务（基于协议来划分）与linux系统的用户、用户组来实现。hadoop通过制定接口协议的方式来实现节点之间服务调用的逻辑，这样每一个协议所指定的一组服务就是一个认证单元，再基于底层linux系统的用户和用户组来限制用户（可能是节点服务）有权限执行某一种协议所包含的操作集合，下面我们看一下hadoop中的各种协议：
协议名称 范围 说明
clientprotocol hdfs 用户代码基于distributedfilesystem与namenode交互，可以操作hadoop的namespace，以及打开/关闭文件流操作。
clientdatanodeprotocol hdfs 客户端与datanode交互协议，用来实现数据库恢复（block recovery）。
datanodeprotocol hdfs datanode与namenode通信的协议，datanode基于此协议向namenode发送block report，以及datanode当前状态信息（如负载情况）。
interdatanodeprotocol hdfs datanode之间进行通信的协议，用来更新block副本（replica）信息，如时间戳、长度等信息。
namenodeprotocol hdfs secondarynamenode与namenode进行通信的协议，用来获取namenode的状态信息，如进行checkpoint的edits与fsimage。
adminoperationsprotocol hdfs hdfs管理操作协议。
refreshusermappingsprotocol hdfs、mr 用来刷新缓存中用户与用户组映射关系信息，因为无论是操作hdfs，还是运行mapreduce job，都会用到用户信息。
refreshauthorizationpolicyprotocol hdfs、mr 用来更新认证策略（authorization policy）配置，对应于配置文件/etc/hadoop/hadoop-policy.xml，控制执行hdfs dfsadmin -refreshserviceacl和yarn rmadmin -refreshserviceacl的权限。
haserviceprotocol hdfs hdfs ha操作协议，用来管理active namenode与stand-by namenode状态。
zkfailovercontroller hdfs zookeeper failover控制器操作权限，用于hdfs ha。
qjournalprotocol hdfs quorumjournalmanager与journalnode之间通信的协议，用于hdfs ha，用来同步edits，并协调active namenode与stand-by namenode状态。
hsclientprotocol hdfs 客户端与mr history server之间通讯的协议，用来查看job历史信息。
resourcetracker yarn resourcemanager与nodemanager之间通信的协议。
resourcemanageradministrationprotocol yarn resourcemanager管理操作协议。
applicationclientprotocol yarn yarn客户端（application）与resourcemanager通信的协议，包括job提交、job取消，查询application状态信息等。
applicationmasterprotocol yarn applicationmaster与resourcemanager之间进行通信的协议，包括am向rm发送注册或注销请求（获取或释放资源）。
containermanagementprotocol yarn applicationmaster与nodemanager之间进行通信的协议，包括启动/停止container调用请求。
localizationprotocol yarn nodemanager与resourcelocalizer之间进行通信的协议。
taskumbilicalprotocol mr map/reduce task进程与后台父进程（向mr applicationmaster请求创建map/reduce task）之间进行通信的协议。
mrclientprotocol mr mr jobclient与mr applicationmaster之间进行通信的协议，包括查询job状态等。
上表中是基于sla划分的不同服务级别，要想使sla认证生效，首相需要在hadoop配置文件/etc/hadoop/core-site.xml中增加如下配置内容：
hadoop.security.authorizationtrue
该配置属性hadoop.security.authorization默认是false，如果集群已经运行，修改了该配置需要重新启动hadoop集群。然后需要进行sla认证的详细配置，修改配置文件/etc/hadoop/hadoop-policy.xml，该配置文件中的配置项与对应的sla协议之间的对应关系如下表所示：
配置项 协议名称
security.client.protocol.acl clientprotocol
security.client.datanode.protocol.acl clientdatanodeprotocol
security.datanode.protocol.acl datanodeprotocol
security.inter.datanode.protocol.acl interdatanodeprotocol
security.namenode.protocol.acl namenodeprotocol
security.admin.operations.protocol.acl adminoperationsprotocol
security.refresh.usertogroups.mappings.protocol.acl refreshusermappingsprotocol
security.refresh.policy.protocol.acl refreshauthorizationpolicyprotocol
security.ha.service.protocol.acl haserviceprotocol
security.zkfc.protocol.acl zkfailovercontroller
security.qjournal.service.protocol.acl qjournalprotocol
security.mrhs.client.protocol.acl hsclientprotocol
security.resourcetracker.protocol.acl resourcetracker
security.resourcemanager-administration.protocol.acl resourcemanageradministrationprotocol
security.applicationclient.protocol.acl applicationclientprotocol
security.applicationmaster.protocol.acl applicationmasterprotocol
security.containermanagement.protocol.acl containermanagementprotocol
security.resourcelocalizer.protocol.acl localizationprotocol
security.job.task.protocol.acl taskumbilicalprotocol
security.job.client.protocol.acl mrclientprotocol
配置sla权限，实际上是增加acl（配置用户或用户组）基本格式要求如下：
如果既有用户，又有用户组，配置内容格式：user1,user2 group1,group2如果只有用户组，配置内容前面增加一个空格： group1,group2配置内容为*，表示所有用户都具有对应的服务操作权限下面,我们给定如下的需求：
hadoop用户作为hadoop集群的管理员角色，可以执行任何操作为了防止其他用户使用hadoop用户，使hadoop用户归属于用户组g_super_adm，使属于该组的用户具有集群管理员权限只有hadoop用户具有修改sla认证权限的配置storm集群使用storm用户运行topology，将实时数据写入hdfs，storm用户只具有操作hdfs权限用户组g_dfs_client具有操作hdfs权限用户组g_mr_client具有在hadoop上运行mapreduce job的权限用户stater只具有操作hdfs和运行mapreduce job的权限通过进行配置实践，来满足上述要求。修改配置文件/etc/hadoop/hadoop-policy.xml中的部分配置项，具体修改的内容如下所示：
security.client.protocol.aclstater,storm g_super_adm,g_dfs_clientacl for clientprotocol, which is used by user code via the distributedfilesystem. the acl is a comma-separated list of user and group names. the user and group list is separated by a blank. for e.g. alice,bob users,wheel. a special value of * means all users are allowed. security.refresh.policy.protocol.aclhadoopacl for refreshauthorizationpolicyprotocol, used by the dfsadmin and mradmin commands to refresh the security policy in-effect. the acl is a comma-separated list of user and group names. the user and group list is separated by a blank. for e.g. alice,bob users,wheel. a special value of * means all users are allowed. security.job.client.protocol.aclstater g_super_adm,g_mr_clientacl for mrclientprotocol, used by job clients to communciate with the mr applicationmaster to query job status etc. the acl is a comma-separated list of user and group names. the user and group list is separated by a blank. for e.g. alice,bob users,wheel. a special value of * means all users are allowed.
其他的配置属性值保持默认值不变即可。为了保证整个hadoop集群配置相同，需要将修改的配置文件同步到整个集群的所有节点上。
然后，为了使上述配置内容生效，需要执行如下命令：
hdfs dfsadmin -refreshserviceaclyarn rmadmin -refreshserviceacl
修改sla认证配置，不需要重启服务，根据修改内容执行上述命令就可以生效。
后面参考链接中，有些关于hadoop sla的文档内容貌似没有随着hadoop版本升级而更新，与实际hadoop发行版本中配置文件的内容有一定差别，可以参考，具体以实际版本的情况为准。
参考链接
http://hadoop.apache.org/docs/r2.2.0/hadoop-project-dist/hadoop-common/servicelevelauth.htmlhttp://hadoop.apache.org/docs/r2.2.0/hadoop-auth/configuration.html 本文出自：http://shiyanjun.cn, 原文地址：http://shiyanjun.cn/archives/994.html, 感谢原作者分享。