CentOS HDFS權限設置與訪問控制

在CentOS系統中配置和管理HDFS（Hadoop分布式文件系統）的權限涉及多個步驟。以下是一個基本的指南，幫助你設置HDFS的權限：

HDFS用戶和組

• 創建用戶和組：通常，HDFS服務以特定的用戶（如 hdfs）運行，并且該用戶屬于相應的組?？梢允褂靡韵旅顒摻ㄟ@個用戶并設置密碼：

  sudo adduser hdfs
  sudo passwd hdfs
  

• 用戶和組映射：HDFS默認使用Linux系統的用戶和組。如果需要自定義映射（例如通過LDAP），可在 core-site.xml中配置：

  <property>
    <name>hadoop.security.group.mapping</name>
    <value>org.apache.hadoop.security.LdapGroupsMapping</value>
  </property>
  

HDFS目錄和文件權限

• 文件和目錄權限：HDFS中的文件和目錄權限與Linux系統類似，包括讀（r）、寫（w）和執行（x）權限?？梢允褂?hdfs dfs -chmod命令來修改權限。例如：

  hdfs dfs -chmod 755 /user/hdfs/example.txt
  hdfs dfs -chmod 755 /user/hdfs/example_dir
  

• 設置ACL（訪問控制列表）：HDFS支持ACL，可以為特定用戶或組設置額外的訪問權限?？梢允褂?hdfs dfs -setfacl和 hdfs dfs -getfacl命令來設置和查看ACL。例如：

  hdfs dfs -setfacl -m u:user1:rwx /user/hdfs/example.txt
  hdfs dfs -getfacl /user/hdfs/example.txt
  

配置文件

在 core-site.xml和 hdfs-site.xml中配置相關的權限設置。例如：

core-site.xml:

<configuration>
  <property>
    <name>fs.defaultFS</name>
    <value>hdfs://your-namenode-host:8020</value>
  </property>
</configuration>

hdfs-site.xml:

<configuration>
  <property>
    <name>dfs.permissions.enabled</name>
    <value>true</value>
  </property>
  <property>
    <name>dfs.namenode.acls.enabled</name>
    <value>true</value>
  </property>
</configuration>

Kerberos認證

如果啟用了Kerberos認證，確保HDFS服務使用Kerberos票據進行身份驗證?？梢允褂靡韵旅瞰@取Kerberos票據：

sudo kinit hdfs

重啟服務

在完成上述配置后，重啟HDFS服務以使更改生效：

sudo systemctl restart hadoop-hdfs-namenode
sudo systemctl restart hadoop-hdfs-datanode

驗證配置

可以通過以下命令驗證HDFS和YARN是否正常運行：

jps

你應該看到以下進程：

• NameNode
• DataNode
• SecondaryNameNode
• ResourceManager
• NodeManager

通過以上步驟，你應該能夠在CentOS上成功配置HDFS權限。根據你的具體需求，可能還需要進行更多的配置和調整。