Welche Dateien müssen Sie in HDFS -Konfigurations -CentOS ändern?

Bei der Konfiguration von Hadoop -Distributed Dateisystem (HDFS) auf CentOS müssen die folgenden Schlüsselkonfigurationsdateien geändert werden:

1. Core-Site.xml :

   • Fs.DefaultFs: Gibt die Standarddateisystemadresse von HDFs an, wie z. B. HDFS: // localhost: 9000.
   • Hadoop.tmp.dir: Gibt das Speicherverzeichnis für Hadoop -temporäre Dateien an.
   • Hadoop.ProxyUser.root.hosts und Hadoop.proxyuser.root.groups: Konfigurieren Sie den Proxy -Benutzer des Stammbenutzers.

2. HDFS-site.xml :

   • dfs.http.address: Gibt die HTTP -Adresse von namenode an.
   • dfs.namenode.secondary.http-Address: Gibt die HTTP-Adresse des sekundären Namenode an.
   • MapReduce.Jobhistory.address und MapReduce.Jobhistory.Webapp.Address: Geben Sie die Adresse und Webschnittstellenadresse des MapReduce -Jobverlaufs an.

3. Mapred-Site.xml :

   • MAPREDUCE.FRAMEWORK.NAME: Gibt den Namen des MapReduce -Frameworks an, normalerweise Garn.

4. Garn-Site.xml :

   • Yarn.ResourceManager.Address: Geben Sie die Adresse des Resourcemanager an.
   • Yarn.ResourceManager.Scheduler.Address: Gibt die Scheduler -Adresse des Resourcemanager an.
   • Yarn.ResourceManager.Resource-Tracker.Address: Gibt die Ressourcen-Tracker-Adresse des ResourceManager an.
   • marn.nodeManager.aux-services und marn.nodemanager.aux-services.mapreduce_shuffle.class: Geben Sie den Hilfsdienst von Nodemanager an.
   • YARN.NODEMANAGER.VMEM-CHECK-ELTERAFTE UND YARN.NODEMANATER.DISK-Health-Checker

Nach der Änderung dieser Konfigurationsdateien sind normalerweise die folgenden Schritte erforderlich:

• Formatnamenode: HDFS Namenode -format
• Starten Sie den HDFS-Service: ./sbin/start-dfs.sh
• HDFS-Service stoppen: ./sbin/stop-dfs.sh

Bitte beachten Sie, dass die spezifischen Konfigurationsschritte und Dateipfade abhängig von der Hadoop -Version und den spezifischen Anforderungen variieren können. Es wird empfohlen, sich auf die offiziellen Dokumentation oder die zugehörigen Tutorials zu verweisen, um die Richtigkeit der Konfiguration sicherzustellen.

Das obige ist der detaillierte Inhalt vonWelche Dateien müssen Sie in HDFS -Konfigurations -CentOS ändern?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!