HDFS 구성 센터에서 어떤 파일을 수정해야합니까?

CentOS에서 HDFS (Hadoop 분산 파일 시스템)를 구성 할 때 다음 주요 구성 파일을 수정해야합니다.

1. Core-Site.xml :

   • fs.defaultfs : hdfs : // localhost : 9000과 같은 HDFS의 기본 파일 시스템 주소를 지정합니다.
   • Hadoop.tmp.dir : Hadoop 임시 파일의 스토리지 디렉토리를 지정합니다.
   • hadoop.proxyuser.root.hosts 및 hadoop.proxyuser.root.groups : 루트 사용자의 프록시 사용자를 구성하십시오.

2. hdfs-site.xml :

   • DFS.HTTP.ADDRESS : NAMENODE의 HTTP 주소를 지정합니다.
   • dfs.namenode.secondary.http-address : 2 차 Namenode의 HTTP 주소를 지정합니다.
   • mapreduce.jobhistory.address 및 mapreduce.jobhistory.webapp.address : MapReduce 작업 기록의 주소 및 웹 인터페이스 주소를 지정하십시오.

3. mapred-site.xml :

   • Mapreduce.framework.name : MapReduce 프레임 워크의 이름을 지정합니다.

4. yarn-site.xml :

   • yarn.resourcemanager.address : resourcemanager의 주소를 지정하십시오.
   • yarn.resourcemanager.scheduler.address : resourcemanager의 스케줄러 주소를 지정합니다.
   • yarn.resourcemanager.resource-tracker.address : resourcemanager의 리소스 추적기 주소를 지정합니다.
   • yarn.nodemanager.aux-services and yarn.nodemanager.aux-services.mapreduce_shuffle.class : Nodemanager의 보조 서비스를 지정하십시오.
   • yarn.nodemanager.vmem-check-enabled and yarn.nodemanager.disk-health-checker.max-disk-utilization-per-percentage : nodemanager에 대한 메모리 및 디스크 점검을 구성하십시오.

이러한 구성 파일을 수정 한 후 일반적으로 다음 단계가 필요합니다.

• 형식 나메 노드 : HDFS Namenode -format
• HDFS 서비스 시작 : ./sbin/start-dfs.sh
• HDFS 서비스 중지 : ./sbin/stop-dfs.sh

특정 구성 단계 및 파일 경로는 Hadoop 버전 및 특정 요구 사항에 따라 다를 수 있습니다. 구성의 정확성을 보장하기 위해 공식 문서 또는 관련 자습서를 참조하는 것이 좋습니다.

위 내용은 HDFS 구성 센터에서 어떤 파일을 수정해야합니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!