아파치 스파크가 뭐야?
Apache Spark는 원래 University of California, Berkeley의 AMPLab에서 개발한 오픈 소스 클러스터 컴퓨팅 프레임워크입니다. 작업을 실행한 후 중간 데이터를 디스크에 저장하는 Hadoop의 MapReduce와 비교하여 Spark는 데이터가 하드 디스크에 기록되기 전에 인메모리 컴퓨팅 기술을 사용하여 메모리에서 작업을 분석하고 수행합니다.
Spark는 Hadoop MapReduce보다 100배 빠르게 메모리에서 프로그램을 실행할 수 있습니다. 하드 디스크에서 프로그램을 실행하는 경우에도 Spark는 10배 더 빠르게 실행할 수 있습니다. Spark를 사용하면 사용자가 데이터를 클러스터 스토리지에 로드하고 여러 번 쿼리할 수 있으므로 기계 학습 알고리즘에 이상적입니다.
Spark를 사용하려면 클러스터 관리자와 분산 스토리지 시스템이 필요합니다. Spark는 독립형 모드(로컬 Spark 클러스터), Hadoop YARN 또는 Apache Mesos 클러스터 관리를 지원합니다.
분산 스토리지 측면에서 Spark는 HDFS, Cassandra, OpenStack Swift 및 Amazon S3와 같은 인터페이스를 탑재할 수 있습니다. Spark도 의사 분산 로컬 모드를 지원하지만 일반적으로 분산 스토리지 시스템을 로컬 파일 시스템으로 교체하기 위한 개발이나 테스트에만 사용됩니다. 이러한 경우 Spark는 프로그램을 실행하기 위해 한 시스템의 각 CPU 코어만 사용합니다.
2014년에는 465명 이상의 기여자가 Spark 개발에 투자하여 Apache Software Foundation과 수많은 빅 데이터 오픈 소스 프로젝트 중에서 가장 활발한 프로젝트가 되었습니다.
더 많은 Apache 관련 지식을 알고 싶다면 Apache 사용 튜토리얼 칼럼을 방문해 보세요!
위 내용은 아파치 스파크가 뭐야?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!
핫 AI 도구
Undresser.AI Undress
사실적인 누드 사진을 만들기 위한 AI 기반 앱
AI Clothes Remover
사진에서 옷을 제거하는 온라인 AI 도구입니다.
Undress AI Tool
무료로 이미지를 벗다
Clothoff.io
AI 옷 제거제
Video Face Swap
완전히 무료인 AI 얼굴 교환 도구를 사용하여 모든 비디오의 얼굴을 쉽게 바꾸세요!
인기 기사
뜨거운 도구
메모장++7.3.1
사용하기 쉬운 무료 코드 편집기
SublimeText3 중국어 버전
중국어 버전, 사용하기 매우 쉽습니다.
스튜디오 13.0.1 보내기
강력한 PHP 통합 개발 환경
드림위버 CS6
시각적 웹 개발 도구
SublimeText3 Mac 버전
신 수준의 코드 편집 소프트웨어(SublimeText3)
Apache에서 CGI 디렉토리를 설정하는 방법
Apr 13, 2025 pm 01:18 PM
Apache에서 CGI 디렉토리를 설정하려면 다음 단계를 수행해야합니다. "CGI-BIN"과 같은 CGI 디렉토리를 작성하고 Apache 쓰기 권한을 부여하십시오. Apache 구성 파일에 "Scriptalias"지시록 블록을 추가하여 CGI 디렉토리를 "/cgi-bin"URL에 매핑하십시오. Apache를 다시 시작하십시오.
Apache의 데이터베이스에 연결하는 방법
Apr 13, 2025 pm 01:03 PM
Apache는 데이터베이스에 연결하여 다음 단계가 필요합니다. 데이터베이스 드라이버 설치. 연결 풀을 만들려면 Web.xml 파일을 구성하십시오. JDBC 데이터 소스를 작성하고 연결 설정을 지정하십시오. JDBC API를 사용하여 Connections, 명세서 작성, 매개 변수 바인딩, 쿼리 또는 업데이트 실행 및 처리를 포함하여 Java 코드의 데이터베이스에 액세스하십시오.
Apache 버전을 보는 방법
Apr 13, 2025 pm 01:15 PM
APACHE 서버에서 버전을 보는 3 가지 방법이 있습니다. 명령 줄 (APACHECTL -V 또는 APACHE2CTL -V)을 통해 서버 상태 페이지 (http : // & lt; 서버 IP 또는 도메인 이름 & gt;/server -status)를 확인하거나 APACHE 구성 파일 (ServerVersion : Apache/& lt; 버전 번호 & gt;).
Apache80 포트가 점유 된 경우해야 할 일
Apr 13, 2025 pm 01:24 PM
Apache 80 포트가 점유되면 솔루션은 다음과 같습니다. 포트를 차지하고 닫는 프로세스를 찾으십시오. 방화벽 설정을 확인하여 Apache가 차단되지 않았는지 확인하십시오. 위의 방법이 작동하지 않으면 Apache를 재구성하여 다른 포트를 사용하십시오. Apache 서비스를 다시 시작하십시오.
Apache 버전을 보는 방법
Apr 13, 2025 pm 01:00 PM
Apache 버전을 보는 방법? Apache Server 시작 : Sudo Service Apache2를 사용하여 서버를 시작하십시오. 버전 번호보기 : 다음 방법 중 하나를 사용하여 버전을 봅니다. 명령 줄 : APACHE2 -V 명령을 실행하십시오. 서버 상태 페이지 : 웹 브라우저에서 Apache 서버의 기본 포트 (일반적으로 80)에 액세스하고 버전 정보가 페이지 하단에 표시됩니다.
Apache를 시작할 수없는 문제를 해결하는 방법
Apr 13, 2025 pm 01:21 PM
다음과 같은 이유로 Apache가 시작할 수 없습니다. 구성 파일 구문 오류. 다른 응용 프로그램 포트와 충돌합니다. 권한 문제. 기억이 없습니다. 프로세스 교착 상태. 데몬 실패. Selinux 권한 문제. 방화벽 문제. 소프트웨어 충돌.
Apache의 Zend를 구성하는 방법
Apr 13, 2025 pm 12:57 PM
Apache에서 Zend를 구성하는 방법은 무엇입니까? Apache 웹 서버에서 Zend 프레임 워크를 구성하는 단계는 다음과 같습니다. Zend 프레임 워크를 설치하고 웹 서버 디렉토리로 추출하십시오. .htaccess 파일을 만듭니다. Zend 응용 프로그램 디렉토리를 작성하고 Index.php 파일을 추가하십시오. Zend 응용 프로그램 (application.ini)을 구성하십시오. Apache 웹 서버를 다시 시작하십시오.
Apache의 서버 이름 이상을 삭제하는 방법
Apr 13, 2025 pm 01:09 PM
Apache에서 추가 ServerName 지시문을 삭제하려면 다음 단계를 수행 할 수 있습니다. 추가 ServerName Directive를 식별하고 삭제하십시오. Apache를 다시 시작하여 변경 사항이 적용됩니다. 구성 파일을 확인하여 변경 사항을 확인하십시오. 서버를 테스트하여 문제가 해결되었는지 확인하십시오.
