Rumah Operasi dan penyelenggaraan Apache apache spark是什么意思?

apache spark是什么意思?

Aug 05, 2019 am 11:11 AM
apache spark

apache spark是什么意思?

apache spark是什么意思?

Apache Spark是一个基于内存计算的开源的集群计算系统,目的是让数据分析更加快速。Spark非常小巧玲珑,由加州伯克利大学AMP实验室的Matei为主的小团队所开发。使用的语言是Scala,项目的core部分的代码只有63个Scala文件,非常短小精悍。

Apache Spark的5大优势:

1.更高的性能,因为数据被加载到集群主机的分布式内存中。数据可以被快速的转换迭代,并缓存用以后续的频繁访问需求。很多对Spark感兴趣的朋友可能也会听过这样一句话——在数据全部加载到内存的情况下,Spark可以比Hadoop快100倍,在内存不够存放所有数据的情况下快Hadoop 10倍。

2.通过建立在Java、Scala、Python、SQL(应对交互式查询)的标准API以方便各行各业使用,同时还含有大量开箱即用的机器学习库。

3.与现有Hadoop v1 (SIMR) 和2.x (YARN) 生态兼容,因此机构可以进行无缝迁移。

4.方便下载和安装。方便的shell(REPL: Read-Eval-Print-Loop)可以对API进行交互式的学习。

5.借助高等级的架构提高生产力,从而可以讲精力放到计算上。

同时,Apache Spark由Scala实现,代码非常简洁。

Atas ialah kandungan terperinci apache spark是什么意思?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn

Tag artikel panas

Notepad++7.3.1

Notepad++7.3.1

Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina

SublimeText3 versi Cina

Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1

Hantar Studio 13.0.1

Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

SublimeText3 versi Mac

SublimeText3 versi Mac

Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Adakah c++ front-end atau back-end? Adakah c++ front-end atau back-end? Apr 22, 2024 pm 05:33 PM

Adakah c++ front-end atau back-end?

Perbandingan Prestasi Rangka Kerja PHP: Pertunjukan Terunggul Kepantasan vs Perbandingan Prestasi Rangka Kerja PHP: Pertunjukan Terunggul Kepantasan vs Apr 30, 2024 pm 12:27 PM

Perbandingan Prestasi Rangka Kerja PHP: Pertunjukan Terunggul Kepantasan vs

Bagaimana untuk menjana URL daripada fail html Bagaimana untuk menjana URL daripada fail html Apr 21, 2024 pm 12:57 PM

Bagaimana untuk menjana URL daripada fail html

Modul mengelak melindungi tapak web anda daripada serangan DOS lapisan aplikasi Modul mengelak melindungi tapak web anda daripada serangan DOS lapisan aplikasi Apr 30, 2024 pm 05:34 PM

Modul mengelak melindungi tapak web anda daripada serangan DOS lapisan aplikasi

Bagaimana untuk menjalankan ujian konkurensi dan penyahpepijatan dalam pengaturcaraan serentak Java? Bagaimana untuk menjalankan ujian konkurensi dan penyahpepijatan dalam pengaturcaraan serentak Java? May 09, 2024 am 09:33 AM

Bagaimana untuk menjalankan ujian konkurensi dan penyahpepijatan dalam pengaturcaraan serentak Java?

Penyepaduan dan pengembangan kawalan konkurensi fungsi golang dan perpustakaan pihak ketiga Penyepaduan dan pengembangan kawalan konkurensi fungsi golang dan perpustakaan pihak ketiga Apr 25, 2024 am 09:27 AM

Penyepaduan dan pengembangan kawalan konkurensi fungsi golang dan perpustakaan pihak ketiga

Bagaimana untuk menambah pelayan dalam eclipse Bagaimana untuk menambah pelayan dalam eclipse May 05, 2024 pm 07:27 PM

Bagaimana untuk menambah pelayan dalam eclipse

Aplikasi algoritma dalam pembinaan 58 platform potret Aplikasi algoritma dalam pembinaan 58 platform potret May 09, 2024 am 09:01 AM

Aplikasi algoritma dalam pembinaan 58 platform potret

See all articles