Jadual Kandungan
Cloudera Manager and Cloudera Hadoop
Rumah Operasi dan penyelenggaraan operasi dan penyelenggaraan linux CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装

CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装

Jul 14, 2017 pm 06:16 PM
cloudera manager

Cloudera Manager and Cloudera Hadoop

  1. 改hostname/关闭防火墙/关闭selinux/ssh免密钥登录/NTP同步

  2. 下载相关文件(建议CM和CDH版本一致;同时注意CDH与JDK版本兼容性)

  • cloudera-manager.repo 一个配置文件
  • cm install 安装脚本
  • cm rpms rpm的本地源文件(也可通过可以选择下载tar文件直接解压)
  • CDH parcel CDH的安装文件,离线安装使用,只需下载对应的parcel及sha1还有manifest.json文件,国外网站可能速度慢,此处使用科大的反向代理
  1. 安装CM(此处使用本地源文件安装,下载tar文件的不再赘述)

在所有节点执行下列步骤

  1. 将cloudera-manager.repo 配置文件拷入/etc/yum.repos.d/文件夹

  2. 验证repo文件是否有效

<code class="sourceCode bash"><span class="kw">yum</span> list<span class="kw">|grep</span> cloudera
<span class="co">#如果列出的不是你安装的版本,执行下面命令重试</span>
<span class="kw">yum</span> clean all 
<span class="kw">yum</span> list <span class="kw">|</span> <span class="kw">grep</span> cloudera</code>
Salin selepas log masuk
  1. rpm源文件放入任意目录,执行yum -y install *.rpm,安装CM

在主节点执行下列步骤

  1. 将bin文件拷入主节点任意目录
  2. 将parcel相关文件(3个)拷入/opt/cloudera/parcel-repo,注意sha1文件改名为sha,不要修改文件内容
  3. 赋予执行权限,安装CM./cloudera-manager-installer.bin

CM的数据库

  1. 可能会出现没有数据库的错误,非生产环境可以默认绑定PostgreSQL数据库
  2. sudo yum install cloudera-manager-server-db-2
  3. sudo service cloudera-scm-server-db start
  4. 使用其他数据库可以看见官网

  5. 安装CDH

  6. 浏览器进入master_ip:7180,登录(账户密码默认admin)
  7. 选择相应的需要安装的CDH版本,基本上就是下一步了

  8. 可能遇到的错误

  • 安装CDH过程中卡在"正在获取安装锁"过程,删除对应主机上的缓存即可

cd /tmp

rm -rf scm_prepare_node.*

yum clean all

reboot

  • 其他问题可以参见链接或者直接谷歌

  • 卸载可以参见官网

  1. 参考

Atas ialah kandungan terperinci CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn

Alat AI Hot

Undresser.AI Undress

Undresser.AI Undress

Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover

AI Clothes Remover

Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool

Undress AI Tool

Gambar buka pakaian secara percuma

Clothoff.io

Clothoff.io

Penyingkiran pakaian AI

Video Face Swap

Video Face Swap

Tukar muka dalam mana-mana video dengan mudah menggunakan alat tukar muka AI percuma kami!

Alat panas

Notepad++7.3.1

Notepad++7.3.1

Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina

SublimeText3 versi Cina

Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1

Hantar Studio 13.0.1

Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

SublimeText3 versi Mac

SublimeText3 versi Mac

Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Di mana untuk melihat balak tigervnc di debian Di mana untuk melihat balak tigervnc di debian Apr 13, 2025 am 07:24 AM

Dalam sistem Debian, fail log pelayan Tigervnc biasanya disimpan dalam folder .vnc di direktori rumah pengguna. Jika anda menjalankan tigervnc sebagai pengguna tertentu, nama fail log biasanya sama dengan xf: 1.log, di mana xf: 1 mewakili nama pengguna. Untuk melihat log ini, anda boleh menggunakan arahan berikut: Cat ~/.vnc/xf: 1.log atau, anda boleh membuka fail log menggunakan editor teks: Nano ~/.vnc/xf: 1.log Sila ambil perhatian bahawa mengakses dan melihat fail log mungkin memerlukan kebenaran root, bergantung pada tetapan keselamatan sistem.

Operasi Linux Utama: Panduan Pemula Operasi Linux Utama: Panduan Pemula Apr 09, 2025 pm 04:09 PM

Pemula Linux harus menguasai operasi asas seperti pengurusan fail, pengurusan pengguna dan konfigurasi rangkaian. 1) Pengurusan Fail: Gunakan arahan MKDIR, Touch, LS, RM, MV, dan CP. 2) Pengurusan Pengguna: Gunakan perintah USERADD, PASSWD, USERDEL, dan USERMOD. 3) Konfigurasi Rangkaian: Gunakan perintah IFConfig, Echo, dan UFW. Operasi ini adalah asas pengurusan sistem Linux, dan menguasai mereka dengan berkesan dapat menguruskan sistem.

Bagaimana Debian Readdir Bersepadu Dengan Alat Lain Bagaimana Debian Readdir Bersepadu Dengan Alat Lain Apr 13, 2025 am 09:42 AM

Fungsi Readdir dalam sistem Debian adalah panggilan sistem yang digunakan untuk membaca kandungan direktori dan sering digunakan dalam pengaturcaraan C. Artikel ini akan menerangkan cara mengintegrasikan Readdir dengan alat lain untuk meningkatkan fungsinya. Kaedah 1: Menggabungkan Program Bahasa C dan Pipeline Pertama, tulis program C untuk memanggil fungsi Readdir dan output hasilnya:#termasuk#termasuk#includeintMain (intargc, char*argv []) {dir*dir; structdirent*entry; if (argc! = 2) {

Cara Mentafsirkan Hasil Output Debian Sniffer Cara Mentafsirkan Hasil Output Debian Sniffer Apr 12, 2025 pm 11:00 PM

DebiansNiffer adalah alat sniffer rangkaian yang digunakan untuk menangkap dan menganalisis cap waktu paket rangkaian: Memaparkan masa untuk penangkapan paket, biasanya dalam beberapa saat. Alamat IP Sumber (SourceIP): Alamat rangkaian peranti yang menghantar paket. Alamat IP Destinasi (DestinationIP): Alamat rangkaian peranti yang menerima paket data. Sourceport: Nombor port yang digunakan oleh peranti yang menghantar paket. Destinatio

Bagaimana Debian Meningkatkan Kelajuan Pemprosesan Data Hadoop Bagaimana Debian Meningkatkan Kelajuan Pemprosesan Data Hadoop Apr 13, 2025 am 11:54 AM

Artikel ini membincangkan cara meningkatkan kecekapan pemprosesan data Hadoop pada sistem Debian. Strategi pengoptimuman meliputi peningkatan perkakasan, pelarasan parameter sistem operasi, pengubahsuaian konfigurasi Hadoop, dan penggunaan algoritma dan alat yang cekap. 1. Pengukuhan sumber perkakasan memastikan bahawa semua nod mempunyai konfigurasi perkakasan yang konsisten, terutama memberi perhatian kepada prestasi CPU, memori dan peralatan rangkaian. Memilih komponen perkakasan berprestasi tinggi adalah penting untuk meningkatkan kelajuan pemprosesan keseluruhan. 2. Sistem operasi Tunes deskriptor fail dan sambungan rangkaian: Ubah suai fail /etc/security/limits.conf untuk meningkatkan had atas deskriptor fail dan sambungan rangkaian yang dibenarkan dibuka pada masa yang sama oleh sistem. Pelarasan Parameter JVM: Laraskan fail Hadoop-env.sh

Cara Menggunakan Log Debian Apache Untuk Meningkatkan Prestasi Laman Web Cara Menggunakan Log Debian Apache Untuk Meningkatkan Prestasi Laman Web Apr 12, 2025 pm 11:36 PM

Artikel ini akan menerangkan bagaimana untuk meningkatkan prestasi laman web dengan menganalisis log Apache di bawah sistem Debian. 1. Asas Analisis Log Apache Log merekodkan maklumat terperinci semua permintaan HTTP, termasuk alamat IP, timestamp, url permintaan, kaedah HTTP dan kod tindak balas. Dalam sistem Debian, log ini biasanya terletak di direktori/var/log/apache2/access.log dan /var/log/apache2/error.log. Memahami struktur log adalah langkah pertama dalam analisis yang berkesan. 2. Alat Analisis Log Anda boleh menggunakan pelbagai alat untuk menganalisis log Apache: Alat baris arahan: grep, awk, sed dan alat baris arahan lain.

Panduan Persediaan DNS Pelayan Mel Debian Panduan Persediaan DNS Pelayan Mel Debian Apr 13, 2025 am 11:33 AM

Untuk mengkonfigurasi tetapan DNS untuk pelayan mel Debian, anda boleh mengikuti langkah -langkah ini: Buka fail konfigurasi rangkaian: Gunakan editor teks (seperti VI atau Nano) untuk membuka fail konfigurasi rangkaian/etc/rangkaian/antara muka. Sudonano/etc/rangkaian/antara muka Cari Konfigurasi Antara Muka Rangkaian: Cari antara muka rangkaian yang akan diubah suai dalam fail konfigurasi. Biasanya, konfigurasi antara muka Ethernet terletak di blok IFETH0.

Cara mengitar semula pakej yang tidak lagi digunakan Cara mengitar semula pakej yang tidak lagi digunakan Apr 13, 2025 am 08:51 AM

Artikel ini menerangkan cara membersihkan pakej perisian yang tidak berguna dan membebaskan ruang cakera dalam sistem Debian. Langkah 1: Kemas kini senarai pakej Pastikan senarai pakej anda terkini: Sudoaptupdate Langkah 2: Lihat pakej yang dipasang Gunakan arahan berikut untuk melihat semua pakej yang dipasang: DPKG-Get-Selections | GREP-VDEINSTALL Langkah 3: Kenal pasti pakej berlebihan Gunakan alat kebolehan untuk mencari pakej yang tidak lagi diperlukan. Aptitude akan memberikan cadangan untuk membantu anda memadam pakej dengan selamat: sudoaptitudesearch '~ pimportant' Perintah ini menyenaraikan tag

See all articles