


CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装
Cloudera Manager and Cloudera Hadoop
改hostname/关闭防火墙/关闭selinux/ssh免密钥登录/NTP同步
下载相关文件(建议CM和CDH版本一致;同时注意CDH与JDK版本兼容性)
- cloudera-manager.repo 一个配置文件
- cm install 安装脚本
- cm rpms rpm的本地源文件(也可通过可以选择下载tar文件直接解压)
- CDH parcel CDH的安装文件,离线安装使用,只需下载对应的parcel及sha1还有manifest.json文件,国外网站可能速度慢,此处使用科大的反向代理
- 安装CM(此处使用本地源文件安装,下载tar文件的不再赘述)
在所有节点执行下列步骤
将cloudera-manager.repo 配置文件拷入
/etc/yum.repos.d/
文件夹验证repo文件是否有效
<code class="sourceCode bash"><span class="kw">yum</span> list<span class="kw">|grep</span> cloudera <span class="co">#如果列出的不是你安装的版本,执行下面命令重试</span> <span class="kw">yum</span> clean all <span class="kw">yum</span> list <span class="kw">|</span> <span class="kw">grep</span> cloudera</code>
- rpm源文件放入任意目录,执行
yum -y install *.rpm
,安装CM
在主节点执行下列步骤
- 将bin文件拷入主节点任意目录
- 将parcel相关文件(3个)拷入
/opt/cloudera/parcel-repo
,注意sha1文件改名为sha,不要修改文件内容 - 赋予执行权限,安装CM
./cloudera-manager-installer.bin
CM的数据库
- 可能会出现没有数据库的错误,非生产环境可以默认绑定PostgreSQL数据库
sudo yum install cloudera-manager-server-db-2
sudo service cloudera-scm-server-db start
使用其他数据库可以看见官网
安装CDH
- 浏览器进入
master_ip:7180
,登录(账户密码默认admin) 选择相应的需要安装的CDH版本,基本上就是下一步了
可能遇到的错误
- 安装CDH过程中卡在"正在获取安装锁"过程,删除对应主机上的缓存即可
cd /tmp
rm -rf scm_prepare_node.*
yum clean all
reboot
其他问题可以参见链接或者直接谷歌
卸载可以参见官网
- 参考
Atas ialah kandungan terperinci CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Alat AI Hot

Undresser.AI Undress
Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover
Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool
Gambar buka pakaian secara percuma

Clothoff.io
Penyingkiran pakaian AI

Video Face Swap
Tukar muka dalam mana-mana video dengan mudah menggunakan alat tukar muka AI percuma kami!

Artikel Panas

Alat panas

Notepad++7.3.1
Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina
Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6
Alat pembangunan web visual

SublimeText3 versi Mac
Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Topik panas



Dalam sistem Debian, fail log pelayan Tigervnc biasanya disimpan dalam folder .vnc di direktori rumah pengguna. Jika anda menjalankan tigervnc sebagai pengguna tertentu, nama fail log biasanya sama dengan xf: 1.log, di mana xf: 1 mewakili nama pengguna. Untuk melihat log ini, anda boleh menggunakan arahan berikut: Cat ~/.vnc/xf: 1.log atau, anda boleh membuka fail log menggunakan editor teks: Nano ~/.vnc/xf: 1.log Sila ambil perhatian bahawa mengakses dan melihat fail log mungkin memerlukan kebenaran root, bergantung pada tetapan keselamatan sistem.

Pemula Linux harus menguasai operasi asas seperti pengurusan fail, pengurusan pengguna dan konfigurasi rangkaian. 1) Pengurusan Fail: Gunakan arahan MKDIR, Touch, LS, RM, MV, dan CP. 2) Pengurusan Pengguna: Gunakan perintah USERADD, PASSWD, USERDEL, dan USERMOD. 3) Konfigurasi Rangkaian: Gunakan perintah IFConfig, Echo, dan UFW. Operasi ini adalah asas pengurusan sistem Linux, dan menguasai mereka dengan berkesan dapat menguruskan sistem.

Fungsi Readdir dalam sistem Debian adalah panggilan sistem yang digunakan untuk membaca kandungan direktori dan sering digunakan dalam pengaturcaraan C. Artikel ini akan menerangkan cara mengintegrasikan Readdir dengan alat lain untuk meningkatkan fungsinya. Kaedah 1: Menggabungkan Program Bahasa C dan Pipeline Pertama, tulis program C untuk memanggil fungsi Readdir dan output hasilnya:#termasuk#termasuk#includeintMain (intargc, char*argv []) {dir*dir; structdirent*entry; if (argc! = 2) {

DebiansNiffer adalah alat sniffer rangkaian yang digunakan untuk menangkap dan menganalisis cap waktu paket rangkaian: Memaparkan masa untuk penangkapan paket, biasanya dalam beberapa saat. Alamat IP Sumber (SourceIP): Alamat rangkaian peranti yang menghantar paket. Alamat IP Destinasi (DestinationIP): Alamat rangkaian peranti yang menerima paket data. Sourceport: Nombor port yang digunakan oleh peranti yang menghantar paket. Destinatio

Artikel ini membincangkan cara meningkatkan kecekapan pemprosesan data Hadoop pada sistem Debian. Strategi pengoptimuman meliputi peningkatan perkakasan, pelarasan parameter sistem operasi, pengubahsuaian konfigurasi Hadoop, dan penggunaan algoritma dan alat yang cekap. 1. Pengukuhan sumber perkakasan memastikan bahawa semua nod mempunyai konfigurasi perkakasan yang konsisten, terutama memberi perhatian kepada prestasi CPU, memori dan peralatan rangkaian. Memilih komponen perkakasan berprestasi tinggi adalah penting untuk meningkatkan kelajuan pemprosesan keseluruhan. 2. Sistem operasi Tunes deskriptor fail dan sambungan rangkaian: Ubah suai fail /etc/security/limits.conf untuk meningkatkan had atas deskriptor fail dan sambungan rangkaian yang dibenarkan dibuka pada masa yang sama oleh sistem. Pelarasan Parameter JVM: Laraskan fail Hadoop-env.sh

Artikel ini akan menerangkan bagaimana untuk meningkatkan prestasi laman web dengan menganalisis log Apache di bawah sistem Debian. 1. Asas Analisis Log Apache Log merekodkan maklumat terperinci semua permintaan HTTP, termasuk alamat IP, timestamp, url permintaan, kaedah HTTP dan kod tindak balas. Dalam sistem Debian, log ini biasanya terletak di direktori/var/log/apache2/access.log dan /var/log/apache2/error.log. Memahami struktur log adalah langkah pertama dalam analisis yang berkesan. 2. Alat Analisis Log Anda boleh menggunakan pelbagai alat untuk menganalisis log Apache: Alat baris arahan: grep, awk, sed dan alat baris arahan lain.

Untuk mengkonfigurasi tetapan DNS untuk pelayan mel Debian, anda boleh mengikuti langkah -langkah ini: Buka fail konfigurasi rangkaian: Gunakan editor teks (seperti VI atau Nano) untuk membuka fail konfigurasi rangkaian/etc/rangkaian/antara muka. Sudonano/etc/rangkaian/antara muka Cari Konfigurasi Antara Muka Rangkaian: Cari antara muka rangkaian yang akan diubah suai dalam fail konfigurasi. Biasanya, konfigurasi antara muka Ethernet terletak di blok IFETH0.

Artikel ini menerangkan cara membersihkan pakej perisian yang tidak berguna dan membebaskan ruang cakera dalam sistem Debian. Langkah 1: Kemas kini senarai pakej Pastikan senarai pakej anda terkini: Sudoaptupdate Langkah 2: Lihat pakej yang dipasang Gunakan arahan berikut untuk melihat semua pakej yang dipasang: DPKG-Get-Selections | GREP-VDEINSTALL Langkah 3: Kenal pasti pakej berlebihan Gunakan alat kebolehan untuk mencari pakej yang tidak lagi diperlukan. Aptitude akan memberikan cadangan untuk membantu anda memadam pakej dengan selamat: sudoaptitudesearch '~ pimportant' Perintah ini menyenaraikan tag
