大数据平台cloudera manager安装
来源:互联网 发布:树上10只鸟 程序员 编辑:程序博客网 时间:2024/06/09 17:02
主节点是 server,其他节点是 agent
sudo rpm -qa|grep http
sudo service httpd status
sudo service httpd start
sudo chkconfig httpd on
访问 : bigdata-cdh01.ibeifeng.com 主机名(先重启再访问),要能访问通
2:搭建本地源
>>软件下载
>>网站:
http://archive.cloudera.com/cm5/
>>cm-5.3.6 bin文件
http://archive.cloudera.com/cm5/installer/5.3.6/cloudera-manager-installer.bin
>>cm-5.3.6 依赖的rpm包
http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.3.6/
http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.3.6/RPMS/x86_64/*
>>依赖其他包
postgrep-sql
repo-libs
3:下载包
http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.3.6/RPMS/x86_64/ 下的包,
新建目录:
cd /var/www/html/
mkdir -p cm5/redhat/6/x86_64/cm/5/RPMS/x86_64/
mkdir /var/www/html/cm5/redhat/6/x86_64/cm/5/repodata/
把包移动到 linux目录下 cm5/redhat/6/x86_64/cm/5/RPMS/x86_64/,
把 文件移动到 /var/www/html/cm5/redhat/6/x86_64/cm/5/repodata/下
4:创建cloudera-manager.repo
cd /etc/yum.repos.d/
touch cloudera-manager.repo
写入:
[cloudera-manager]
name=Cloudera Manager
baseurl=http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5/
gpgkey = http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/RPM-GPG-KEY-cloudera
gpgcheck=1
5:修改本机域名
window域名 192.168.1.181 sparkproject1
sparkproject1/cm5/redhat/6/x86_64/cm/5/RPMS/x86_64/
6:安装
./cloudera-manager-installer.bin
到此,CM安装完成
7:安装 CDH
CDH-5.3.6-1.cdh5.3.6.p0.11-el6.parcel
CDH-5.3.6-1.cdh5.3.6.p0.11-el6.parcel.sha1
manifest.json
把这三个包移动到 /opt/cloudera/parcel-repo 文件夹,修改 CDH-5.3.6-1.cdh5.3.6.p0.11-el6.parcel.sha1 文件名为
CDH-5.3.6-1.cdh5.3.6.p0.11-el6.parcel.sha
然后重启 CM,让他自动去找这个包
sudo service cloudera-scm-server status
sudo service cloudera-scm-server start
sudo service cloudera-scm-server restart
点击 继续:
注意:
先下载到 parcel-cache缓存包,再解压到 parcels包里面
然后运行 命令:sudo sysctl -w vm.swappiness=0(此时重启就不生效)
设置重启生效:echo "vm.swappiness=0" >> /etc/sysctl.conf
然后在spark2上面也运行 sudo sysctl -w vm.swappiness=0,echo "vm.swappiness=0" >> /etc/sysctl.conf命令
0 0
- 大数据平台cloudera manager安装
- 大数据平台cloudera manager安装
- 大数据平台cloudera manager安装
- 企业大数据cloudera manager安装使用
- Cloudera Manager CDH 5.12 大数据处理平台部署指南
- 虚拟平台下cloudera manager的在线安装(ubuntu)
- Cloudera Manager安装
- 手动安装Cloudera Manager
- 安装cloudera-manager
- Cloudera Manager安装
- 安装Cloudera Manager 5
- Cloudera Manager 5安装
- cloudera manager安装
- cloudera-manager安装
- 安装Cloudera Manager
- 离线安装cloudera Manager
- cloudera-manager安装
- 六台Debian主机安装搭建Cloudera Manager 5和CDH5(版本5.9.0)大数据集群
- 深入理解JVM 一内存
- HDU3714:Error Curves(三分)
- HOJ 2200
- 嵌入式面试题——ARM面试题(三)
- Angular企业级开发(8)-控制器的作用域
- 大数据平台cloudera manager安装
- C语言perror( )函数
- 设计模式之桥接模式
- Java集合
- 【LEETCODE】 Find Largest Value in Each Tree Row javascript实现
- 左偏树/斜堆/可并堆-洛谷P3377 【模板】左偏树(可并堆)
- Practice3_7_vector_sort_struct_gold_silver_bronze_playerName3
- HOJ 2201 题解
- 安装caffe(CPU版)遇到的问题