首页 >运维 >linux运维 >CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装

CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装

PHP中文网
PHP中文网原创
2017-07-14 18:16:051752浏览

Cloudera Manager and Cloudera Hadoop

  1. 改hostname/关闭防火墙/关闭selinux/ssh免密钥登录/NTP同步

  2. 下载相关文件(建议CM和CDH版本一致;同时注意CDH与JDK版本兼容性)

  • cloudera-manager.repo 一个配置文件
  • cm install 安装脚本
  • cm rpms rpm的本地源文件(也可通过可以选择下载tar文件直接解压)
  • CDH parcel CDH的安装文件,离线安装使用,只需下载对应的parcel及sha1还有manifest.json文件,国外网站可能速度慢,此处使用科大的反向代理
  1. 安装CM(此处使用本地源文件安装,下载tar文件的不再赘述)

在所有节点执行下列步骤

  1. 将cloudera-manager.repo 配置文件拷入/etc/yum.repos.d/文件夹

  2. 验证repo文件是否有效

<code class="sourceCode bash"><span class="kw">yum</span> list<span class="kw">|grep</span> cloudera
<span class="co">#如果列出的不是你安装的版本,执行下面命令重试</span>
<span class="kw">yum</span> clean all 
<span class="kw">yum</span> list <span class="kw">|</span> <span class="kw">grep</span> cloudera</code>
  1. rpm源文件放入任意目录,执行yum -y install *.rpm,安装CM

在主节点执行下列步骤

  1. 将bin文件拷入主节点任意目录
  2. 将parcel相关文件(3个)拷入/opt/cloudera/parcel-repo,注意sha1文件改名为sha,不要修改文件内容
  3. 赋予执行权限,安装CM./cloudera-manager-installer.bin

CM的数据库

  1. 可能会出现没有数据库的错误,非生产环境可以默认绑定PostgreSQL数据库
  2. sudo yum install cloudera-manager-server-db-2
  3. sudo service cloudera-scm-server-db start
  4. 使用其他数据库可以看见官网

  5. 安装CDH

  6. 浏览器进入master_ip:7180,登录(账户密码默认admin)
  7. 选择相应的需要安装的CDH版本,基本上就是下一步了

  8. 可能遇到的错误

  • 安装CDH过程中卡在"正在获取安装锁"过程,删除对应主机上的缓存即可

cd /tmp

rm -rf scm_prepare_node.*

yum clean all

reboot

  • 其他问题可以参见链接或者直接谷歌

  • 卸载可以参见官网

  1. 参考

以上是CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装的详细内容。更多信息请关注PHP中文网其他相关文章!

声明:
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn