CDH5.2 Cloudera Manager installer安装配置-mysql教程-PHP中文网

首页

数据库

mysql教程

CDH5.2 Cloudera Manager installer安装配置

PHP中文网

Jun 07, 2016 pm 04:41 PM

clouderamanager

一、机器准备 1、3台主机名：server202 server203 server204 另外server201用来搭建本地yum的repos，不参与集群。 2、配置server202的ssh免密码登录到其他机器（包括自己） 3、3个机器节点的/etc/hosts加入 192.168.2.201 archive.cloudera.com 192.168.2.20

一、机器准备

1、3台主机名：server202 server203 server204

另外server201用来搭建本地yum的repos，不参与集群。

2、配置server202的ssh免密码登录到其他机器（包括自己）

3、3个机器节点的/etc/hosts加入

192.168.2.201 archive.cloudera.com

192.168.2.202 server202

192.168.2.203 server203

192.168.2.204 server204

4、其他一些相关操作：

关闭防火墙

chkconfig iptables off

service iptables stop

通过Cloudera Manager installer安装必须设置/etc/selinux/config中的SELINUX=disabled，你需要重启机器。

sed -i "s/SELINUX=enforcing/SELINUX=disabled/g" /etc/selinux/config

配置163，sohu源

cd /etc/yum.repos.d/

#Centos5

wget?http://mirrors.163.com/.help/CentOS5-Base-163.repo

#wget?http://mirrors.sohu.com/help/CentOS-Base-sohu.repo

#Centos6

wget?http://mirrors.163.com/.help/CentOS6-Base-163.repo

yum?makecache

同步时间

ntpdate -u pool.ntp.org

安装CDH5.2必须安装python26版本，通过yum安装。

python yum -y install python26 python26-devel

有可能会提示zlib的错误，同时python中通过下面编译来重新配置。

yum install zlib

vi Modules/Setup Modules/Setup.dist
搜索zlib，去掉 #zlib zlibmodule.c -I$(prefix)/include -L$(exec_prefix)/lib -lz 前面的注释。
./configure
make

make install

二、构建本地repos(server201机器)

下载CDH5.2的tarball安装包，后面的manager通过tarball来安装

http://archive.cloudera.com/cdh5/repo-as-tarball/5.2.0/cdh5.2.0-centos5.tar.gz

http://archive.cloudera.com/cdh5/repo-as-tarball/5.2.0/cdh5.2.0-centos6.tar.gz

http://archive.cloudera.com/cm5/repo-as-tarball/5.2.0/cm5.2.0-centos5.tar.gz

http://archive.cloudera.com/cm5/repo-as-tarball/5.2.0/cm5.2.0-centos6.tar.gz

注意如果是centos6的操作系统还需要下载?navigator-keytrustee5目录，通过wget来下载

wget --mirror -p --convert-links -P /disk/cloudera/t?http://archive-primary.cloudera.com/navigator-keytrustee5/

这里是通过server201中nginx代理本地repos，并将archive.cloudera.com指定到192.168.2.201，这样你就不用修改yum的repos的网址。要不你得手动指定自己的repos地址。

nginx的默认配置没打开显示目录下的全部文件，你可以通过下面的配置在nginx.conf中启用。

autoindex on;#自动显示目录

autoindex_exact_size off;#人性化方式显示文件大小否则以byte显示

autoindex_localtime on;#按服务器时间显示，否则以gmt时间显示

搭建本地repos的相关配置命令

#centos5

mkdir -p /disk/cloudera/cdh5/redhat/5/x86_64

cd /disk/cloudera/cdh5/redhat/5/x86_64

tar -xzvf /disk/cloudera/download/cdh5.2.0-centos5.tar.gz

mkdir -p?/disk/cloudera/cm5/redhat/5/x86_64

cd?/disk/cloudera/cm5/redhat/5/x86_64

tar -xzvf /disk/cloudera/download/cm5.2.0-centos5.tar.gz

#centos6

mkdir -p /disk/cloudera/cdh5/redhat/6/x86_64

cd /disk/cloudera/cdh5/redhat/6/x86_64

tar -xzvf /disk/cloudera/download/cdh5.2.0-centos6.tar.gz

mkdir -p?/disk/cloudera/cm5/redhat/6/x86_64

cd?/disk/cloudera/cm5/redhat/6/x86_64

tar -xzvf /disk/cloudera/download/cm5.2.0-centos6.tar.gz

mkdir -p /disk/cloudera/redhat/cdh/

cd /disk/cloudera/redhat/cdh

cp /disk/cloudera/cdh5/redhat/5/x86_64/cdh/RPM-GPG-KEY-cloudera .

配置成功后，确保http://archive.cloudera.com能够访问到你的本地的repos。

三、cloudera manager 安装

1、下载cloudera-manager-installer.bin?：?http://archive.cloudera.com/cm5/installer/latest/cloudera-manager-installer.bin

2、执行cloudera-manager-installer.bin，安装上面的步骤来安装即可。一般指需要几分钟时间。因为走得是本地repos源。注意要关闭SELINUX=disabled。安装的错误相关日志在/var/log/cloudera-manager-installer/这边可以查看。

3、安装后访问?http://server202:7180 来访问，默认账号密码：admin admin

四、通过cloudera manager安装集群

按照界面的导航流程操作即可。

1、选择 Cloudera Express 版本。

2、列出可安装的包及服务

3、指定CDH主机：

server202

server203

server204

4、选择存储库。选择方法：使用数据包。 CDH版本选择5.2。其他不要去修改。

5、选址安装oracle JDK 安装默认配置即可。

6、设置ssh登录的key，上传的是server202的私钥。

7、进入安装的流程。可以详细看到每个节点的安装情况。错误日志等，可以回滚重新安装。一般只要十几分钟。如果有错误，按照错误提示的内容修复即可。我碰到的错误就是python26依赖问题。

8、安装成功后，会自动对集群的机器的一些服务环境检查，根据检查结果自己来修复。一般都会检查通过。

9、选择需要安装的服务，这里你最大话安装，选择全部。

10、配置集群的角色。一般按照默认即可。注意，有些角色没有默认配置主机，你需要自己配置需要安装的主机位置。数据库，配置文件都按照默认即可。首次配置也需要十几分钟时间。

11、一切正常后，就进入管理面板，可以看到安装的服务。

安装成功后截图：

参考：

本站haddop文章?http://www.lifeba.org/?s=hadoop

http://blog.csdn.net/yangzhaohui168/article/details/33403555

http://www.cnblogs.com/thinkCoding/p/3567408.html

http://www.doc88.com/p-0042075356791.html

http://www.tuicool.com/articles/AnuiUra

http://wenku.baidu.com/link?url=6u94qotuyNG9n0rcgd9fNLQ_i4qhDyE3lN-7wo3oW1nZ9NSvnswNsCN007uOEBVccnjpVfW2YwBbgp1MgSz6O8RkztV-feyD2V40ghY2SES

原文地址：CDH5.2 Cloudera Manager installer安装配置, 感谢原作者分享。

以上就是CDH5.2 Cloudera Manager installer安装配置的内容，更多相关内容请关注PHP中文网（www.php.cn）！

声明

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn

说明InnoDB重做日志和撤消日志的作用。Apr 15, 2025 am 12:16 AM

InnoDB使用redologs和undologs确保数据一致性和可靠性。1.redologs记录数据页修改，确保崩溃恢复和事务持久性。2.undologs记录数据原始值，支持事务回滚和MVCC。

在解释输出（类型，键，行，额外）中要查找的关键指标是什么？Apr 15, 2025 am 12:15 AM

EXPLAIN命令的关键指标包括type、key、rows和Extra。1）type反映查询的访问类型，值越高效率越高，如const优于ALL。2）key显示使用的索引，NULL表示无索引。3）rows预估扫描行数，影响查询性能。4）Extra提供额外信息，如Usingfilesort提示需要优化。

在解释中使用临时状态以及如何避免它是什么？Apr 15, 2025 am 12:14 AM

Usingtemporary在MySQL查询中表示需要创建临时表，常见于使用DISTINCT、GROUPBY或非索引列的ORDERBY。可以通过优化索引和重写查询避免其出现，提升查询性能。具体来说，Usingtemporary出现在EXPLAIN输出中时，意味着MySQL需要创建临时表来处理查询。这通常发生在以下情况：1)使用DISTINCT或GROUPBY时进行去重或分组；2)ORDERBY包含非索引列时进行排序；3)使用复杂的子查询或联接操作。优化方法包括：1)为ORDERBY和GROUPB

描述不同的SQL交易隔离级别（读取未读取，读取，可重复的读取，可序列化）及其在MySQL/InnoDB中的含义。Apr 15, 2025 am 12:11 AM

MySQL/InnoDB支持四种事务隔离级别：ReadUncommitted、ReadCommitted、RepeatableRead和Serializable。1.ReadUncommitted允许读取未提交数据，可能导致脏读。2.ReadCommitted避免脏读，但可能发生不可重复读。3.RepeatableRead是默认级别，避免脏读和不可重复读，但可能发生幻读。4.Serializable避免所有并发问题，但降低并发性。选择合适的隔离级别需平衡数据一致性和性能需求。

MySQL与其他数据库：比较选项Apr 15, 2025 am 12:08 AM

MySQL适合Web应用和内容管理系统，因其开源、高性能和易用性而受欢迎。1)与PostgreSQL相比，MySQL在简单查询和高并发读操作上表现更好。2)相较Oracle，MySQL因开源和低成本更受中小企业青睐。3)对比MicrosoftSQLServer，MySQL更适合跨平台应用。4)与MongoDB不同，MySQL更适用于结构化数据和事务处理。

MySQL索引基数如何影响查询性能？Apr 14, 2025 am 12:18 AM

MySQL索引基数对查询性能有显着影响：1.高基数索引能更有效地缩小数据范围，提高查询效率；2.低基数索引可能导致全表扫描，降低查询性能；3.在联合索引中，应将高基数列放在前面以优化查询。

MySQL：新用户的资源和教程Apr 14, 2025 am 12:16 AM

MySQL学习路径包括基础知识、核心概念、使用示例和优化技巧。1)了解表、行、列、SQL查询等基础概念。2)学习MySQL的定义、工作原理和优势。3)掌握基本CRUD操作和高级用法，如索引和存储过程。4)熟悉常见错误调试和性能优化建议，如合理使用索引和优化查询。通过这些步骤，你将全面掌握MySQL的使用和优化。