通过很长一段时间的反复失败,终于在windows下实现远程连接hbase数据库,在不断的尝试过程中深感一个详细的文档的重要性,于是就把我配置的详细过程记录下来。文中如果有些地方用词不当,或者理解错误,欢迎您们评论。 一、运行平台 hbase服务器端:Ubuntu 1
通过很长一段时间的反复失败,终于在windows下实现远程连接hbase数据库,在不断的尝试过程中深感一个详细的文档的重要性,于是就把我配置的详细过程记录下来。文中如果有些地方用词不当,或者理解错误,欢迎您们评论。
一、运行平台
hbase服务器端:Ubuntu 14.04 64位;HBASE1.1.3;JAVA 1.8;
hbase客服端:windows32/64位;JAVA1.8;eclipse 4.5;
二、linux服务器端环境配置
1、 安装java 1.8软件
1)下载java软件
注:如果系统软件库中没有java1.8,则执行以下操作
$ sudo apt-get install software-properties-common
$ sudo apt-get install python-software-properties
上面两个操作是下载Ubuntu下的基础开发套件
$ sudo add-apt-repository ppa:webupd8team/java
2)安装java 8
$ sudo apt-get update
$ sudo apt-get installoracle-java8-installer
3)验证安装的java版本
$ java –version 执行后会输出java版本信息
2、 安装配置HBASE
1)下载hbase-1.1.3
网址http://mirrors.cnnic.cn/apache/hbase/1.1.3/hbase-1.1.3-bin.tar.gz
2)解压
$tar xzf hbase-1.1.3-bin.tar.gz
$mv hbase-1.1.3 hbase 将解压是文件全部移至hbase目录中
3)配置hbase单机模式
3.1为hbase指定JAVA_HOME
$ vim hbase/conf/hbase-env.sh
文件中修改JAVA_HOME={java安装目录的路径}
修改export HBASE_MANAGES_ZK=true,表示由hbase托管Zookeeper集群,不需要单独下载Zookeeper程序,然后自己去启动。
3.2配置hbase-site.xml文件
$ vim hbase/conf/hbase-site.xml
在文件中
上面的意思是hbase数据库将使用本地文件系统作为数据备份以免服务器掉电丢失。同时也可备份到HDFS文件系上。
3.3启动hbase和hbase shell
$ cdhbase/bin
$./start-hbase.sh
$ ./hbase shell
启动hbase shell 后可以根据自带的命令进行建表,插入数据等操作。然后打开浏览器,输入:localhost:16010 进入网页可以看到hbase相关信息。注意:端口是16010,不是官方文档和大多数博客里面写的60000,原因不详,个人认为可能是因为官方文档写是是hbase 1.0之前的版本。如果不清楚自己下载的版本对应的master端口号,可以通过命令查看:$ netstat –nlp | grep java 。
3.3配置hostname以及hosts
由于需要进行夸平台远程操作hbase数据库,所以需要进一步配置。在/etc/hostname文件中设置主机名,这个主机名就是hbase的Master运行的主机名字,一般情况下直接就是默认名字。
在/etc/hosts文件中,在没有修改之前是:127.0.0.1 localhost
127.0.1.1 sobey(机器名)。如果不修改直接运行,通过命令:$ netstat –nlp | grep java 查看,可以看出Hbase运行在IP地址为127.0.1.1上,这是一个本地地址,如果需要局域网内远程操控,则需要修改127.0.1.1为机器的互联网IP地址,如:172.16.133.18。提醒:在/hbase/conf/regionservers文件内容尽量不要修改,因为里面放着hbase中节点运行的机器域名,单机环境下默认为localhost,它对应的也是本地的地址:127.0.0.1。
注意:hosts中机器名必须和hostname中机器名统一修改或
都不修改。
3.4 配置hbase的系统环境变量
为方便hbase的启动或者关闭等操作,在系统环境变量中添加如下信息:
$ vim ~/.bashrc
Export HBASE_HOME=
Export HABSE_CONF_DIR=$HBASE_HOME/conf
Export HBASE_CLASS_PATH=$HBASE_CONF_DIR
Export PATH=$PATH:$HBASE_HOME/bin
编辑完后记住执行:source ~/.bashrc
到此,hbase服务器端的配置已完成。
三、windows客服端配置
1、下载安装java 1.8并且配置好环境变量。
1、下载安装eclipse,最好为最新版。
2、下载hbase-1.1.3-bin.tat.gz并解压。
3、客服端java程序设置
1)找到运行hbase程序所需要的jar包,这些文件都在hbase解压后的lib文件夹里面
2)将hbase文件下conf文件下的hbase-site.xml文件拷贝一份,放入为其单独建一个文件夹中。
3)打开eclipse软件,新建工程,在工程中导入外部依赖包(运行hbase所需的jar包),将单独放有hbase-site.xml文件的文件夹也导入java build path à Libraries中。
4)Windows下eclipse 远程连接hbase程序的重要java程序
一般讲这段程序放入java 类的构造函数中,以保证类中方法函数运行时程序是和服务端的hbase是连接的。在这段程序中IP就hbase服务端的互联网IP地址,2181是指zookeeper的端口,单机环境 下hbase运行是通过自带的zookeeper管理的,所以客服端想连接hbase,必须知道zookeeper的listen的端口号,默认环境下是2181端口。
5)Windows下hosts文件
在win7下C:WindowsSystem32driversetc中找到hosts文件,添加如下内容:172.16.133.18 sobey-XPS-M1330。其中,前半部分表示IP地址,后半部分表示机器名字,根据实际情况进行修改。
通过以上的配置和操作,接下来就可以在局域网中任何一台PC上任何系统下远程操作hbase数据库。
提醒:如果是虚拟机环境下,要注意IP的设置,由于需要局域网其他PC连接到虚拟机上,所以它的IP必须使局域网内其他电脑都可以连接。在虚拟机上点击设置à网络适配器à选中桥接模式,然后重启。测试一下,通过命令:ifconfig,查看IP,然后通过局域网内其他PC是否能够ping通。

InnoDB使用redologs和undologs确保数据一致性和可靠性。1.redologs记录数据页修改,确保崩溃恢复和事务持久性。2.undologs记录数据原始值,支持事务回滚和MVCC。

EXPLAIN命令的关键指标包括type、key、rows和Extra。1)type反映查询的访问类型,值越高效率越高,如const优于ALL。2)key显示使用的索引,NULL表示无索引。3)rows预估扫描行数,影响查询性能。4)Extra提供额外信息,如Usingfilesort提示需要优化。

Usingtemporary在MySQL查询中表示需要创建临时表,常见于使用DISTINCT、GROUPBY或非索引列的ORDERBY。可以通过优化索引和重写查询避免其出现,提升查询性能。具体来说,Usingtemporary出现在EXPLAIN输出中时,意味着MySQL需要创建临时表来处理查询。这通常发生在以下情况:1)使用DISTINCT或GROUPBY时进行去重或分组;2)ORDERBY包含非索引列时进行排序;3)使用复杂的子查询或联接操作。优化方法包括:1)为ORDERBY和GROUPB

MySQL/InnoDB支持四种事务隔离级别:ReadUncommitted、ReadCommitted、RepeatableRead和Serializable。1.ReadUncommitted允许读取未提交数据,可能导致脏读。2.ReadCommitted避免脏读,但可能发生不可重复读。3.RepeatableRead是默认级别,避免脏读和不可重复读,但可能发生幻读。4.Serializable避免所有并发问题,但降低并发性。选择合适的隔离级别需平衡数据一致性和性能需求。

MySQL适合Web应用和内容管理系统,因其开源、高性能和易用性而受欢迎。1)与PostgreSQL相比,MySQL在简单查询和高并发读操作上表现更好。2)相较Oracle,MySQL因开源和低成本更受中小企业青睐。3)对比MicrosoftSQLServer,MySQL更适合跨平台应用。4)与MongoDB不同,MySQL更适用于结构化数据和事务处理。

MySQL索引基数对查询性能有显着影响:1.高基数索引能更有效地缩小数据范围,提高查询效率;2.低基数索引可能导致全表扫描,降低查询性能;3.在联合索引中,应将高基数列放在前面以优化查询。

MySQL学习路径包括基础知识、核心概念、使用示例和优化技巧。1)了解表、行、列、SQL查询等基础概念。2)学习MySQL的定义、工作原理和优势。3)掌握基本CRUD操作和高级用法,如索引和存储过程。4)熟悉常见错误调试和性能优化建议,如合理使用索引和优化查询。通过这些步骤,你将全面掌握MySQL的使用和优化。

MySQL在现实世界的应用包括基础数据库设计和复杂查询优化。1)基本用法:用于存储和管理用户数据,如插入、查询、更新和删除用户信息。2)高级用法:处理复杂业务逻辑,如电子商务平台的订单和库存管理。3)性能优化:通过合理使用索引、分区表和查询缓存来提升性能。


热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

EditPlus 中文破解版
体积小,语法高亮,不支持代码提示功能

VSCode Windows 64位 下载
微软推出的免费、功能强大的一款IDE编辑器

MinGW - 适用于 Windows 的极简 GNU
这个项目正在迁移到osdn.net/projects/mingw的过程中,你可以继续在那里关注我们。MinGW:GNU编译器集合(GCC)的本地Windows移植版本,可自由分发的导入库和用于构建本地Windows应用程序的头文件;包括对MSVC运行时的扩展,以支持C99功能。MinGW的所有软件都可以在64位Windows平台上运行。

SublimeText3 Linux新版
SublimeText3 Linux最新版

DVWA
Damn Vulnerable Web App (DVWA) 是一个PHP/MySQL的Web应用程序,非常容易受到攻击。它的主要目标是成为安全专业人员在合法环境中测试自己的技能和工具的辅助工具,帮助Web开发人员更好地理解保护Web应用程序的过程,并帮助教师/学生在课堂环境中教授/学习Web应用程序安全。DVWA的目标是通过简单直接的界面练习一些最常见的Web漏洞,难度各不相同。请注意,该软件中