本文主要描述Hive和HBase 环境整合配置的详细过程：
- 基本环境
- 整合配置
- 测试验证
[一]、基本环境
各设备对应的信息/角色/用途：
hostname
IP
Hadoop用途
HBase用途
Hive
Master.Hadoop
1[……]
Hive和HBase整合
作者: Michael
日期: 2014 年 4 月 4 日
3 条评论 | 3,232 views
HiveException:Not a host:port pair: PBUF
作者: Michael
日期: 2014 年 4 月 1 日
3 条评论 | 3,593 views
HBase和Hive整合后，在Hive shell中执行建表语句时错误信息如下：
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 |
14/03/28 16:41:59 ERROR exec.DDLTask: org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.IllegalArgumentException: Not a host:port pair: PBUF Master.Hadoop��ظ�( at org.apache.hadoop.hive.ql.metadata.Hive.createTable(Hive.java:602) at org.apache.hadoop.hive.ql.exec.DDLTask.createTable(DDLTask.java:3661) at org.apache.hadoop.hive.ql.exec.DDLTask.execute(DDLTask.java:252) at org.apache.hadoop.hive.ql.exec.Task.executeTask(Task.java:151) at org.apache.hadoop.hive.ql.exec.TaskRunner.runSequential(TaskRunner.java:65) at org.apache.hadoop.hive.ql.Driver.launchTask(Driver.java:1414) at org.apache.hadoop.hive.ql.Driver.execute(Driver.java:1192) at org.apache.hadoop.hive.ql.Driver.runInternal(Driver.java:1020) at org.apache.hadoop.hive.ql.Driver.run(Driver.java:888) at org.apache.hadoop.hive.cli.CliDriver.processLocalCmd(CliDriver.java:259) at org.apache.hadoop.hive.cli.CliDriver.processCmd(CliDriver.java:216) at org.apache.hadoop.hive.cli.CliDriver.processLine(CliDriver.java:413) at org.apache.hadoop.hive.cli.CliDriver.executeDriver(CliDriver.java:781) at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:675) at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:614) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25) at java.lang.reflect.Method.invoke(Method.java:597) at org.apache.hadoop.util.RunJar.main(RunJar.java:212) Caused by: java.lang.IllegalArgumentException: Not a host:port pair: PBUF |
一般这样的错误信息是由于：<HIVE_HOME>/lib/hbase-x.y.z*.jar的版本和当前环境中HBase的版本不一致造成的[……]
HBase安装配置之完全分布式模式
作者: Michael
日期: 2014 年 3 月 10 日
没有评论 | 4,944 views
HBase安装配置之伪分布式模式
作者: Michael
日期: 2014 年 3 月 10 日
没有评论 | 2,166 views
HBase安装配置之单机模式
作者: Michael
日期: 2014 年 3 月 9 日
没有评论 | 7,589 views
github更新自己Fork的代码
作者: Michael
日期: 2014 年 3 月 2 日
1 条评论 | 4,548 views
github上有个功能叫fork，可以将别人的工程复制到自己账号下。这个功能很方便，但其有一个缺点是：当源项目更新后，你fork的分支并不会一起更新，需要自己手动去更新。
以github用户名:micmiu ，fork 项目 sql-parser（原始地址https://github.com/[……]
Hive自定义分隔符InputFormat
作者: Michael
日期: 2014 年 2 月 24 日
1 条评论 | 3,990 views
Hive默认创建的表字段分隔符为：\001(ctrl-A)，也可以通过 ROW FORMAT DELIMITED FIELDS TERMINATED BY 指定其他字符，但是该语法只支持单个字符，如果你的分隔符是多个字符，则需要你自定义InputFormat来实现，本文就以简单的示例演示多个字符作为[……]
HBase基于Hadoop2的源码编译
作者: Michael
日期: 2014 年 2 月 20 日
没有评论 | 5,842 views
本文以HBase0.98.0 为例，演示编译生成适用于Hadoop2.x 版本软件包的过程。
基本环境参数：
- Mac OSX 10.9.1
- Maven 3.0.4
- Java 1.6.0_65
- Hadoop 2.2.0
- HBase 0.98.0
源码编译的基本步骤：[……]
Hive教程之metastore的三种模式
作者: Michael
日期: 2014 年 2 月 20 日
没有评论 | 19,323 views
Hive中metastore（元数据存储）的三种方式：
- 内嵌Derby方式
- Local方式
- Remote方式
[一]、内嵌Derby方式
这个是Hive默认的启动模式，一般用于单元测试，这种存储方式有一个缺点：在同一时间只能有一个进程连接使用数据库。
hive-si[……]
Hive教程之DML数据导入导出
作者: Michael
日期: 2014 年 2 月 12 日
没有评论 | 1,283 views
文章基本目录结构：
- 数据导入
- 导入本地文件
- 导入hdfs文件
- 数据导出
- 导出到新表
- 导出到本地文件
- 导出到hdfs文件
本文的测试基于Hadoop 2.2.0 + hive 0.12.0
[一]、数据导入
LOAD的基本语法：[……]
近期评论