分类存档: 海量数据 - 第2页

Hadoop2.x eclipse plugin插件编译安装配置

hadoop2x-eclipse-plugin-01

本文主要讲解如何编译安装配置 Hadoop2.x eclipse plugin插件的详细过程:

  • 环境参数
  • 编译过程
  • 安装配置

[一]、环境参数

  • Eclipse Juno[……]

Read more

maven编译Spark源码

Spark 源码除了用 sbt/sbt assembly 编译,也可用Maven进行编译,具体步骤如下:

1、配置Maven 的参数
[crayon-65f955863b08426616183[……]

Read more

java.net.ConnectException: to 0.0.0.0:10020 failed on connection exception

在DataNode节点中的Hive CLI中执行 select count(*) from table_name 查询时报错:

从[……]

Read more

ERROR tool.ImportTool: Imported Failed: Attempted to generate class with no columns!

Sqoop 把数据从Oracle中迁移到Hive中时发生错误:

这个原因是因为:-username micmiu 用户名这个参数,[……]

Read more

Spark编译安装和运行

本文记录Spark编译安装和演示简单demo的详细过程:

  • 环境说明
  • 编译安装
  • Local模式运行demo

[一]、环境说明

  • Mac OSX 10.9.2
  • Java  [……]

Read more

Sqoop安装配置及演示

Sqoop是一个用来将Hadoop(Hive、HBase)和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如:MySQL ,Oracle ,Postgres等)中的数据导入到Hadoo[……]

Read more

Hive和HBase整合

本文主要描述Hive和HBase 环境整合配置的详细过程:

  • 基本环境
  • 整合配置
  • 测试验证

[一]、基本环境

各设备对应的信息/角色/用途:

hostname[……]

Read more

HiveException:Not a host:port pair: PBUF

HBase和Hive整合后,在Hive shell中执行建表语句时错误信息如下:

一般这样的错误信息是由于:<HIVE_HO[……]

Read more

HBase安装配置之完全分布式模式

HBase安装模式有三种:单机模式、分布式(伪分布式和完全分布式)。本教程介绍了HBase的完全分布式模式安装配置的过程,分布式模式均需要依赖于HDFS。

  • 基础环境
  • 安装配置

[一][……]

Read more

HBase安装配置之伪分布式模式

HBase安装模式有三种:单机模式、分布式(伪分布式和完全分布式)。本教程介绍了HBase的伪分布式模式安装配置的过程,伪分布式模式是把进程运行在一台机器上,但不是同一个JVM(单机模式),分布式模式[……]

Read more

第 2 页,共 4 页1234