hive1.1.0的示例分析

云计算

这篇文章将为大家详细讲解有关hive1.1.0的示例分析,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。

MySQL-server-5.1.73-1.glibc23.i386.rpm

MySQL-client-5.1.73-1.glibc23.i386.rpm

1 derby 单连接

/bin 启动hive ,则自动生成库,但只支持一个连接,所以可以在其他文件夹下启动hive,只是这是另一个库

show databases;

create table user(id int, name string);

show tables;

show create table user;

load data local inpath \’/root/user.txt\’ into table user;  –执行后,无法select出来,需指定文件中的分隔符

select count(*) from user;

create table role(id bigint, name string) row format delimited fileds terminated by \’\\\\t\’;

安装mysql

《linux系统安装mysql》

MySQL-server-5.1.73-1.glibc23.i386.rpm

MySQL-client-5.1.73-1.glibc23.i386.rpm

1通过rpm源码安装,下载文件小,但依赖包太多,不建议

2通过二进制安装,下载文件大,但安装快,推荐

mirror:  http://mysql.mirror.kangaroot.net/Downloads/

tar -zxvf mysql-5.1.72

cp mysql-5.1.72 /usr/local/mysql -r

删除derby时使用的文件夹

linux:

hadoop fs -rmr /usr/hive

mv hive-default.xml.template hive-site.xml

managed table

hive:

create table user(id int, name string);

mysql:

TBLS – hive创建的表都在这里面定义

CLOUMNS_V2  – 字义的字段

SDS – 存放在hdfs上的位置

hive:

create table role(id bigint, name string) row format limited fields terminited by \’\\\\t\’;

外部表(先有数据,后建表) 

hive状态下查询hdfs

hive:(在hive中操作hdfs)

dfs -fs /;

dfs -mkdir /data;

dfs -put /root/user.txt /data/user.txt

create external table ext_user(id int, name string) row format delimited fields termited by \’\\\\t\’ location \’/data\’;

不管内部表或外部表,只要放在对应文件夹下,就可以

create table sms(id bigint, content string, area string) partitioned by (area_par string) row format delimited fileds terminated by \’\\\\t\’;

create table trade_detail(id bigint, account string, income double, expense double, time string) row format delimited fields terminated by \’\\\\t\’;

create table user_info(id int, account string, name string, age int) row format delimited fields terminated by \’\\\\t\’;

sqoop从mysql导入到hive

hive下执行trade_detail和user_info的关联查询

UDF

extends UDF

定义evaluate函数

添加jar: add jar *.jar;

创建临时函数:create temporary function toUpper as \’net.oschina.udf.ToUpperUDF\’

关于“hive1.1.0的示例分析”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。

更多关于云服务器域名注册虚拟主机的问题,请访问西部数码官网:www.west.cn

赞(0)
声明:本网站发布的内容(图片、视频和文字)以原创、转载和分享网络内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-62778877-8306;邮箱:fanjiao@west.cn。本站原创内容未经允许不得转载,或转载时需注明出处:西部数码知识库 » hive1.1.0的示例分析

登录

找回密码

注册