成都网站建设设计

将想法与焦点和您一起共享

hive基本操作-创新互联

1、创建数据库并赋权
create database if not exists test001;
grant all on database test001 to user hive;

2、模糊搜索表
show tables like '*name*';

3、查看表结构
desc table_name;
desc formatted table_name;

4、查看建表语句
show create table table_name;

5、创建表
create table test001
(card_type    string
,start_data   string
,end_date     string
)
PARTITIONED BY(dt STRING)  --分区
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ','   --分隔符
STORED AS TEXTFILE;

6、删除/清理分区
ALTER TABLE test001 DROP/truncate IF EXISTS PARTITION (dt='2017-01-08');

7、添加列
ALTER TABLE test001 ADD COLUMNS (col_name STRING);

8、修改列
ALTER TABLE test001 CHANGE col1 col2 INT;

9、删除列
ALTER TABLE test001 REPLACE COLUMNS (
card_type     string
,start_data   string
);

10、复制表结构
CREATE TABLE test002 LIKE test001;

11、修改表结构
ALTER TABLE test001 RENAME TO test002;

12、清空数据
truncate table test001;

13、数据插入
insert/overwrite into table test001
select c1,c2 from test002;

load data local inpath 'test001.txt' into/overwrite table test001;

14、数据提取
hive -database bss  -e "set mapred.job.queue.name=datagather;
select * from ts_u_user_all limit 10 " >/data/test/test001.csv
带字段名字的数据导出:
hive -S -e"set hive.cli.print.header=true;
           select * from test001" > test001.csv
hive -database bss -e"select * from ts_u_user_all limit 10"

15、转换文件的分隔符
sed -i 's/\t/,/g' test001.csv

16、函数引入
add jar /home/webusr/UDFAddByMe.jar ;
create temporary function ADD_MONTHS as 'org.apache.hadoop.hive.ql.udf.UDFAddMonths';

17、指定队列
set mapred.job.queue.name=datagather;
set mapred.job.queue.name=thirdpart;

18、工作查杀
进入目录/home/webusr/hadoop-2.4.0.2.1.2.0-402/bin
hadoop job -list
hadoop job -kill job_1436177979246_7826

----------------------
19、查询文件大小
hdfs dfs -du -h /apps/hive/warehouse/dwd.db/dd_par_user_flag_jf_d

20、查看hdfs文件信息
hdfs dfs -ls /apps/hive/warehouse/

21、下载文件到某目录
hdfs dfs -get /user/jrjt/warehouse/ods.db/o_h02_click_log_i_new/dt=2014-01-21/000212_0 /data/test/work/;

成都创新互联坚持“要么做到,要么别承诺”的工作理念,服务领域包括:网站设计、网站建设、企业官网、英文网站、手机端网站、网站推广等服务,满足客户于互联网时代的宿松网站设计、移动媒体设计的需求,帮助企业找到有效的互联网解决方案。努力成为您成熟可靠的网络建设合作伙伴!

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


当前标题:hive基本操作-创新互联
标题路径:http://chengdu.cdxwcx.cn/article/ddpepe.html