hive上传数据 本地数据上传到hive

一、从本地文件系统中导入数据到Hive表
先在Hive里面创建好表，如下：

hive> create table wyp
 > (id int, name string,
 > age int, tel string)
 > ROW FORMAT DELIMITED
 > FIELDS TERMINATED BY ‘\t’
 > STORED AS TEXTFILE;
 OK
 Time taken: 2.832 seconds
 这个表很简单，只有四个字段，具体含义我就不解释了。本地文件系统里面有个 /home/wyp/wyp.txt 文件，内容如下：[wyp@master ~]$ cat wyp.txt
 1 wyp 25 13188888888888
 2 test 30 13888888888888
 3 zs 34 899314121
 wyp.txt文件中的数据列之间是使用 \t 分割的，可以通过下面的语句将这个文件里面的数据导入到wyp表里面，操作如下：hive> load data local inpath ‘wyp.txt’ into table wyp;
 Copying data from file:/home/wyp/wyp.txt
 Copying file: file:/home/wyp/wyp.txt
 Loading data to table default.wyp
 Table default.wyp stats:
 [num_partitions: 0, num_files: 1, num_rows: 0, total_size: 67]
 OK
 Time taken: 5.967 seconds
 这样就将wyp.txt里面的内容导入到wyp表里面去了（关于这里面的执行过程大家可以参见本博客的《Hive表与外部表》），可以到wyp表的数据目录下查看，如下命令：hive> dfs -ls /user/hive/warehouse/wyp ;
 Found 1 items
 -rw-r–r--3 wyp supergroup 67 2014-02-19 18:23 /hive/warehouse/wyp/wyp.txt
 数据的确导入到wyp表里面去了。

和我们熟悉的关系型数据库不一样，Hive现在还不支持在insert语句里面直接给出一组记录的文字形式，也就是说，Hive并不支持INSERT INTO … VALUES形式的语句。

二、HDFS上导入数据到Hive表
从本地文件系统中将数据导入到Hive表的过程中，其实是先将数据临时复制到HDFS的一个目录下（典型的情况是复制到上传用户的HDFS home目录下,比如/home/wyp/），然后再将数据从那个临时目录下移动（注意，这里说的是移动，不是复制！）到对应的Hive表的数据目录里面。既然如此，那么Hive肯定支持将数据直接从HDFS上的一个目录移动到相应Hive表的数据目录下，假设有下面这个文件/home/wyp/add.txt，具体的操作如下：

[wyp@master /home/q/hadoop-2.2.0]$ bin/hadoop fs -cat /home/wyp/add.txt
 5 wyp1 23 131212121212
 6 wyp2 24 134535353535
 7 wyp3 25 132453535353
 8 wyp4 26 154243434355
 上面是需要插入数据的内容，这个文件是存放在HDFS上/home/wyp目录（和一中提到的不同，一中提到的文件是存放在本地文件系统上）里面，我们可以通过下面的命令将这个文件里面的内容导入到Hive表中，具体操作如下：hive> load data inpath ‘/home/wyp/add.txt’ into table wyp;
 Loading data to table default.wyp
 Table default.wyp stats:
 [num_partitions: 0, num_files: 2, num_rows: 0, total_size: 215]
 OK
 Time taken: 0.47 secondshive> select * from wyp;
 OK
 5 wyp1 23 131212121212
 6 wyp2 24 134535353535
 7 wyp3 25 132453535353
 8 wyp4 26 154243434355
 1 wyp 25 13188888888888
 2 test 30 13888888888888
 3 zs 34 899314121
 Time taken: 0.096 seconds, Fetched: 7 row(s)
 从上面的执行结果我们可以看到，数据的确导入到wyp表中了！请注意load data inpath ‘/home/wyp/add.txt’ into table wyp;里面是没有local这个单词的，这个是和一中的区别。