Mac下配置Hive环境

Mac下配置Hive环境

在配置Hive环境之前，需要Hadoop环境。

安装Hive

下载结束后，会有一个.tar文件，使用以下命令解压该文件。

tar -zxvf 要解压的tar包

解压完成后如下

修改Hive配置文件

在hive安装目录下的conf中，将所有后缀为.template的文件复制一遍，新文件名称只需要去掉.template即可，如下

cp hive-default.xml.template hive-default.xml

编辑hive-site.xml文件

vim hive-site.xml

修改内容如下

需要在本地mysql新建一个数据库，命名为hive。

　　 hive.metastore.local true javax.jdo.option.ConnectionURL jdbc:MySQL://127.0.0.1:3306/hive?characterEncoding=UTF-8 javax.jdo.option.ConnectionDriverName com.mysql.jdbc.Driver 　　 javax.jdo.option.ConnectionUserName root 　　　　 javax.jdo.option.ConnectionPassword 123qwe hive.exec.scratchdir /tmp/hive hive.exec.local.scratchdir /Users/FengZhen/Desktop/Hadoop/hive/tmp hive.downloaded.resources.dir /Users/FengZhen/Desktop/Hadoop/hive/resources hive.metastore.warehouse.dir /user/hive/warehouse

配置信息如上

其中 hive.metastore.warehouse.dir 是在HDFS上的路径，当Hive在本地文件系统中往表中导入数据的时候，如果建表时不指定location，那么Hive会将该数据文件先拷贝到HDFS的 /user/hive/warehouse 路径下，然后再执行导入操作。每建一个表都会在hive.metastore.warehouse.dir指向的目录下以表名创建一个文件夹，所有属于这个表的数据都存在这个文件夹中。

配置环境变量

vim ~/.bash_profile

在.bash_profile中加入

export HIVE_HOME=/Users/FengZhen/Desktop/Hadoop/hive/apache-hive-1.2.2-binexport PATH=$PATH:$HIVE_HOME/bin

加入完成后使用 source 命令重新执行一下该文件

source ~/.bash_profile

至此，Hive环境配置已经结束，进入安装目录下的bin文件夹内，启动hive

./hive -hiveconf hive.root.logger=DEBUG,console

hive操作语句和mysql差不多

建表（指定列分隔符为逗号）

create table fz(id int,name string,age int,tel string) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE;

导入数据

load data local inpath '/Users/FengZhen/Desktop/Hadoop/hive/testfile/fz.txt' into table fz;

fz.txt中内容如下

1,fz,25,13188888888882,test,20,132222222223,dx,24,183938384983

查询数据

select * from fz;

hive的环境配置结束。

版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。