您好,欢迎访问一九零五行业门户网

hive的安装(包括mysql)

1.hive 简介 1.1 在 hadoop 生态圈中属于数据仓库的角色。他能够管理 hadoop 中的数据,同时可以查询 hadoop 中的数据。 本质上讲, hive 是一个 sql 解析引擎。 hive 可以把 sql 查询转换为 mapreduce 中的 job 来运行。 hive 有一套映射工具,可以把 sql
1.hive简介
1.1在hadoop生态圈中属于数据仓库的角色。他能够管理hadoop中的数据,同时可以查询hadoop中的数据。
  本质上讲,hive是一个sql解析引擎。hive可以把sql查询转换为mapreduce中的job来运行。
  hive有一套映射工具,可以把sql转换为mapreduce中的job,可以把sql中的表、字段转换为hdfs中的文件(夹)以及文件中的列。
  这套映射工具称之为metastore,一般存放在derby、mysql中。
1.2 hive在hdfs中的默认位置是/user/hive/warehouse,是由配置文件hive-conf.xml中属性hive.metastore.warehouse.dir决定的。
2.hive的安装
  (1)解压缩、重命名、设置环境变量
  (2)在目录$hive_home/conf/下,执行命令mv hive-default.xml.template  hive-site.xml重命名
     在目录$hive_home/conf/下,执行命令mv hive-env.sh.template  hive-env.sh重命名
  (3)修改hadoop的配置文件hadoop-env.sh,修改内容如下:
     export hadoop_classpath=.:$classpath:$hadoop_classpath:$hadoop_home/bin
  (4)在目录$hive_home/bin下面,修改文件hive-config.sh,增加以下内容:
     export java_home=/usr/local/jdk
     export hive_home=/usr/local/hive
     export hadoop_home=/usr/local/hadoop
3.安装mysql(server端和client端)
  (1)删除linux上已经安装的mysql相关库信息。rpm  -e  xxxxxxx   --nodeps     执行命令rpm -qa |grep mysql 检查是否删除干净
  (2)执行命令 rpm -i   mysql-server-********  安装mysql服务端  
  (3)启动mysql 服务端,执行命令  mysqld_safe &
  (4)执行命令 rpm -i   mysql-client-********  安装mysql客户端
  (5)执行命令mysql_secure_installation设置root用户密码
  (6)默认情况下,mysql是不允许hive连接的,要在mysql的客户端授权,命令是:grant all on hive.* to ‘root’@’%’ identified by ‘你的密码’; ,再刷新下,命令:flush privileges;
4. 使用mysql作为hive的metastore
  (1)把mysql的jdbc驱动放置到hive的lib目录下(因为hive要连接mysql)
  (2)修改hive-site.xml文件,修改内容如下:
javax.jdo.option.connectionurl
//在mysql中对应的数据库的名称
jdbc:mysql://hadoop0:3306/hive?createdatabaseifnotexist=true
javax.jdo.option.connectiondrivername
com.mysql.jdbc.driver
javax.jdo.option.connectionusername
root
javax.jdo.option.connectionpassword
admin
其它类似信息

推荐信息