执行Hive时出现org.apache.hadoop.util.RunJar.main(RunJar.java:136) Caused by: java.lang.NumberFormatException: For input string: "1s"错误的解决办法(图文详解) hive常见问题解决干货大全

           不多说,直接上干货      问题详情 [kfk@bigdata-pro01 apache-hive-0.13.1-bin]$ bin/hive Logging initialized using configuration in file:/opt/modules/apache-hive-1.0.0-bin/conf/hive-log4j.properties Exc......

阅读全文

hive并发调用的运行方式-个人经验篇

 前言 使用hive,我们很多情况下会并发调用hive程序,将sql任务转换成mapreuce提交到hadoop集群中,而在本人使用hive的过程中,发现并发调用hive有几个问题,在这个和大家分享下. 正文 默认安装hive,hive是使用derby内存数据库保存hive的元数据,这样是不可以并发调用hive的,需要配置为使用mysql保存hive的元数据。   运行hive,可以有以下访问方式:......

阅读全文

hive1.1.0安装

 0. 说明 已经安装好Hadoop-1.2.1。 安装好mysql。 1.解压安装包 先把安装包下载。然后解压: tar -zxvf apache-hive-1.1.0-bin.tar.gz 2.配置环境变量 vim /etc/profile 导入下面的环境变量 export HIVE_HOME=hive安装目录 export PATH=$PATH:$HIVE_HOME/bin:$HIVE_HO......

阅读全文

hive安装以及hive on spark spark-2.0.0与hive-1.2.1整合

       spark由于一些链式的操作,spark 2.1目前只支持hive1.2.1 hive 1.2安装 到http://mirror.bit.edu.cn/apache/hive/hive-1.2.1/ 网址下载hive1.2.1的部署包      2.配置系统环境变量/etc/profile export HIVE_HOME=/opt/hive-1.2.1 export PATH=$P......

阅读全文

在Hadoop伪分布式模式下安装Hive(derby,mysql)

 我的Hadoop版本是1.2.0,mysql版本是5.6.12. 先介绍一下嵌入式derby模式: 1.下载/解压      在hive官网上选择要下载的版本,我选择的版本是hive-0.10.0. 下载好解压到:/usr/local/hadoop,因为我的hadoop安装在了这个文件下 leefon@ubuntu:~/Download$ sudo tar xzf hive-0.10.0.tar.......

阅读全文

Hadoop——你不得不了解的大数据工具

 如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如Oozie,ZooKeeper、Flume)。 Hadoop带来了廉价的处理大数据(大数据的数据容量通常是10-100GB或更多,同时数据种类多种多样,包括结构化、非结构化等)的能力。但这与之前有什么不同? 现今企业数据仓库和关系型数据库擅长处理结构化......

阅读全文

hive权威安装出现的不解错误!(完美解决)两种方法都可以 单节点伪分布集群(weekend110)的Hive子项目启动顺序 1 复习ha相关 + weekend110的hive的元数据库mysql方式安装配置

    以下两种方法都可以,推荐用方法一!     如果有误,请见博客 MySQL用户权限(Host,User,Password)管理(mysql.user)   可以自己去增加和删除用户。别怕,zhouls!     方法一:   步骤一: yum -y install mysql-server   步骤二:service mysqld start   步骤三:mysql -u root -p  ......

阅读全文

hive启动时报错 java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D at org.apache.hadoop.fs.Path.initialize

   错误提示信息如下 错误信息如下 [root@node1 bin]# ./hive Logging initialized using configuration in jar:file:/home/hive/apache-hive-1.2.2-bin/lib/hive-common-1.2.2.jar!/hive-log4j.properties Exception in thread "......

阅读全文
1 2 3 4 下一页 尾页