Hive UDF开发
Hive进行UDF开发十分简单,此处所说UDF为Temporary的function,所以需要hive版本在0.4.0以上才可以。Hive的UDF开发只需要重构UDF类的evaluate函数即可。例:package com.hrj.hive.udf;import org.apache.hadoop.hive.ql.exec.UDF;public class helloUDF extends UDF ...
Hive安装及使用攻略--mysql--总算找到了一篇很全很实用的文章
Hive安装及使用攻略让Hadoop跑在云端系列文章,介绍了如何整合虚拟化和Hadoop,让Hadoop集群跑在VPS虚拟主机上,通过云向用户提供存储和计算的服务。现在硬件越来越便宜,一台非品牌服务器,2颗24核CPU,配48G内存,2T的硬盘,已经降到2万块人民币以下了。这种配置如果简单地放几个web应用,显然是奢侈的浪...
配置Hive,采用mysql存储metadata
1.安装hadoop(1.0以上) 2.安装hive安装(0.9.0以上版本) 4.当然你还得安装jdk 4. mysql,同时准备个可访问的账号,这里采用root,最好配上远程访问权限。 修改hive下的conf文件夹中将 hive-default.xml.template 复制并改名成 hive-site.xml这里是我的文件...
hive应用实例1
我们沿用之前hadoop wordcount的结果数据:[hadoop@icity0 ~]$ hadoop fs -cat /wc/out/part-r-00000Warning: $HADOOP_HOME is deprecated.beautiful 1day 1dear 2hello 2hometown 1honey 2is 2my 2one 1sunny 1this 1today 1world 3现在我们在hive上新建一张wor...