Hive安装及使用攻略--mysql--总算找到了一篇很全很实用的文章
Hive安装及使用攻略让Hadoop跑在云端系列文章,介绍了如何整合虚拟化和Hadoop,让Hadoop集群跑在VPS虚拟主机上,通过云向用户提供存储和计算的服务。现在硬件越来越便宜,一台非品牌服务器,2颗24核CPU,配48G内存,2T的硬盘,已经降到2万块人民币以下了。这种配置如果简单地放几个web应用,显然是奢侈的浪...
配置Hive,采用mysql存储metadata
1.安装hadoop(1.0以上) 2.安装hive安装(0.9.0以上版本) 4.当然你还得安装jdk 4. mysql,同时准备个可访问的账号,这里采用root,最好配上远程访问权限。 修改hive下的conf文件夹中将 hive-default.xml.template 复制并改名成 hive-site.xml这里是我的文件...
解决Mysql ERROR 1045 (28000): Access denied for user 'root'@'localhost'问题
ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO) Red Hat Enterprise Linux 5服务器上mysql启动报错:ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO)原因1-启动命令错误:我开始的时候直接输入命令:mysql start 正确...
hive应用实例1
我们沿用之前hadoop wordcount的结果数据:[hadoop@icity0 ~]$ hadoop fs -cat /wc/out/part-r-00000Warning: $HADOOP_HOME is deprecated.beautiful 1day 1dear 2hello 2hometown 1honey 2is 2my 2one 1sunny 1this 1today 1world 3现在我们在hive上新建一张wor...
Hadoop编程调用HDFS
Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop, Crunch, Hue等。从2011年开始,中国进入大数据风起云涌的时代,以Hadoop为代表的家族...
oracle 分页存储过程和java代码
oracle 分页存储过程和java代码
ORACLE自动启动方法
ORACLE自动启动方法
javaScript 判断网址来源
javaScript 判断网址来源
用java调用oracle存储过程总结
用java调用oracle存储过程总结
Linux设置共享文件夹samba
Linux设置共享文件夹samba
使用ORACLE在线重定义将普通表改为分区表
在设计的时候是分区表,按全宗号分了77个分区,最近发现对这张表查询速度明显比之前慢了许多,经过分析发现这张表的分区不见啦,变成了普通表,问了看法人员才知道,原来他对这张表做了好多次ALTER TABLE XX RENAME和CREATE TABLE XX AS SELECT *操作,由于CREATE TABLE AS(CTAS)操作只会建立同样的表结构而不会建立...
sqoop与oracle交互
首先把 odbj14.jar copy 到 SQOOP_HOME/lib目录下可以使用sqoop help 查看sqoop命令列出oralce10g mytest用户下的所有表,用户名要大写,小写什么也不显示sqoop ?list-tables --connect "jdbc:oracle:thin:@192.168.168.10:1521:orcl" --username mytest --password mytest使用sqoop 将表DEPT导入到HDFS中...
Oracle Spool经典教程
Oracle Spool经典教程
Sqoop安装及验证
环境:系统Red hat linux 6.4Hadoop版本1.2.1Sqoop版本1.4.4Mysql数据库版本5.6.15...
oracle java sources 用法
java sources 代码create or replace and compile java source named md5util asimport java.security.MessageDigest;public class MD5Util{ public static String encrypt(String s) { char hexDigits[] = {'0', '1', '2', '3', '4', '5', '6', '7', '8', '9', 'A', 'B', '...
pl/sql 发送邮件存储过程
CREATE OR REPLACE PROCEDURE send_mail( p_recipient VARCHAR2, -- 邮件接收人 p_subject VARCHAR2, -- 邮件标题 p_message VARCHAR2 -- 邮件正文 ) IS /** @function:发...
win下使用maven+eclipse构建HAOOP环境,运行控制台报"文件权限"错,解决办法
win下使用maven+eclipse构建 虚拟机 HAOOP环境 运行控制台报"文件权限"错 2014-9-30 14:25:02 org.apache.hadoop.util.NativeCodeLoader 警告: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable2013-9-30 19:25:02 org.apache.hadoop.security.UserGroupInforma...
使用maven+eclipse构建HAOOP环境,HBASE JAVA API操作部分
使用maven+eclipse构建HAOOP环境,HBASE JAVA API操作部分代码import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.HColumnDescriptor;import org.apache.hadoop.hbase.HTableDescriptor;import org.apach...
快速搭建 Hadoop 环境
对于Hadoop来说,最主要的是两个方面,一个是分布式文件系统HDFS,另一个是MapReduce计算模型,下面讲解下我在搭建Hadoop 环境过程。Hadoop 测试环境共4台测试机,1台namenode 3台datanode OS版本:RHEL 5.5 X86_64 ...
Hbase java api
Hbase采用Java实现,原生客户端也是Java实现,其他语言需要通过thritf接口服务间接访问Hbase的数据。Hbase作为大数据存储数据库,其写能力非常强,加上Hbase本身就脱胎于Hadoop故和Hadoop的兼容性极好,非常适合于存储半规则数据(灵活、可扩展性强、大数据存储)。基于Hadoop的mapreduce + Hbase存储,非常适合处理大...