-
编辑 删除
快速搭建 Hadoop环境
对于Hadoop来说，最主要的是两个方面，一个是分布式文件系统HDFS，另一个是MapReduce计算模型，下面讲解下我在搭建Hadoop 环境过程。Hadoop 测试环境共4台测试机，1台namenode 3台datanode OS版本：RHEL 5.5 X86_64 Hadoop：0.20.203.0 ...
-
编辑 删除
Hbase安装配置（含分布式ZooKeeper）
环境说明系统为CentOS 6.0192.168.255.128 =》 server01192.168.255.130 =》 server02192.168.255.131 =》 server03/etc/hosts文件中有这些IP和域名的映射关系配置server01在hadoop用户下可以通过密钥无需密码访问server02和server031. 安装配置zookeeper在三台服务器上执行...
-
编辑 删除
用jstl截取字符串
jstl以前在jsp页面截取字符串时都是用Java表达式，感觉在jsp页面用多了Java表达式不是很好（那时主要是不知道jstl标签怎么去截取字符串，所以就只能用Java表达式了）。今天在网上找了些相关资料，原来jstl标签是可以截取字符串的，主要有两种方法：一、用jstl原有的标签库中方法（fn函数）...
-
编辑 删除
sqoop一个导入的例了（mysql)
登陆mysql[hadoop@master root]$ mysql -u root -p -h 192.168.168.20create databasemysql> create database hadoopguide;Query OK, 1 row affected (0.06 sec)操作权限mysql> grant all privileges on hadoopguide.* to '%'@'192.168.168.20';Query OK, 0 rows affected (0.17 sec)mysql> grant all privileg...
-
编辑 删除
hadoop搭建与eclipse开发环境设置
1. Windows下eclipse开发环境配置1.1 安装开发hadoop插件 将hadoop安装包hadoop\contrib\eclipse-plugin\hadoop-0.20.2-eclipse-plugin.jar拷贝到eclipse的插件目录plugins下。 需要注意的是插件版本（及后面开发导入的所有jar包...
-
编辑 删除
oracle行列转换，多行转一行，用逗号分割
--行列转换SELECT * FROM it_suremainproblems WHERE mainapplyno='ITWX201409230092'SELECT a.mainapplyno, wm_concat (a.proname) new_resultFROM it_suremainproblems a WHERE mainapplyno='ITWX201409230092'group by a.mainapplyno--end--多行转一行SELECT &nbs...
-
编辑 删除
oracle 批量更新&&批量插入用法
--批量更新declare cursor c1 is SELECT orderid,orderno FROM baoxiao_apply WHERE length(orderid)<=5;beginfor r1 in c1 LOOP UPDATE orderpayment SET baoxiao_orderno=r1.orderNO WHERE --baoxiao_orderno IS NULL AND ...
-
编辑 删除
oracle 外部表用法
--创建数据目录 create or replace directory dat_dir as '/home/oracle/external_tb/data/'; b.创建外部表SQL>create table ex_tb1 --创建外部表 (ename,job,sal,dname) --表列描述，注意未指定数据类型 organization external  ...
-
编辑 删除
oracle flashback找到误删，UPDATE的数据
select * from pc_sentcar as of timestamp to_Date('2014-11-28 08:40:00', 'yyyy-mm-dd hh24:mi:ss') WHERE pc_no='PC201411270010'
-
编辑 删除
Linux下Tomcat的安装配置
一.下载安装对应的jdk,并配置Java环境。官网下载地址：http://www.oracle.com/technetwork/java/javase/downloads/jdk-6u26-download-400750.html下载将jdk加压后放到/usr/local目录下： [root@master ~]#chmod 755 jdk-6u5-linux-x64.bin[root@master ~]# ./jdk-6u5-linux-x64.bin[roo...
-
编辑 删除
Hive UDF开发
Hive进行UDF开发十分简单，此处所说UDF为Temporary的function，所以需要hive版本在0.4.0以上才可以。Hive的UDF开发只需要重构UDF类的evaluate函数即可。例：package com.hrj.hive.udf;import org.apache.hadoop.hive.ql.exec.UDF;public class helloUDF extends UDF ...
-
编辑 删除
mysql 导入CSV数据
MYSQL LOAD DATA INFILE命令可以把csv平面文件中的数据导入到数据库中。linux下：LOAD DATA INFILE '/home/test/dump/ip_location.csv' INTO TABLE ip_location CHARACTER SET utf8 FIELDS TERMINATED BY ',' E...
-
编辑 删除
Hive安装及使用攻略--mysql--总算找到了一篇很全很实用的文章
Hive安装及使用攻略让Hadoop跑在云端系列文章，介绍了如何整合虚拟化和Hadoop，让Hadoop集群跑在VPS虚拟主机上，通过云向用户提供存储和计算的服务。现在硬件越来越便宜，一台非品牌服务器，2颗24核CPU，配48G内存，2T的硬盘，已经降到2万块人民币以下了。这种配置如果简单地放几个web应用，显然是奢侈的浪...
-
编辑 删除
配置Hive，采用mysql存储metadata
1.安装hadoop（1.0以上） 2.安装hive安装（0.9.0以上版本） 4.当然你还得安装jdk 4. mysql，同时准备个可访问的账号，这里采用root，最好配上远程访问权限。 修改hive下的conf文件夹中将 hive-default.xml.template 复制并改名成 hive-site.xml这里是我的文件...
-
编辑 删除
解决Mysql ERROR 1045 (28000): Access denied for user 'root'@'localhost'问题
ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO) Red Hat Enterprise Linux 5服务器上mysql启动报错：ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO)原因1－启动命令错误：我开始的时候直接输入命令：mysql start 正确...
-
编辑 删除
hive应用实例1
我们沿用之前hadoop wordcount的结果数据：[hadoop@icity0 ~]$ hadoop fs -cat /wc/out/part-r-00000Warning: $HADOOP_HOME is deprecated.beautiful 1day 1dear 2hello 2hometown 1honey 2is 2my 2one 1sunny 1this 1today 1world 3现在我们在hive上新建一张wor...
-
编辑 删除
Hadoop编程调用HDFS
Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop, Crunch, Hue等。从2011年开始，中国进入大数据风起云涌的时代，以Hadoop为代表的家族...
-
编辑 删除
oracle 分页存储过程和java代码
oracle 分页存储过程和java代码
-
编辑 删除
ORACLE自动启动方法
ORACLE自动启动方法
-
编辑 删除
javaScript 判断网址来源
javaScript 判断网址来源
