linux脚本hadoop数据文件采集
#!/bin/bash ################################ #2013/12/11 #作者 方华龙 #hadoop数据文件采集 ############################### date ROOT=`dirname $0` CONF=./test.conf #可以利用读取配置方法加载多个服数据 #for conf in `cat $CONF` #do # echo $conf #done #是用SCP采集1,WGET采集0 is_scp=0 #scp www@121.9.245.117:/data/resin/aclocal.m4 /data/test1.m4 nowtime=`date %s` startTime=$(($nowtime-36000)) #hadoop保存地址 hadoopPath=/data/ #采集的服务器地址 urlserver=http://service.uwan.com #采集账号地址 IPserve