HDFS的PID整理
前言: Linux中可以通过PID找到对相应的进程号和进程目录,ps -ef|grep pid可以单独kill想要的pid;如果生产上想通过shell脚本直接kill `ps -ef|grep 服务名 ,会把服务下所有多个进程和其他进程kill掉, 已hadoop为例可以读文件里进程号指定kill掉‘; Hodoop的PID默认存储路...
Hadoop之HDFS文件读写流程说明
Hadoop之HDFS文件读写流程说明
Hadoop之HDFS主从架构及说明(一)
HDFD架构设计图及说明
CentOS6.5基于Hadoop用户的Yarn伪分布式部署(a Single Node Cluster)
yran on a single node cluster
Hadoop之JPS命令及真假现象(process information unavailable)
前言:jps(Java Virtual Machine Process Status Tool)是JDK 1.5提供的一个显示当前所有 java 进程 pid 的命令,简单实用,非常适合在 linux/unix 平台上简单察看当前java进程的一些简单情况。 jps 可以查看 hadoop 上 当前运行的java 进程。 jps命令是jdk下bin目录中的一个可执行文件,需要安装比 jdk6u17 更...
CentOS6.5基于Hadoop用户的HDFS伪分布式部署(a Single Node Cluster)
前言: 上一篇博客HDFS伪分布式部署基于管理员root部署成功,但是实际生产中使用Hadoop用户操作及配置? ? ? ? 官网参考:http://hadoop.apache.org/docs/r2.8.4/hadoop-project-dist/hadoop-common/SingleCluster.html1、检查hadoop用户是否存在[...
CentOS6.5基于ROOT用户的HDFS伪分布式部署(a Single Node Cluster)
CentOS6.5实现Hadoop编译及HDFS伪分布式部署Hadoop 2.x 三大组件MapReduce(Others) -- 计算YARN -- 资源和作业调度平台
CentOS6.5实现Hadoop_2.8.1编译
CentOS6.5实现Hadoop编译及HDFS伪分布式部署Hadoop 2.x 三大组件MapReduce(Others) -- 计算YARN -- 资源和作业调度平台HDFS ...
CentOS6.5实现Hadoop_2.8.1编译及HDFS伪分布式部署
CentOS6.5实现Hadoop编译及HDFS伪分布式部署Hadoop 2.x 三大组件MapReduce(Others) -- 计算YARN -- 资源和作业调度平台HDFS ...
转型大数据及操作流程
大数据转型关系型数据库------------> 大数据平台数据库:MySQL/Oracle/SQLSERVER------------>HDFS/HBASE/HIVE/KUDU日志:LOG------------>HDFS/HBASE/HIVE/KUDU工作流程:1、数据同步工具SQOOP1/2 -- http://sqoop.apache.orgFLUME ...
CentOS6.5常用命令学习(三)
-- 文件创建及查看touch xxx.log : 创建文件mkdir test : 创建文件夹mkdir -p test/test1/test2 : 创建文件夹及子文件夹mv :移动文件...
CentOS6.5常用命令学习(二)
-- 家目录 root /root oracle /home/oracle Cd :切换当前目录的home Cd - :切换上一次的目录 Cd ../ :退回到上一层目录 -- 目录查看和 Ls :打印当前目录的文件夹和文件名称 ll -l ==》ll (ali...
CentOS6.5二进制文件安装MySQL5.6.39
CentOS6.5二进制文件安装MySQL5.6.39 准备工作 1.MySQ二进制安装Lmysql-5.6.39-linux-glibc2.12-x86_64.tar.gz 准备( 官网下载 )一、检查是否安装过MySQL并卸载 # 检查是否安装过MySQL [root@c...
CentOS6.5常用命令学习(一)
SecureCRT使用rz命令上传shell脚本,脚本执行报错!!
今天yum install -y lrzsz 用rz上传本机文件,上传shell 脚本后执行脚本报错提示:赋予可执行权限[root@csxf /]# cmhod+x auto_tomcat.sh执行shell脚本[root@csxf /]# ./auto_tomcat.sh -bash: ./auto_tomcat.sh: /bin/bash^M: bad interpreter: No such file or directory报错提示文件夹不存在、、、...
CentOS6.5 tar.gz二进制安装jdk1.7.0_79
新申请华为云机器,二进制文件安装JDK7步骤:1、检查本机是否安装JDK2、卸载已安装JDK 查看已安装JDK 包 [root@csxfjava]# rpm -qa|grep jdk 删除已安装JDK (可以不删除,修改环境变量) [root@csxf ja...
VMware Workstation9 下安装 CentOS6.5( 安装图文教程 )
http://mirrors.usc.edu/pub/linux/distributions/centos/6.5/isos/1、在VMware Workstation 9 主页中选择“Create a New Virtual Machine”,创建新的虚拟机。2、选择“Custom(advanced)“,自定义(高级)配置。3、默认,下一步4、选择“I will install the operating system later.",稍后安装操作...
MySQL-授权用户管理数据库
一、grant 普通 DBA 管理某个 MySQL 数据库的权限。 grant all privileges on dbname to dba@'localhost' 其中,关键字 “privileges” 可以省略。 二、grant 高级 DBA 管理 MySQL 中所有数据库的权限。 grant all on *...
CentOS6.x使用163和epel yum源的选择
一、什么是EPEL?二、CentOS 6.X 安装163 YUM源三、CentOS 6.X 安装使用EPEL YUM源(推荐)四、卸载EPEL源注:操作系统 CentOS 6.X用163的YUM源,因为是国内的YUM源,比较快,但也有很多rpm包没有,所以不推荐。(假如不能连接国外网络,就使用163 yum源;假如能访问国外网络,就使用epel yum源。)...