-
编辑 删除
YARN and MapReduce的【内存】优化配置详解
在Hadoop2.0中, YARN负责管理MapReduce中的资源(内存, CPU等)并且将其打包成Container. 这样可以精简MapReduce, 使之专注于其擅长的数据处理任务, 将无需考虑资源调度. 如下图所示?????????????YARN会管理集群中所有机器的可用计算资源. 基于这些资...
-
编辑 删除
YARN的Memory和CPU调优配置详解
YARN作为一个资源调度器，应该考虑到集群里面每一台机子的计算资源，然后根据application申请的资源进行分配Container。Container是YARN里面资源分配的基本单位，具有一定的内存以及CPU资源。内存配置YARN以及MAPREDUCE所有可用的内存资源应该要除去系统运行需要的以及其他的hadoop的一些程序，总共保留的内存...
-
编辑 删除
Linux常用命令补充
1.找命令或者shell脚本[root@hadoop000 ~]# which java/usr/bin/java[root@hadoop000 ~]# locate java2.vi命令行模式：shift +$ 行尾尾行模式: :/内容 n向下 N向上 行号 :set nu 显示行号&...
-
编辑 删除
MySQL常规使用
1.数据库主要部分：tables tableview存储过程 函数索引2.创建一个ruozedb数据库和用户：用户对这个DB有所有权限；create database ruozedb;grant all privileges on ruozedb.* to ruoze@'192.168.137.252' identified by '123456';grant all privileges on ruozedb.* to ruoze@'192...
-
编辑 删除
MySQL部署
https://github.com/Hackeruncle/MySQL/blob/master/MySQL%205.6.23%20Install.txt1.Download [root@ruozehadoop000 ~]# cd /usr/local#选择win7的mysql软件包[root@ruozehadoop000 local]# rz 导入2.Check isnot install[root@ruozehadoop000 local]# ps -ef|grep mysqldroot &nb...
-
编辑 删除
Linux常用命令三
1.权限读 r 4写 w 2执行 x 1无权限 --rw-r--r--drwxr-xr-x第一个字符 -:代表是文件 d:代表是文件夹rwxr-xr-x: 三组 rwx: 第一组 7（4+2+1） 代表root用户对这个文件或文件夹的权限 r-x: 第二组 5 （4+1） 代表root用户组对这个文件或文件...
-
编辑 删除
Linux常用命令二
1.创建文件夹mkdir file0 创建1个文件夹mkdir file1 file2 file3 同时创建多个同级文件夹mddir -p file1/file2/file3 创建级联文件夹 2.创建文件vi Lynn.log 可自行选择创建空或不空的文件touch Lynn0.log 创建空文件echo "" > ruoze.log &...
-
编辑 删除
配置固定IP和外网
1.关闭电脑防火墙和杀毒软件。2.关闭CentOS虚拟机的防火墙service iptables stop3.开启共享网络 3.1 进cmd ， ipconfig查看DNS，VM8 3.2配置VM8网卡 3.3进虚拟机配置网卡 3.4虚拟机中编辑文件ifcfg-eth0配置环境变量...
-
编辑 删除
Linux常用命令一
1.Linux常用命令vi命令 用于编辑文件用CRT / Xshell 软件 连接虚拟机，以方便操作pwd命令 可查看当前目录ls 查看 -l 权限信息 用户和用户组 时间 等价于 ll -a 隐藏文件/文件夹 是以.开头 .xxx alias命令 起别名 可简化命令语句临...
-
编辑 删除
CentOS部署
1.CentOS部署2.CentOS hostname修改 分为永久修改以及临时修改3.配置CentOS虚拟机的固定ip和访问外网
