-
编辑 删除
There are 0 datanode(s) running and no node(s) are excluded in this operation
1.在执行bin/hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0-cdh5.7.0.jar pi 5 10报错，Number of Maps = 5Samples per Map = 1017/12/31 15:35:08 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where ap...
-
编辑 删除
Spring注解详解
注释配置相对于 XML 配置具有很多的优势：因此在很多情况下，注释配置比 XML 配置更受欢迎，注释配置有进一步流行的趋势。Spring 2.5 的一大增强就是引入了很多注释类，现在您已经可以使用注释配置完成大部分 XML 配置的功能。在这篇文章里，我们将向您讲述使用注释进行 Bean 定义和依赖注入的内容。原来我们是...
-
编辑 删除
YARN and MapReduce的【内存】优化配置详解
在Hadoop2.0中, YARN负责管理MapReduce中的资源(内存, CPU等)并且将其打包成Container. 这样可以精简MapReduce, 使之专注于其擅长的数据处理任务, 将无需考虑资源调度. 如下图所示?????????????YARN会管理集群中所有机器的可用计算资源. 基于这些资...
-
编辑 删除
YARN的Memory和CPU调优配置详解
YARN作为一个资源调度器，应该考虑到集群里面每一台机子的计算资源，然后根据application申请的资源进行分配Container。Container是YARN里面资源分配的基本单位，具有一定的内存以及CPU资源。内存配置YARN以及MAPREDUCE所有可用的内存资源应该要除去系统运行需要的以及其他的hadoop的一些程序，总共保留的内存...
-
编辑 删除
Hadoop伪分布式安装(MapReduce+Yarn)
MapReduce+Yarn部署Yarn:ResourceManager NodeManager1.Yarn部署[root@hadoop02 hadoop]# cp mapred-site.xml.template mapred-site.xml[root@hadoop02 hadoop]# vi mapred-site.xml
-
编辑 删除
Hadoop伪分布模式(HDFS)
文档地址: http://hadoop.apache.org/docs/r2.8.2/ 部署方式:1.单机模式standalone 1个java进程2.伪分布模式Pseudo-Distributed Mode 开发|学习 多个java进程3.集群模式Cluster Mode ：生产 多台机器多个java进程伪分布式部署: HDFS1.创建hadoop服务的一个用户[root@hadoop02 softw...
-
编辑 删除
修改网卡名,报错：Device not managed by NetworkManager or unavailable
解决方法如下：命令：service NetworkManager stop 为了防止下次启动时，该服务重新启动，解决方法：chkconfig NetworkManager off 再重启网卡，service network restart
-
编辑 删除
MySQL必须flush privileges的两种情况
必须使用flush privileges的两种情况改密码授权超用户
-
编辑 删除
CentOS6.5下Hadoop的编译
1.检查是否有无正在运行的hadoop.ps –ef|grep hadoop find / -name hadoop2在/opt目录下创建sourcecode software 两个文件夹。 3.上传hadoop的tar包到sourcecode.4.解压hadoop-2.8.1-src.tar.gz。tar -xzvf hadoop-2.8.1-src.tar.gz&nbs...
-
编辑 删除
CentOS6.5下MySQL5.6的安装
第一次安装，尝试了多次，终于成功了，记录下安装过程
-
编辑 删除
oracle11gR2+CentOS6.5安装
之前多次安装都不成功，这次终于成功了，记录下安装oracle的过程，方便以后查阅
-
编辑 删除
CentOS环境变量设置
方法一： 在/etc/profile文件中添加变量【对所有用户生效（永久的）】 用VI在文件/etc/profile文件中增加变量，该变量将会对Linux下所有用户有效，并且是“永久的”。 [root@CentOS ~]# vi /etc/profile在文件末尾加上如下两行代码PATH=/usr/local/webserver/php/bin:$PATHexport PATH # /etc/profile# System w...
-
编辑 删除
oracle常用数据字典.视图
用时方便查询
-
编辑 删除
CentOS6.6 克隆导致网卡eth0变成eth1、及修改网卡名
1.为什么eth0会变成eth1?很多Linux distribution使用udev动态管理设备文件，并根据设备的信息对其进行持久化命名。udev会在系统引导的过程中识别网卡，将mac地址和网卡名称对应起来记录在udev的规则脚本中。而对于新的虚拟机，VMware会自动为虚拟机的网卡生成MAC地址，当你克隆或者重装虚拟机软件时，由于你使用的是...
-
编辑 删除
CentOS6.6修改主机名
1.编辑/etc/sysconfig/network[root@localhost ~]# vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=hadoop-012.hostname直接命名[root@localhost ~]#hostnamehadoop-013.编辑/etc/hosts[root@localhost ~]# cat/etc/hosts127.0.0.1 localhost localhos...
-
编辑 删除
VMare+win7+CentOS6.6配置静态IP和可访问外网
1.关闭Windos7防火墙2.关闭CentOS6.6防火墙# serviceiptables stop# chkconfigiptables off3.开启两个服务VMware NAT Service4.无线网卡的网络(或者插网线的网络)上设置网络共享，选择VM85.使用ipconfig -all命令查看DNS、IPv4等信息6.配置VM8的选择 使用配置ip...
-
编辑 删除
SecureCRT+v5.1.3-破解密钥
SCRT注册码，方便查询使用
-
编辑 删除
Linux常用命令
主要是生产运维中常用的命令
-
编辑 删除
Linux 系统下查看硬件信息命令大全
Linux 系统下查看硬件信息命令大全原创 2016-01-25 译者：sonofelice Linux中国 请点击此处输入图片描述 有许多命令可以用来查看 Linux 系统上的硬件信息。有些命令只能够打印出像 CPU 和内存这一特定的硬件组件信息，另外一些命令可以查看多种硬件组件的信息。 这个教程可以...
