ITPub博客

关于 “Hadoop” 的内容如下：

• 原：ubuntu 配置IP地址及修改——Hadoop安装ssh过程中出现的问题解决

      在Vmware上安装Ubuntu12.04系统，而后希望在该系统上安装Hadoop平台，结果在配置ssh免密码连入时出现主从节点ping不通。为什么呢？     因为在vm网络连接设置中，我选择的是NET连接，经过同学的指点，选择用桥接的方式，成功ping通。嘻嘻     具体如下：     1.在vm设置中选择网络连接   选择桥接方式（第一个）  此时可以实现虚拟机和主机的成功ping通 可以       实现两台电脑（master机和node机的ping通）       在此基础，我想修改虚拟机的

  lg081220 Hadoop 761 2013-12-25 09:09

• 在伪分布模式下运行wordcount

  这篇文章的前提是你先安装了VM虚拟机，安装ubuntu，并在Ubuntu上搭建好了Hadoop伪分布环境。 1.网上搜索WordCount.java程序 我这里用的是xceman1997的代码 package hadoopWordCount;      import java.io.IOException;   import java.util.*;      import org.apache.hadoop.fs.Path;   import org.apache.hadoop.conf.*;   import org.apache.hadoop.io.*;   import org.apache.hadoop.mapreduce.*; &n

  graritti Hadoop 780 2013-12-24 17:36

• apache oozie安装中的注意事项

      最近因为工作需要，调研了下Apache oozie 的使用，虽然已经是挑选了网路上面文档较多的Hadoop工作流引擎oozie，但是还是遇到了一些网路上文章里面没有提及的问题。     首先，安装oozie可以不用配那么多工具，如果你是试用的话就更是如此，因为它里面有自带的Hadoop包和server压缩包，可是它的web console需要的ext js包却没有，这有点扯，我觉得，而且就是在这上面我走了些弯路。因为最开始参考的安装文档没有说明必须要用extjs2.2，所以我就去官网上拖了最新版本的，结果首先是oozie的setup.sh中所有的shel

  tangjialei8278 Hadoop 154 2013-12-24 17:03

• DirectAdmin添加Mod_cache优化Apache性能

  DirectAdmin是一款国外主机常用的商业主机管理面板，简单易用，功能全面，它默认采用Apache处理引擎，但默认的引擎未带Mod_cache。Mod_cache可以缓存常见的静态文件，如：css、js等，提升网页加载速度。既然能加快访问速度，那咱还等啥？必须得上！下面，记录和分享给DirectAdmin添加Mod_cache的过程。给DirectAdmin添加Mod_cache共分为2个步骤：编译和配置。首先，我们来看编译的过程，我们用代码和解说来记录这个过程。cd /usr/local/directadmin/custombuild/configure/ap2#进入Apache2目录(我的DA安装的apache2.2，最新版

  wcm213 Hadoop 254 2013-12-24 13:55

• hadoop学习之hadoop完全分布式集群安装

  http://blog.csdn.net/ab198604/article/details/8250461

  haohanwubian Hadoop 97 2013-12-24 09:57

• Ubuntu上搭建Hadoop环境（单机模式+伪分布模式）

  Ubuntu上搭建Hadoop环境（单机模式+伪分布模式）：http://blog.csdn.net/zhaoyl03/article/details/8657104

  qiaoqing1984 Hadoop 63 2013-12-24 09:15

• hadoop的分布式安装过程

  1.hadoop的分布式安装过程 1.1 分布结构主节点(1个,是hadoop0):NameNode、JobTracker、SecondaryNameNode 从节点(2个,是hadoop1、hadoop2):DataNode、TaskTracker 1.2 各节点重新产生ssh加密文件 1.3 编辑各个节点的/etc/hosts，在该文件中含有所有节点的ip与hostname的映射信息 1.4 两两节点之间的SSH免密码登陆 ssh-copy-id -i  hadoop1 scp /root/.ssh/authorized_keys   hadoop1:/root/.ssh/  1.5 把hadoop0的hadoop目录下的logs和tmp删除 1.6 把hadoop0中的jdk、hadoop文件夹复制到hadoop1和hadoop2节点 scp &nbs

  qing20012002 Hadoop 160 2013-12-23 19:20

• Windows 8.1：[1]安装系统

  注意事项 同一个安装文件，会因为电脑的环境各异而影响到安装过程是否正常，需要根据具体的出错提示来判断问题所在。 尽量用Windows 8.1专业版安装，而不要使用Windows8预览版等版本，它们安装之初就会要密钥。

  佟佩德 Hadoop 108 2013-12-23 08:53

• 基于Eclipse的Go语言可视化开发环境

  搭建与使用一个基于Eclipse的Go语言可视化开发环境。注意：在阅读此片经验前，先确保必要工具已经安装或打开 工具/原料 搭建好Go语言开发环境，详细步骤见经验：http://jingyan.baidu.com/article/c85b7a6414e5ee003bac95c6.html Eclipse开发平台官方下载地址：http://www.eclipse.org/downloads/packages/eclipse-ide-java-developers/junosr2当然，如果你所使用的计算机的网速较慢，你也可以选择我已经下载好了的Goclipse（即：无需看步骤2～4了）百度网盘地址：http://pan.baidu

  lyde123 Hadoop 2169 2013-12-22 18:24

• excel使用方法——怎样处理很长的数据

  excel是我们日常工作中必不可少的办公软件之一，其自身有很多丰富的功能帮我们完成任务。大家可能平时会有excel去记录数据信息或者类数据信息，比如身份证号这种18位或者15位的纯数字的数据。这时候简单的放到excel中你就会看到一个诡异的现象，数据转换成了科学计数法表示的形式。 工具/原料 windows excel 方法/步骤 1 首先看一个例子，我在excel的单元输入一个18位的身份证号码，见图一，当我的光标离开单元格后的结果见图二。我输入的12345678

  老方块 Hadoop 598 2013-12-22 13:42

• 软文下载利器wget命令中文说明

  wget不仅可运行在Linux下，也可运行在Windows下哦 wget的使用及参数写法，可通过帮助查看，方法：wget --helpwget命令参数中文对照：wget [参数列表] [目标软件、网页的网址]-V     显示软件版本号然后退出；-h    显示软件帮助信息；-e    执行一个 “.wgetrc”命令-o     将软件输出信息保存到文件；-a    将软件输出信息追加到文件；-d    显示输出信息；-q     不显

  superfengxin007 Hadoop 122 2013-12-22 11:02

• 北大数据分析老鸟写给学弟们一封信

  以下是我在近三年做各类计量和统计分析过程中感受最深的东西，或能对大家有所帮助。当然，它不是ABC的教程，也不是细致的数据分析方法介绍，它只 是“总结”和“体会”。由于我所学所做均甚杂，我也不是学统计、数学出身的，故本文没有主线，只有碎片，且文中内容仅为个人观点，许多论断没有数学证明， 望统计、计量大牛轻拍。 关于软件 于我个人而言，所用的数据分析软件包括 EXCEL、SPSS、STATA、EVIEWS。在分析前期可以使用EXCEL进行数据清洗、数据结构调 整、复杂的新变量计算（包括逻辑计算）；在后期呈现美观的图表时，它的制

  jobherk Hadoop 231 2013-12-22 10:44

• Eclipse怎样修改java虚拟机内存

  在进行java开发过程中，偶尔会碰到这个异常：Exception in thread "main" java.lang.OutOfMemoryError: Java heap space    at java.lang.AbstractStringBuilder.<init>(AbstractStringBuilder.java:45)    at java.lang.StringBuilder.<init>(StringBuilder.java:92)    at TestMap.main(TestMap.java:13)这个其实就是对内存溢出异常。那我们要怎么解决这个问题呢？ 工具/原料 Java windows eclipse

  达拿都斯 Hadoop 857 2013-12-22 00:03

• 微信5.1版本新功能介绍

  微信5.1版本内测版已经出来了，需要内测资格的朋友可以去下载应用宝体验一下新功能，此经验是写给那些懒得下载应用宝但要了解新功能的朋友的，希望对你们有所帮助。iphone版和安卓版的差别貌似iphone版没有打飞机了。 功能介绍 1 群聊可以容纳100个人。之前是40人的，创建者可以升级为100人，不过最多只能是建2个100人群。 2 打飞机花6元可以复活3次。这个估计是最那些发烧友设置的，因为好不容易打了那么高的分数，不能继续实在是可惜。不过很

  xy329 Hadoop 397 2013-12-21 23:55

• 云平台更换绑定QQ的办法

  云平台更换绑定QQ的办法 工具/原料 电脑一个 人脑一个 方法/步骤 1 如果你的站点是一个新站或者是一个新开通云平台的站点，服务器没有QQ用户注册、登录等云平台数据，你可以自助方式更换站点绑定的QQ  2 如果你站点有用户已在使用云平台，并且没开通“漫游应用”和“Discuz!联盟”服务，可以按照这个帖子下载表格，按流程提交官方修改，地址：http://www.discuz.net/thread-2639194-1-1.html （表格和开通过漫游站

  huangjunaa Hadoop 73 2013-12-21 23:50

• ＱＱ怎么升级到２０１３最新版本

  　　　　ＱＱ怎么升级到２０１３最新版本，下面小编和大家分享的是ＱＱ怎么升级到２０１３最新版本。 ＱＱ怎么升级到２０１３最新版本 1 首先登陆你的ＱＱ账户。 2 登陆完成后，在ＱＱ的主面板点击左下角的《企鹅》图标，再点击《软件升级》。 3 然后你就可以等待ＱＱ系统自动检测最新的ＱＱ版本然后点击《更新到最新版》。 4 这时ＱＱ会自动的下载更新最新版的ＱＱ，在下载完成后点击《立即重启》，也就是

  dxhsnb Hadoop 385 2013-12-21 23:31

• 文档格式转换软件Print2Flash使用教程：超链接

  Print2Flash文档中也包含了类似于Web页面中的超链接。点击超链接，用户可以打开超链接所指向的位置。转换后的Print2Flash文档中的超链接由一个悬停在转换文档中的特殊鼠标光标标识。只有在Drag模式下才可以点击超链接。目前支持超链接的方法有以下两种：直接从源文件中提取超链接该方法从源文件中检索超链接并在输出的Flash文件中创建相应的超链接。目前，该方法支持以下文件类型：Microsoft WordMicrosoft PowerPointPDF如果你不想在输出的Flash文件中包含源文档中的链接，你可以使用文件选项窗口的超链接选项卡中相应的复选

  cafc1618 Hadoop 629 2013-12-21 14:39

• Thinkphp3.1.3源码分析（7）模版公共资源放哪

  我们之前做项目都是默认习惯把该分组的资源（css,js,iamges）都放在该分组下面的Tpl下面，使用系统（Thinkphp）自带的..Public或者__TMPL__来替换模版中地址。但是现在手册上却说不建议使用这两个“常量”（不是常量）来做模版替换了。为什么呢？这个问题我问了几个朋友，自己也看了代码没发现有什么漏洞，最后在官方社区问了，给了我很好的解释，这里分享下。 方法/步骤 1 查看路径的定义，没有看出有什么漏洞的样子。那是为什么呢？ 2 官方社

  阿拉伯人A Hadoop 272 2013-12-21 12:28

• Thinkphp3.1.3源码分析（6）去掉自动创建目录

  自从我把项目根目录作为app目录之后，系统每次运行都会自动生成Lib和Tpl目录。而这个并非我所需要的，得删掉。注意我下面的操作都是在框架搭建完毕之后的修改，而不是项目框架搭建之前的操作。 方法/步骤 1 在ThinkPHPCommon untime.php里面defined('LIB_PATH')     or define('LIB_PATH',       APP_PATH.'Lib/'); 即指向的是项目根目录下面的Lib目录。 2 在ThinkPHPCommon untime.php里面定义了函数

  liangliang78951 Hadoop 463 2013-12-21 10:48

• Thinkphp3.1.3源码分析（5）模版“常量”配置

  在配置文件中设置模版替换参数的时候，会出现常量没有被解析的情况。比如GROUP_NAME就不能在Conf/config.php里使用，因为在调用config.php的时候，还没有定义GROUP_NAMEThinkPHPLibCoreThink.class.php里面的buildApp方法中先读取配置文件然后才引入的Dispatcher.class.php（URL调度类）。所以会出现不解析的情况。 方法/步骤 1 ThinkPHPLibCoreThink.class.php里面的buildApp方法中先读取配置文件然后才引入的Dispatcher.class.php（URL调度类）如图 2 Dis

  yjxue79 Hadoop 679 2013-12-20 16:14