ITPub博客

首页 > 大数据 > Hadoop

关于 “Hadoop” 的内容如下:

  • 8步教你在电脑上安装试用Android 2.2 SDK

    Android 2.2是去年5月Google正式发布的操作系统,代号是“froyo 冻酸奶”。相对于其他版本来说2.2版本修正了很多之前android系统的不足。因此使用比较广泛。本文将会教你如何在电脑上安装android 2.2 SDK(开发者工具包)。 工具/原料 Android SDK(Windows系统或Mac系统的);一台配置足够强大的电脑(上网本只能模拟一台智能手机) 步骤/方法 1 解压Android SDK。你应该看到一堆文件夹和文件,包括Platforms,Add-ons和Tools。 解压Android SDK

    AAA2319280 Hadoop 176 2011-08-28 12:49
  • 用Hadoop 进行分布式并行编程

    Hadoop 是一个实现了 MapReduce 计算模型的开源分布式并行编程框架,借助于 Hadoop, 程序员可以轻松地编写分布式并行程序,将其运行于计算机集群上,完成海量数据的计算。本文将介绍 MapReduce 计算模型,分布式并行计算等基本概念,以及Hadoop 的安装部署和基本运行方法。 Hadoop简介 Hadoop 是一个开源的可运行于大规模集群上的分布式并行编程框架,由于分布式存储对于分布式编程来说是必不可少的,这个框架中还包含了一个分布式文件系统 HDFS( Hadoop Distributed File System )。也许到目前为止,Hadoop 还不是那么广为人知,其最

    zaf797979 Hadoop 137 2011-08-27 16:17
  • 教你用废旧的书刊包书

    新的学期马上开学了,有很多新生花很多钱买书皮来爱护自己的新书,我现在就教大家用废旧的书刊包你们心爱的新书,这样既环保又节俭,最主要是自己动手包的书会更加爱惜! 工具/原料 一张书刊纸 一本书 步骤/方法 1 先准备好我们的原材料,一本书和一张纸,如图 2 把书放在纸张对折的中间,如下图 3 然后我们把纸张的两个对折角按照书的长度把多余的角剪掉,如图所示

    叶阿鸠 Hadoop 266 2011-08-24 15:53
  • 在Excel2007中设置百分比数字格式

    百分比数字格式在日常的数据处理工作中十分常用,用户可以将小数或分数格式的数值设置为百分比数字格式,使数据处理结果更实用。在Excel2007中设置百分比数字格式的步骤如下所述: 工具/原料 Excel2007 步骤/方法 1 第1步,打开Excel2007工作表窗口,选中需要设置百分比数字格式的单元格。右键单击选中的单元格,在打开的快捷菜单中选择“设置单元格格式”命令,如图2009060203所示。图2009060203 选择“设置单元格格式”命令 2 第2步

    日语学习者 Hadoop 190 2011-08-21 15:06
  • 将TXT文本文件中的数据分列导入Excel表格中

    如果需要将TXT文本文件中的大量数据导入到Excel表格中,并且要求每行数据中特定个数的数值占据1列,则可以使用Excel提供的固定列宽文本导入功能实现,如图2010080701所示。图2010080701 TXT文本文件以Excel2010为例,操作步骤如下所述: 步骤/方法 1 第1步,打开Excel2010窗口,依次单击“文件”→“打开”按钮,如图2010080702所示。图2010080702 单击“打开”命令 2 第2步,在打开的“打开”对话框中,单击文件类型下拉三角按钮,在打开的文件

    saluzi1 Hadoop 278 2011-08-19 20:34
  • Matlab 并行计算工具箱简介

    Matlab 并行计算工具箱   (一)Matlab分布式和并行编程 Distributed and Parallel Programming 11/29/2008 10:31:15 AM Today's engineers and scientists, faced with the demand to model increasingly complex systems in less time, are pursuing distributed and parallel solutions in high-performance computing (HPC) distributed environments made out of commercial off-the-shelf (COTS) multiprocessor, multicore computers. 工程师和科学家们面临着用更少的时间建立复杂系统模型的需求,他们使用分布式和

    jiang9101 Hadoop 497 2011-08-18 10:53
  • hadoop基础知识及hadoop集群搭建

        公司的日志模块采用了facebook的scribe,将收集到的结果直接push到hadoop上,日志的相关统计工作均是通过map-reduce作业来完成。之前并非计算机专业,也对hadoop,mapreduce等不了解,工作要用。莫有办法,自学吧,特此留下一点自己的学习笔记。   一、hadoop介绍     常常提到hadoop,那么什么是hadoop? 我们常常提到的hadoop,可以理解为一个平台,提供分布式存储(hdfs),分布式计算(map-reduce计算框架)。apache上,对“what is hadoop?”的回答如下(http://hadoop.apache.org/):

    look321 Hadoop 160 2011-08-14 19:45
  • 怎样在cpanel面板上添加数据库的方法

    cPanel是世界上功能最强大,最容易使用,因而最受用户欢迎的虚拟主机控制系统。本经验给大家介绍怎样添加数据库。 工具/原料 域名 支持cpanel面板的主机 步骤/方法 1 首先登录域名/cpanel 进入后台,找到“数据库”区域,点击“MySQL数据库”图标进入数据库操作页面,如下图所示: 2 进入数据库操作页面后,按照以下步骤进行添加数据库,具体步骤如下:新建数据库在输入框中输入打算使用的数据库的名字,比如cvb,然后点击后台的

    esdsdf Hadoop 225 2011-08-14 11:58
  • 云时代的企业应用数据挖掘

    随着云时代的到来和SaaS概念的引入,越来越多的企业开始选择由SaaS应用提供商、运营商等通过互联网平台提供SaaS应用服务,SaaS应用的数据量面临着TB级的增长速度;不同的SaaS应用体系,提供的数据结构也不完全相同,数据有文本、图形甚至小型数据库;SaaS应用数据随着云服务平台的分布性特点,有可能分布在不同的服务器上,如何对这些异构异源的数据进行数据挖掘,是云时代的企业面临的难题。   图1 企业面临着在不同数据源上进行数据挖掘的挑战 如何从海量应用挖掘出合理的数据 对于企业而言,如何将各种SaaS应用数

    88888XX Hadoop 169 2011-08-11 11:09
  • Hadoop源码分析——TaskAttemptContext类和TaskAttemptID类

    上次我们分析了TaskInputOutputContext,它主要是用于获取key,value的值和输出<key, value>对。今天我们来看看TaskInputOutputContext的父类——TaskAttemptContext。   先来看看TaskAttemptContext的类图:   Figure1:TaskAttemptContext类图     我们知道,用户向Hadoop提交Job(作业),Job在JobTracker对象的控制下执行。Job不是独立完成的,Job提交后,Hadoop根据集群的规模将Job分解为若干个Task(任务),然后分发到集群中,在TaskTracker的控制下运行。Task包括Map Task和Reduce

    wcwlwj Hadoop 385 2011-08-10 19:10
  • Hadoop源码分析——TaskInputOutputContext类

    我们在《Hadoop——MapReduce过程》对MapReduce的过程进行了简略地介绍,就其中几个比较重要的类也做了一些简单地分析。我们知道,在MapReduce过程中,每一个Job都会被分成若干个task,然后再进行处理。那么Hadoop是怎么将Job分成若干个task,并对其进行跟踪处理的呢?今天我们来看一个*Context类——TaskInputOutputContext。  先来看看TaskInputOutputContext的类图: Figure1:TaskInputOutputContext类图   从类图中可以看到,TaskInputOutputContext有3个成员变量和10个成员函数。成员变量中有一个OutputCommit

    13467111710 Hadoop 207 2011-08-07 22:40
  • 怎样查看计算机是32位还是64位操作系统

    术语“32 位”和“64 位”是指计算机的处理器(也称为“CPU”)处理信息的方式。64 位版本的 Windows 可处理大量的随机存取内存 (RAM),其效率远远高于 32 位的系统。 操作平台 1 Windows 7 2 Windows xp END Windows 7 1 首先单击左下方的“开始”按钮,然后依次展开“控制面板—系统” 2 这时出现了“查看有关计算机的基本信息”窗口,我们将滚动条拉到最下面,有一项“系统类型”,如果你的系统是32位这里就会显示32

    qingw_meng Hadoop 288 2011-08-02 01:27
  • Cloudera供给的Hadoop视频教程

    Hadoop是依据Google的MapReduce并行编程措施用Java编写的开源系统,能够安排在大规模的计算平台上,从而长进计算效率。然而安排Hadoop本身的设置很混杂,因而,Cloudera公司供给一个安装设置更为方便的Hadoop版本,并且在供给了若干视频教程。 各个教程如下 Thinking at Scale(20min) slides Cloudera Hadoop Training: Thinking at Scale from Cloudera on Vimeo. MapReduce & HDFS(50min) slides Cloudera Hadoop Training: MapReduce and HDFS from Cloudera on Vimeo. Hadoop Ecosystem Tour(20min) slides C

    willsias Hadoop 741 2011-07-30 00:31
  • hadoop伪分布式安装

    在测试机上按照伪分布式方式安装了hadoop,记录下操作步骤,方便日后查找   1、下载并安装 /usr/java/jdk1.6.0_26/ 2、下载并安装  openssh-5.5p1.tar.gz 安装至 /usr/local/hdpssh/etc/sshd_conf 3、下载hadoop-0.20.203.0rc1.tar.gz 并解压至 /data3/hadoop-0.20.203.0 软件安装完毕后,进行配置 第一步:SSH配置 下载并安装  openssh-5.5p1.tar.gz 安装至 /usr/local/hdpssh 修改openssh的配置文件/usr/local/hdpssh/etc/sshd_config: Port 30433          &n

    hpls Hadoop 239 2011-07-29 18:56
  • 软件工程专业就业前景分析

    软件工程一直以来都缺乏一个统一的定义,很多学者、组织机构都分别给出了自己的定义: Boehm:运用现代科学技术知识来设计并构造计算机程序及为开发、运行和维护这些程序所必需的相关文件资料。 IEEE在软件工程术语汇编中的定义:软件工程是:1.将系统化的、严格约束的、可量化的方法应用于软件的开发、运行和维护,即将工程化应用于软件;2.在1中所述方法的研究 Fritz Bauer在NATO会议上给出的定义:建立并使用完善的工程化原则,以较经济的手段获得能在实际机器上有效运行的可靠软件的一系列方法。 目前比较认可的一种定义

    wenqqdream Hadoop 72 2011-07-29 11:58
  • 看懂开发商“偷面积”五大花样分析

      因此,记者特意搜罗了现在市场上林林总总的“偷面积”花样,分析其利弊,读者在选择该类户型的时候,可以心中有数。 步骤/方法   因此,记者特意搜罗了现在市场上林林总总的“偷面积”花样,分析其利弊,读者在选择该类户型的时候,可以心中有数。  第一类:入户花园  这应该是目前最常见的偷面积的办法了。由于入户花园和阳台只计一半建筑面积,业主可通过自行装修的方式,将阳台改为书房使用。此方法一般只在大户型单元,且自然资源景观较好的楼盘中使用。  缺点:作为购房

    fsj269 Hadoop 127 2011-07-24 10:36
  • 怎样在安全模式下杀毒

    相信有一部份的用户对Windows操作系统安全模式的应用还比较模糊,下面的我们就给大家讲讲Windows安全模式的应用技巧。 基础知识 工具/原料 杀毒 步骤/方法 1 相信有一部份的用户对Windows操作系统安全模式的应用还比较模糊,下面的我们就给大家讲讲Windows安全模式的应用技巧。 基础知识 2 安全模式是Windows操作系统中的一种特殊模式,经常使用电脑的朋友肯定不会感到陌生,在安全模式下用户可以轻松地修复系统的一些错误,起到事半功倍的效果。安

    yhwyhwyhwyhw Hadoop 169 2011-07-24 01:02
  • CS重装上阵N种模式解说

    CS重装上阵N种模式解说 版本介绍 1 本版本(重装上阵)是用“CSmodchina专用版”作原版,进行修改。1.多模式一键转换。2.模型转换。3.高达17种模式。4.集合多个优秀工具。(如地图不见修复、服务器统计。)5.本版本即可单机娱乐使用,也可以创建服务器使用。6.集合多款好看的枪口火焰,一键转换。" END 步骤/方法 1 普通手雷模式:每10秒可获得1个手雷,此模式只准使用刀和手雷 2 无限

    gaojipipixie Hadoop 395 2011-07-22 15:14
  • 《拳皇13》低配置替换背景的终极优化方法

    【中文名称】: 拳皇13【英文名称】: The King of Fighters XIII【别名】: KOF13【游戏类型】: FTG 格斗游戏【发行时间】: 2011年6月15日【制作发行】: SNK Playmore【地区】: 日本【语言】: 简体中文 步骤/方法 1 经过了这么长时间,想必低配置背景修改法已经被大家所熟知(原理就是把所有背景替换成影响FPS最小的bg03图)。但是仍有不少低配置玩家无法正常享受到这款游戏带来的乐趣。我的索尼本本虽然经过修改FPS基本能达到60,但是这只局限于bg03图的第一张,到第二回合时

    tywtt Hadoop 241 2011-07-21 16:58
  • [转载]数据分析、SPSS、EXCEL、PPT、水晶易表资料汇总-0630

    原文地址:数据分析、SPSS、EXCEL、PPT、水晶易表资料汇总-0630作者:小蚊子 小蚊子乐园博客电子书   一、数据分析  1、数据分析方法 谁说菜鸟不会数据分析--封面 谁说菜鸟不会数据分析--目录 谁说菜鸟不会数据分析--业内人士联合推荐   数据分析技能提升十大建议 数据分析资料下载汇总专区 数据分析站点导航 SPSS数据分析的主要步骤 数据分析必须掌握的分析术语 几种常见数据分析软件优缺点 EXCEL数据处理、分析神器汇总 如何用EXCEL进行数据分组 什么是交叉表 EXCEL97-2010各版本数据行列限量 EXCEL数据分

    long_f85 Hadoop 482 2011-07-20 22:09
点击加载更多下一页

成为大咖

联系我们
itpub
help@itpub.net
ITPUB-饶
扫描二维码联系客服
关于• 广告服务• 使用条款
京ICP备16024965号
经营性网站备案信息
网络110报警服务
中国互联网举报中心
北京互联网违法和不良信息举报中心

关注公众号获取更多技术文章