ITPub博客

首页 > 大数据 > Hadoop

关于 “Hadoop” 的内容如下:

  • Hadoop Pig 基本教程(二) 薛岱月 D

    主要参考 Programming Pig第六章 ################################ ## Chap 6: Advanced Pig Latin ## ################################ ---------------------------------- --Advanced Relational Operations-- ---------------------------------- 1. foreach 1.1 flatten() 作用:     去除bag或tuple的嵌套     有时候不解嵌套的数据不便于处理,解嵌套的结果为一个又一个的tuple     eg         pos = foreach players generate name, flatten(position) as position; &nb

    HYLiming Hadoop 1253 2012-12-12 16:51
  • java语言实现数组搜索

    数据量很大适宜采用该方法。采用二分法查找时,数据需是排好序的。 基本思想:假设数据是按升序排序的,对于给定值x,从序列的中间位置开始比较,如果当前位置值等于x,则查找成功;若x小于当前位置值,则在数列的前半段中查找;若x大于当前位置值则在数列的后半段中继续查找,直到找到为止。 方法/步骤 1 首先打开eclipse 2 新建一个java项目,名字随意起 3 名字起好后,点击完成 4 右键点击项目名称,新

    hehui8610 Hadoop 196 2012-12-12 12:49
  • PDF-XChange Viewer多功能PDF阅读使用方法教程

    注意事项 小 结:PDF-XChange Pro操作界面,方便快捷,实在是一款不可多得的PDF输出软件,并且支持多种格式文件PDF输出,其中包括了大家最常用的WORD,EXCEL,HTML,CAD文件,以及图像等等,给大家介绍此款软件希望能给大家带来帮助,想要试试的朋友就赶快来下载吧!

    yingflyfly Hadoop 1017 2012-12-12 12:44
  • 通过Sqoop实现Mysql / Oracle 与HDFS  / Hbase互导数据

    下文将重点说明通过Sqoop实现Mysql与HDFS互导数据,Mysql与Hbase,Oracle与Hbase的互导最后给出命令。 一、Mysql与HDFS互导数据 环境: 宿主机器操作系统为Win7,Mysql安装在宿主机上,宿主机地址为192.168.66.96 3台虚拟机操作系统为Ubuntu-12.04.1-32位 三台虚拟机已成功安装hadoop,并实现免密钥互访,配hosts为: 192.168.66.91 masternode 192.168.66.92 slavenode1 192.168.66.93 slavenode2 /etc/profile已配置好必备环境变量HADOOP_HOME,JAVA_HOME 实验在masternode上进行,已成功连接mysql 步骤一,下载安装包: 我安装的

    ithinking Hadoop 165 2012-12-11 22:35
  • 企业网站建设使用什么语言好

    注意事项 总结以上五点,我们不难发现,企业网站建设使用什么语言好?在做企业网站建设中,选择PHP语言是很正确的,不仅提高了代码的简洁,运行速度,而且还对后期开发很用帮助。

    rabbitfei Hadoop 3 2012-12-11 18:07
  • linux下安装hadoop-2.0.0-alpha(双namenode federation)(转)

    一,安装环境与配置前准备工作 硬件:4个虚拟机分别为master1:192.168.1.220,master2:192.168.1.221,slave1:192.168.1.222,slave2:192.168.1.223 http://code.google.com/p/hdfs-fuse/downloads/list     fuse-hdfs 系统:红帽 LINUX 5 HADOOP版本:最新版本hadoop-2.0.0-alpha  安装包为hadoop-2.0.0-alpha.tar.gz 下载官网地址:http://apache.etoak.com/hadoop/common/hadoop-2.0.0-alpha/ JDK版本:jdk-6u6-linux-i586.bin(最低要求为JDK 1.6) 虚拟机的安装和LINUX的安

    文建辉 Hadoop 201 2012-12-11 16:34
  • 浅谈大数据之语言和数据压缩比

      不知道大家有没有看过这篇关于TWritter的文章《看Twitter如何应对大选:少些Ruby 多些Java》。 http://www.csdn.net/article/2012-11-12/2811740-twitter-handle-election-tweets-less-ruby  文中说:奥巴马和罗姆尼的选举日当天,Twitter服务器每分钟处理的数目为327452条!当天人们在Twitter上发布了3100万条跟选举相关的内容,而Twitter访问量阶段性飙升,一度达到每秒15107条。在互联网世界里,真正成功的不是奥巴马,而是Twitter,因为Twitter这次没有宕机。 “作为迁移Ruby的一部分,我们重新配置了服务

    wind68703100 Hadoop 1526 2012-12-10 21:55
  • hadoop安装配置之ssh无密码登陆

    os:redhat 6 hadoop 两个节点,一个master 一个slave 192.168.0.1  master 192.168.0.2. slave 1.修改每台机器的/etc/hosts,增加 192.168.0.1  master 192.168.0.2. slave 2.在每台机器上创建用户hadoop useradd hadoop passwd hadoop 给hadoop用户添加权限,打开/etc/sudoers文件: 在root ALL=(ALL)       ALL          后面添加hadoop ALL=(ALL)       ALL      后面都以hadoop用户来操作 3.在所有机

    疯无止境 Hadoop 172 2012-12-09 19:02
  • 怎么安装ubuntu 12.10

    Ubuntu是款以桌面应用为主的Linux操作系统,Ubuntu的目标在于为一般用户提供一个最新的、同时又相当稳定的主要由自由软件构建而成的操作系统。Ubuntu具有庞大的社区力量,用户可以方便地从社区获得帮助。下面给大家讲解一下ubuntu 12.10的安装方法。 工具/原料 ubuntu 12.10 方法/步骤 1 下载ubuntu 12.10安装程序:ubuntu作为Linux操作系统其中的一个版本,本身就是开源的,提供免费下载的支持。以下版本的ubuntu12.0是从官方网站上获取

    马甲guiju Hadoop 175 2012-12-09 18:08
  • eclipse中的输入提示怎么设置

    对于大多数的开发人员来说,打代码是一件非常繁琐的事情,eclipse中为我们提供了自动提示的功能,但是默认的提示只有当我们输入小数点后才能出现提示框,那么我们如何设置eclipse,能够让它为我们提示所有的输入呢?下面就介绍我们如何设置eclipse来实现我们的方法。 工具/原料 eclipse 方法/步骤 1 在这里就不在介绍eclipse的下载方法了,对于程序开发者来说,这一点已经非常的了解了。同样我们的java环境变量也就不用多说了,不会的可以

    lovesmileg Hadoop 309 2012-12-09 17:20
  • 减小Word文件大小方法

    减小Word文件大小方法 方法/步骤 1 取消快速保存当文件打开时,使用快速保存比使用完全保存需要更多的空间。可以在“工具→选项”命令中选择“保存”选项卡,取消“允许快速保存”复选框即可。 2 文件另存Word在保存DOC文件时,只把后来修改的信息存入,这样即使你删除了文件中的部分内容也会使文件越来越大,如果我们使用“另存为”命令来保存文件,Word则会重新整理并存盘,如此一来,就可以有效地减小Word文件的容量 3 页面设置在保存文件前,单击“文件→页面设置”,

    nadecbj Hadoop 131 2012-12-06 21:41
  • ios开发环境搭建方法

    苹果iOS是由苹果公司开发的手持设备操作系统。苹果公司最早于2007年1月9日的Macworld大会上公布这个系统,最初是设计给iPhone使用的,后来陆续套用到iPod touch、iPad以及Apple TV等苹果产品上。iOS与苹果的Mac OS X操作系统一样,它也是以Darwin为基础的,因此同样属于类Unix的商业操作系统。原本这个系统名为iPhone OS,直到2010年6月7日WWDC大会上宣布改名为iOS。截止至2011年11月,根据Canalys的数据显示,iOS已经占据了全球智能手机系统市场份额的30%,在美国的市场占有率为43%。

    haiyun888 Hadoop 140 2012-12-05 18:25
  • Java异常处理及应用

    要尽可能的处理异常,如果条件确实不允许,无法在自己的代码中完成处理,就考虑声明异常。如果人为避免在代码中处理异常,仅作声明,则是一种错误和依赖的实践。 方法/步骤 1 尽可能的处理异常要尽可能的处理异常,如果条件确实不允许,无法在自己的代码中完成处理,就考虑声明异常。如果人为避免在代码中处理异常,仅作声明,则是一种错误和依赖的实践。 2 具体问题具体解决  异常的部分优点在于能为不同类型的问题提供不同的处理操作。有效异常处理的关键是识别特定故障场景,

    21hp6515 Hadoop 80 2012-12-05 17:05
  • Win7 eclipse Hadoop Failed to set permissions of path

    原:http://blog.csdn.net/shiqidide/article/details/7585048 hadoop1.0.4在windows远程调试linux的程序时,报错: 12/04/24 15:32:44 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 12/04/24 15:32:44 ERROR security.UserGroupInformation: PriviledgedActionException as:Administrator cause:java.io.IOException: Failed to set permissions of path: mphadoop-AdministratormapredstagingAdministrator-519341271.staging to

    drlyxin Hadoop 1728 2012-12-04 15:17
  • Hadoop2安装——单机模式

    Hadoop2安装——单机模式 64人收藏此文章, 我要收藏 发表于昨天(22:53)(2012-12-01 22:53) , 已有1713次阅读 ,共3个评论 Hadoop有三种模式 单机模式、伪分布模式和完全分布模式这里先简单介绍单机模式 ,默认情况下,Hadoop被配置成一个非分布式模式,独立运行JAVA进程,适合开始做调试工作。 Hadoop 网址http://hadoop.apache.org/       OSC地址 http://www.oschina.net/p/hadoop 下载地址:http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.0.2-alpha/hadoop-2.0.2-alpha.tar.

    驻车 Hadoop 136 2012-12-03 21:40
  • 在哪儿下载txt电子书

    看小说是很多人的乐趣,那么到底该去哪儿下载小说呢? 工具/原料 电脑一台 方法/步骤 1 前往百度知道-文化艺术-小说分类提问,附上自己的邮箱、要求,就会有知友给你发送小说了,最后不要忘记采纳最佳答案哦!这种方法的好处是,有针对性,坐等小说就可以。 2 去小说论坛下载小说。小说论坛有很多,比如塞班电子书资源区,派派小说论坛等等。这种方法有个缺点就是每个论坛都要注册一个账号。 3 去贴吧下载小说,或直接

    duanzylang Hadoop 185 2012-12-03 12:13
  • 编译hadoop eclipse插件 详解

      一、linux下编译hadoop和eclipse-plugin 操作系统为 ubuntu10.0.4 x86 1.下载软件包 hadoop-1.0.4.tar.gz eclipse-jee-indigo-SR2-linux-gtk.tar.gz 将二者解压到/software目录下,分别命名为eclipse3.7  hadoop 即: HADOOP_HOME=/software/hadoop      ECLIPSE_HOME=/software/eclipse3.7 2. 安装jdk  ant $ sudo apt-get install ant openjdk-6-jdk autoconf libtool   3.编辑 {HADOOP_HOME}/build.xml     3.1对31行的hadoop版本做修改 <property na

    oynyo01 Hadoop 189 2012-12-02 19:34
  • Hadoop 集群安装详细步骤

    本文所使用的版本是 hadoop 1.0.0,即 2011年12月27日发布的1.0正式版。 详细安装步骤如下,有大步骤,每个步骤里面有小步骤,绝大部分是必选,只有2步是可选的,红色部分表示要特别注意的地方。 1. 用vmware workstation 新建一台ubuntu server,然后用浅拷贝Create a linked clone 克隆出两台作为slave,这样有了三台ubuntu机器。启动三台机器,假设IP分别为192.168.1.131, 192.168.1.132, 192.168.1.133, 131做为master,132为 slave01, 133为slave02。 2. 修改机器名(这一步的作用是让命令行提示看起来好看点,由默认的 dev@bogon

    jaysmith Hadoop 161 2012-12-01 13:22
  • 怎样下载mp4视频

    注意事项 转码的时候如果是放入手机还可以选择适合自己机型的格式!!

    abbott448 Hadoop 4 2012-12-01 10:41
  • redHat linux下安装hadoop 0.20.2

    redHat linux下安装hadoop 0.20.2, 并在windows下远程连接此hadoop,开发调试 http://blog.csdn.net/furiously/article/details/6430525

    2002111358 Hadoop 3 2012-11-30 20:18
点击加载更多下一页

成为大咖

联系我们
itpub
help@itpub.net
ITPUB-饶
扫描二维码联系客服
关于• 广告服务• 使用条款
京ICP备16024965号
经营性网站备案信息
网络110报警服务
中国互联网举报中心
北京互联网违法和不良信息举报中心

关注公众号获取更多技术文章