ITPub博客

首页 > 大数据 > Hadoop

关于 “Hadoop” 的内容如下:

  • MYSQL千万级数据量的优化方法积累

    1、分库分表 很明显,一个主表(也就是很重要的表,例如用户表)无限制的增长势必严重影响性能,分库与分表是一个很不错的解决途径,也就是性能优化途径,现在的案例是我们有一个1000多万条记录的用户表members,查询起来非常之慢,同事的做法是将其散列到100个表中,分别从members0到members99,然后根据mid分发记录到这些表中,牛逼的代码大概是这样子: <?php for($i=0;$i< 100; $i++ ){      //echo "CREATE TABLE db2.members{$i} LIKE db1.members<br>";      echo "INSERT INTO mem

    笑谈无忌 Hadoop 632 2013-02-22 09:06
  • 魔卡幻想电脑版下载及安装教程

    《魔卡幻想》是一款魔幻偏卡通风格的集换式卡牌对战游戏,玩家通过收集卡牌、技能符文的,并能强化提升它们的品质,最终凭借手中已有的卡牌排兵布阵,组合成最佳的对战阵容。游戏里的卡牌分为四大种族,上百张能力迥异的卡牌赋予玩家无穷的战术想象空间,加之决斗对手也总是冷不防地使出奇策,随时的风云突变让战局保持了紧张与刺激。   工具/原料 联网电脑一台 魔卡幻想账号 方法/步骤 安装安卓模拟器

    eric13051274 Hadoop 87 2013-02-21 14:08
  • 基于Hadoop的实时大数据分析系统

    “夫妻档”公司百万美元打造实时Hadoop系统  总部位于旧金山的初创公司HStreaming,近期接受了它的第一笔创业投资——来自阿特拉斯风险投资公司的100万美元,这笔资金将用于打造一个实时的Hadoop系统。这家仅仅有三个人的公司已经运营了两年左右,但是公司的CEO Jana Uhlig表示,其中涉及的利益太大而难以保证公司自筹资金运营。 如果问及任何Hadoop的有关人士,Hadoop如何超越目前的批量处理平台,那么“实时”无疑是其中最主要的一个答案。事实上,这也是下个月“Structure: Data ”的一个讨论主题,企业希望Hadoop成

    dgan77 Hadoop 1711 2013-02-20 17:31
  • 大数据下的数据分析平台架构(转)

    随着互联网、移动互联网和物联网的发展,谁也无法否认,我们已经切实地迎来了一个海量数据的时代,数据调查公司IDC预计2011年的数据总量将达到1.8万亿GB,对这些海量数据的分析已经成为一个非常重要且紧迫的需求。 作为一家互联网数据分析公司,我们在海量数据的分析领域那真是被“逼上梁山”。多年来在严苛的业务需求和数据压力下,我们几乎尝试了所有可能的大数据分析方法,最终落地于Hadoop平台之上。 Hadoop在可伸缩性、健壮性、计算性能和成本上具有无可替代的优势,事实上已成为当前互联网企业主流的大数据分析平台。本文主要

    dkkj Hadoop 133 2013-02-20 13:49
  • JAVA环境搭建,厨房安装图文教程!

    搭建JAVA环境,今天小编就为您详细讲解一下 工具/原料 JAVA请自行下载 方法/步骤 1.点击打开附件jdk-7u2-windows-i586并安装(注意,以下我是以win7的64位系统为例。无论XP还是Win7大家应该都是32为的系统,原理都是一样)安装路径为默认,当然也可以安装到其他盘,反正就是安装路径最好不要有中文。刚才我说过了我的是64位系统,所有默认我的路径是C:Program Files(x86)Javajre7  你们的默认路径应该是C:Program FilesJavajre7这个各位不用

    520128 Hadoop 128 2013-02-18 15:35
  • ubuntu12.10安装教程

    Ubuntu 12.10正式版的发布,很多朋友就迫不及待地想换Ubuntu 12.10正式版了,但是还有朋友不懂得怎么安装~下面绿茶小编就来教大家Ubuntu 12.10正式版怎么安装。Ubuntu 12.10 官方中文ISO镜像正式版   http://www.33lc.com/soft/19381.html   Ubuntu 64位 12.10 官方中文ISO镜像正式版   http://www.33lc.com/soft/19382.html   工具/原料 ubuntu 12.10操作系统 步骤/方法 1 可以很容易地从DVD安装Ubuntu。这里就是你需要做的:  把U

    iamafoxx Hadoop 96 2013-02-18 11:40
  • hadoop怎么读?怎么发音

    hadoop不是一个英文单词,是作者发明的词,hadoop名称来源作者小孩的一个}h毛填充黄色大象玩具。 它的发音是:[hædu:p]

    fairylandwind Hadoop 2387 2013-02-14 20:15
  • 【转载】呼叫中心常用数据分析方法

    (脑图见文后) 近年来(本文刊载于2012年10月),随着“数据分析”的大热,各类数据分析方法层出不穷。本文简单介绍几种在呼叫中心常用的分析方法,供产业同仁参考;通过在实际工作中加以采用,找到适合自己的最佳管理工具。 宏观分析方法:PSET分析 指宏观环境因素的分析。不同行业和企业由于自身特点和经营需要,具体分析的内容可能会有差异,但一般都应对政治(Political)、社会(Social)、经济(Economic)、技术(Technological)这四大类影响企业的主要外部环境因素进行分析,以了解其所处的政治、经济、社会和技术等宏观

    snpengwei Hadoop 377 2013-02-05 19:55
  • Excel表格中制作专业数据分析之直方图图表

    使用Excel自带的数据分析功能可以完成很多专业软件才有的数据统计、分析,这其中包括:直方图、相关系数、协方差、各种概率分布、抽样与动态模拟、总体均值判断,均值推断、线性、非线性回归、多元回归分析、时间序列等内容。下面将对以上功能逐一作使用介绍,方便各位普通读者和相关专业人员参考使用。注:本功能需要使用Excel扩展功能,如果您的Excel尚未安装数据分析,请依次选择“工具”-“加载宏”,在安装光盘中加载“分析数据库”。加载成功后,可以在“工具”下拉菜单中看到“数据分析”选项。 方

    wangwei0312 Hadoop 230 2013-02-05 15:12
  • Excel表格中制作专业数据分析计之百分比排位

    某班级期中考试进行后,按照要求仅公布成绩,但学生及家长要求知道排名。故欲公布成绩排名,学生可以通过成绩查询到自己的排名,并同时得到该成绩位于班级百分比排名(即该同学是排名位于前“X%”的学生)。  排序操作是Excel表格的基本操作,Excel“数据分析”中的“排位与百分比排位”可以使这个工作简化,直接输出报表。  注:本功能需要使用Excel扩展功能,如果您的Excel尚未安装数据分析,请依次选择“工具”-“加载宏”,在安装光盘中加载“分析数据库”。加载成功后,可以在“工具”下拉菜单中看到“数据分析”选项。

    yxb0529 Hadoop 135 2013-02-05 15:12
  • Excel表格中制作专业的数据分析之描述统计

    某班级期中考试进行后,需要统计成绩的平均值、区间,以及给出班级内部学生成绩差异的量化标准,借此来作为解决班与班之间学生成绩的参差不齐的依据。要求得到标准差等统计数值。  样本数据分布区间、标准差等都是描述样本数据范围及波动大小的统计量,统计标准差需要得到样本均值,计算较为繁琐。这些都是描述样本数据的常用变量,使用Excel数据分析中的“描述统计”即可一次完成。 方法/步骤 1 本功能需要使用Excel扩展功能,如果您的Excel尚未安装数据分析,请依次选择“工具”-“加载宏

    soulsnow1 Hadoop 177 2013-02-05 15:07
  • 数据挖掘 算法小结 2 Apriori - Hadoop MapReduce

      继上一篇 Data Mining 1 中的3个算法,这次是搞定Apriori 算法,感觉这个算法在写过的几个DataMine中算最恶心的。   一开始自己看频繁挖掘的时候没太明白就开始写代码,闹得最后又重写了一遍,不过也对Apriori有了更清楚的认识。   Apriori,主体分两步走:   a. 根据 原始数据 得到1 - k项集,再根据support(支持度)得到频繁1项集,频繁2项集,频繁3项集......      一直到频繁k项集,这一步是运算量最大的,也是hadoop集群的瓶颈。   b. 根据 置信度 confidence ,得到所有强规则。 &

    963741asdf Hadoop 456 2013-02-05 11:11
  • 百度云盘怎么用

    百度网盘是百度推出的一项云存储服务,首次注册即有机会获得15GB的空间,目前有Web版、Windows客户端、Android手机客户端,用户将可以轻松把自己的文件上传到网盘上,并可以跨终端随时随地查看和分享。   工具/原料 百度帐号 电脑 上传 1 我们先登陆百度云网盘 2 就登陆到了其中的文件列表界面 3 我们点击上传文件 4 弹出文件上载框

    虫二亮 Hadoop 679 2013-02-03 02:45
  • 基于Matlab的蒙特卡洛入门课程

    课程简介: Monte Carlo方法起源于18世纪末,自20世纪中叶起此方法广泛应用于工程领域。近年来,金融衍生产品愈来愈复杂,同时人们对金融市场的认知也愈来愈深刻,传统的数学方法捉襟见肘,此时,人们将眼光投向工程领域内业已成熟的Monte Carlo方法。 Monte Carlo方法既简单又复杂,简单到三到四个固定的步骤即可完成Monte Carlo模拟,然而正确、恰当地使用此方法却需要技术与艺术的结合。错误使用此方法的情形比比皆是,当前依然肆虐全球的次贷危机,从某种角度而言,其根源之一就是使用蒙特卡洛等方法对次级贷款等衍生产品的定价

    牵着兔子逛大街 Hadoop 325 2013-02-02 16:03
  • 怎么查看电脑内存使用情况

    有的时候我们用电脑的时候会出现卡机的现象,这个时候我们就需要了解我们电脑的内存使用情况,从而判断是否内存不够的原因。 方法/步骤 1 打开我的电脑,找到控制面板,在控制面板中找到计算机性能选项。 2 进入计算机性能选项后,找到管理工具,进入管理工具目录下找到性能,点开就可以看到。 3 还有一种办法就是打开任务管理器,在任务管理器里找到性能选项。

    wyer_ly Hadoop 164 2013-02-02 15:56
  • Excel数据分析培训一

    第一课 设计表格的策略与技巧 为不同的目标创建表格为收集用户数据的表单 为整理分析数据的清单   为呈现给他人阅读的报表 利用模板创建企业模板库   什么是模板?   如何创建模板   从OFFICE ON LINE网站下载模板   如何定制企业模板库 理解EXCEL的数据类型与数据格式   什么是数据的类型与格式   如何区分数据的类型   单元格格式如何影响数据类型   如何改变数据类型 EXCEL编辑技巧   工作簿管理技巧   工作表编辑技巧   单元格操作技巧   数据快速填

    Mg_012 Hadoop 163 2013-02-02 14:45
  • Excel数据分析培训二

          Excel是微软公司出品的Office系列办公软件中的一个组件,确切地说,它是一个电子表格软件,可以用来制作电子表格、完成许多复杂的数据运算,进行数据的分析和预测并且具有强大的制作图表的功能。         同时,它不仅仅能够方便的处理表格和进行图形分析,其更强大的功能体现在对数据的自动处理和计算,然而很多缺少理工科背景或是对Excel强大数据处理功能不了解的人却难以进一步深入。 培训训对象 适用于企业办公人员、财务人员、市场分析人员、数据统计与管理人员以及

    hantongliang Hadoop 147 2013-02-02 14:44
  • 【转载】Win7 Cygwin下安装Hadoop1.0.2 dy

    安装步骤如下: 1:安装了ssh [windows版本的] 2: 安装了JDK[windows版本的] /cygdrive/d/JAVA/jdk1.7.0/ 3:下载hadoop-1.0.2.tar.gz 解压在目录d:/hadoop/下 4:进入hadoop-1.0.4 编辑conf如下配置文件 A: hadoop-evn.sh 将原来的#export JAVA_HOME=...替换为 export JAVA_HOME=/cygdrive/d/JAVA/jdk1.7.0/  注意和后面的#隔一个空格 B:core-site.xml 配置如下   <configuration>  <property>        <name>fs.default.name</

    windytao Hadoop 1062 2013-02-02 13:59
  • 怎样自己动手开发JQuery插件

    JQuery从诞生之初就秉性着“One less, Do more”(用最少的代码表达最丰富的内容)思想,充分合理的使用JQuery可以实现丰富的网页效果,同时从代码重用性的角度出去,设计各种各样满足不同需求的JQuery插件已是形势所需要,通过JQuery插件,我们可以随心所欲的使用JQuery插件到网页的任何部分,实现任意的效果。说到这里,大家一定心动了吧,下面就跟随小编一起来探究一下JQuery插件的开发方法。 工具/原料 Dreamweaver 8 脚本运行库JQuery

    xunvxia Hadoop 142 2013-02-01 15:10
  • 2012年中国人寿保险公司排名分析

    2012年已经过去,大家都从末日之说中缓了过来。2012年很多人都想在“末日”之前给自己买一份保险。现在虽然末日已经过去,但为了以后生活的考虑,也需给自己添加一点保障。下面就给大家简单介绍下2012年各家保险公司的排名情况及现状分析。 工具/原料 第一名中国人寿保险股份有限公司在国内寿险公司的排名中,中国人寿在市场分额和利润两方面排名第一,赔款准备金充足率上排名第一,流动性和稳定性上分别排名第4和第7。鉴于此,虽然该公司的资本能力方面比其他保险公司略低一筹,但是从综合能

    lhhxy2009 Hadoop 118 2013-01-31 17:15
点击加载更多下一页

成为大咖

联系我们
itpub
help@itpub.net
ITPUB-饶
扫描二维码联系客服
关于• 广告服务• 使用条款
京ICP备16024965号
经营性网站备案信息
网络110报警服务
中国互联网举报中心
北京互联网违法和不良信息举报中心

关注公众号获取更多技术文章