-
漫画讲解HDFS原理
漫画讲解HDFS原理
-
MapReduce初探
Map-Reduce处理过程（分析气象数据的map-reduce过程）1，调用标准的input类，将输入数据转化成标准的样式，成为map的输入。2，map过程，提取出需要的数据，这里提取出年份、温度这两个数据，输出成key-value对（标准样式）3，系统自动进行shuffle过程。把key相同的行聚合在一起，输出为key-数据集合（或者数组），成为r...
-
分布式Hadoop1.2.1集群的安装
分布式Hadoop集群的安装
-
Hadoop集群机器的SSH认证配置
Hadoop集群机器的SSH认证配置
-
Hadoop集群机器的hosts文件配置
Hadoop集群机器的hosts文件配置
-
完全分布式Hadoop集群的安装部署步骤
完全分布式Hadoop集群的安装部署步骤
-
Hadoop一些备受关注的特性
Hadoop一些备受关注的特性
-
助力硬件腾飞 英特尔软件架起大数据生态
随着企业业务的增长、数据量的激增，需要企业IT架构变的具有可伸缩性，提供更灵活、更易扩展的IT环境，“软件定义”的概念随之袭来。软件在当今数据中心环境中担当着越来越重要的角色，一直以来，专注芯片领域的英特尔都认作是“硬角色”，那么英特尔软件部门发挥着怎样的作用呢？近日，笔者有幸与英特尔软件与服务事业部中国区总经理何京翔博士及英特尔数据中心软件部中国区首席技术官苗凯翔博士深度交流，探讨软件在大数据领域的价值。 英特尔软件与服务事业部中国区总经理何京翔博士 英特尔软件----甘做无名英雄 随着
-
知名互联网公司20-40W招聘Android工程师
工作地点：北京 岗位描述： 1、负责公司Android 核心业务线的开发； 2，应用框架开发和维护，SDK开发； 岗位要求： 1、四年以上客户端开发经验，精通Android手机平台，有其他主流平台开发经验也可以考虑 2、熟悉掌握至少一种主流手机平台编程语言（C，C++或Java等），有Java相关开发经验不少于2年 3、精通一主流手机平台下的高性能编程及性能调优，精通一个系列以上的高市场占有率的手机环境 4、 开发基础良好，理解设计模式，在项目或产品中有很好的设计实践； 5、 有强烈的责任心和团队精神，善于沟通和合作；能独立完成设计和编码
-
世界500强企业年薪30-50W招聘Android资深研发工程师（专家线）
工作地点：北京 岗位职责 1 负责手机客户端软件架构设计、开发； 2 参与项目重点、难点的技术攻坚； 3 负责对Android应用进行优化，工程师进行技术指导。 岗位要求 1 8年以上软件开发经验，5年以上java软件开发经验，4年左右Android开发经验； 2 熟悉Android 系统体系结构、framework；精通Android进程管理策略以及进程间的通信机制，安卓系统内存回收机制。 3 精通Android SDK，熟悉UI布局与控件的使用；熟悉Android网络通信机制，对Socket通信、TCP/IP和HTTP有较深刻的理解和经验。
-
“智慧城市”大数据可赋予未来更多洞察力
安防新闻 “衬衫可以帮你选领带，食物自己告诉你有多新鲜，建筑可以自己降低能耗。”一幅以前想都不敢想的场景浮现眼前，这其实就是IBM描绘的未来的智慧城市生活场景。 近日，IBM业务分析软件的中华区总经理缪可延在接受采访时表示，IBM一直以来致力于智慧城市建设，建设更智慧的城市是为了将数字技术应用到物理系统中去，并利用所有产生的数据提高生活的空间，效率与质量。 缪可延说：“IBM早在2008年就提出了‘智慧地球’，当时在全球范围内作为一家企业提出这样的概念是很有先进性的。基于IBM的研究机构，包括大量
-
【满69包邮】高性能MySQL（第3版）（MySQL旗舰名著 惊献全
【满69包邮】高性能MySQL（第3版）（MySQL旗舰名著 惊献全面升 ERP系统 购物请访问： 台湾软件公司 网站 twsoft.tltesoft.com 优惠价：￥ 101.40 台湾软件公司产品类别 书名: 高性能MySQL（第3版）（MySQL旗舰名著 惊献全面升级） ISBN编号: 9787121198854 台湾软件公司产品说明 图书书名：《高性能MySQL（第3版）（MySQL旗舰名著 惊献全面升级）》 图书定价：128.00 元 书籍编号：23214590 书籍作者：【美】施瓦茨（Schwartz,B.）【美】扎伊采夫（Zaitsev,P.） 【美】特卡琴科（Tka  
-
从“简单”的封面设计剖析Netflix背后的大数据哲学
Netflix被连续五次评为客户最满意的网站，重视客户和应用数据分析用户的习惯已深入企业文化，其先进的数据可视化技术使复杂而庞大的数据变得易于理解、易于分析、易于处理，Netflix形成了一套自己的数据哲学，仅仅是电视剧封面颜色的选择，都运用了强大的数据宝库。从公司高管到普通职员，重视数据的程度让无数公司汗颜，作者Phil Simon是WIRED的技术专家，为我们带来了详细的分析。 像Netflix这样以数据驱动业务的公司，数据可视化发挥着关键的作用，而且数据可视化也很有必要。对于数据可视化，有如下两种定义：广义上讲，数据可
-
转发：Oracle约束的启用和停用
原文出处：http://www.blogjava.net/decode360/archive/2009/08/27/292756.html 关于Oracle的约束概念和基本操作，我已经在以前的《Constraint基础概念》、《Constraint的简单操作》两篇文章中有过比较详细的介绍了，但是对于如何停用和启用constraint没有作特别的描述，以至于在使用PLSQL中无法忽略constraint而逐步进行数据的更改，所以在这里专门记录一下关于constraint的停用和启用相关知识。 一、约束的状态 可以指定启用(ENABLE)或者停用(DISABLE)约束。如果启用约束，当在数
-
通过CompressionCodec对数据流进行压缩和解压缩
CompressionCodec包含两个函数，可以轻松用于压缩和解压缩数据。如果要对写入数据输出数据流的数据进行压缩，可用 createOutputStream(OutputStream out)方法在底层的数据流中对需要以压缩格式写入在此之前尚未压缩的数据新建一个CompressionOutputStream对象。相反，对输入数据流中读取的数据进行解压缩的时候，则调用createInputStream(InputStream in)获取CompressionInputStream,可通过该方法从底层数据流读取解压缩后的数据。 CompressionOutputStream 对象和CompressionInputStream对象，类似于java.util.zip.DeflaterOutputStr
-
影响未来十年的10项互联网新技术(2011年12月)
最近InfoWorld网站公布了可能影响未来十年的十项新技术。虽然每个人的观点会有不同，但是我们相信，这十项新技术足以代表大部分的观点，同时也可以确信在未来几年这十项技术能给我们生活带来翻天覆地的变化。 1.私有云技术 IT经理可以借由公共云提供商首创的技术和架构，并把它们应用到自己的数据中心。私有云，往往有许多移动部件，包括虚拟化管理，计量和扣款系统，自动配置，自我服务供应。 但一些人在过去一年中取得了令人惊讶的势头。已知开源项目OpenStack，它提供了一个云业务流程服务的核心设置：虚拟机管理，对象存
-
效率为先：Excel 2013十大新函数
人们可能总是认为Excel不可能会再添加新的函数了，但是每次随着新版本的发布，总是能发现多了一些新的功能。大多数的新函数是专门设计的，供特定的用户群体使用的，例如数据分析师或工程师。但是Excel 2013至少有10个新增的函数，并能大大提升用户的工作效率。 1、DAYS函数 不知道究竟是什么让微软花了这么长的时间来增加DAYS函数。这个函数能够得到两个日期之间间隔的天数。也许微软认为这不是必须的，因为简单的EndDate – StartDate表达式也能得出同样的结果。但比较之下DAYS函数表达式
-
IT百科——Eclipse
Eclipse 计算机编程中，Eclipse是一个集成开发环境（IDE）软件。它包含了一个基本的工作空间和扩展插件管理的系统，这都是为了用户可以定制开发环境。在写Java程序时更为有用，Eclipse用于开发其应用程序。变更插件意味着，Eclipse可以用于其他语言（Ada、C、C 、COBOL、Fortran、Clojure、Groovy、Scheme和Erlang）开发应用程序。它也可以用于开发Mathematica的软件包。开发环境包括用于Java和Scala的Eclipse Java开发工具（JDT）、用于C/C 的Eclipse CDT和用于PHP的Eclipse PDT，还有其他的一些。 最初始的代码源自于I
-
Hbase建模
一，什么情况下使用Hbase？1，成熟的数据分析主题，查询模式已经确定并且不易轻易改变。（主要还是查询模式要确定，否则，还是选用关系型数据库吧）2，传统关系型数据库已经无法承受负荷，告诉插入，大量读取。3，适合海量的，但同时也是简单的操作（例如key-value）例子1：显示我的浏览历史，关系型数据库的困难：1...
-
hadoop2.3 安装配置开发记录(四)
hadoop2.3 配置（三） 独立运行namenode、datanode、secondarynamenode、resourcemanager、nodemanager 为了增加集群的容错性，我们不能将namenode、datanode、secondarynamenode放在一起，需要将它们分开部署，这样使得我们不可以直接使用start-dfs.sh与start-yarn.sh命令启动了。需要以下的命令分别在不同的机器上执行： hadoop-daemon.sh start namenode hadoop-daemon.sh start datanode hadoop-daemon.sh start secondarynamenode 在hadoop 2.0以前我们可能会使用这样的一类命令:start jobtracker。2.0以后hadoop将jobtracker与
