-
2009-2011 apache hadoop 更新日志
2011-12-27 发布1.0.0版本 经过六年的酝酿之后，hadoop达到了1.0.0版本！包括的支持如下： #）安全 #）HBase（append/hsynch/hflush,安全） #）webhdfs（完全支持安全） #）HBase增强了访问本地文件的性能 #）其它性能的增强，修复bug，和新特性 详细完整的说明请访问http://hadoop.apache.org/docs/r1.0.0/releasenotes.html 2011-12-10 发布0.22.0 版本 这个版本修复了很多bug并且较于其前身0.21.0优化了很多。访问http://hadoop.apache.org/docs/r0.22.0/releasenotes.html查看详细信息，你还可以访问http://hadoo
-
DNF单机版14.0：希望之光 畅快淋漓的最新版体验
电脑软件 名称： DNF单机版14.0：希望之光 大小：1.89GB|版本：中文版|类别：网络软件|语言：中文 应用平台：Vista，winXP，win7，win8 游戏简介《地下城与勇士单机版：希望之光》是一款从Neople公司所制作的网游《地下城与勇士》提取、修改而来。单机版中修改了网络版的大量数据设定，以及整合了所有服务器中最新版本的游戏内容加入其中。游戏中还有众多秘籍可供玩家high翻全场，主城内移速加至最快为玩家减免了不必要的垃圾时间。最令人期待之处应该是将会更新黑暗武士这个全新的职业，以
-
hadoop+hbase安装
下图是haoop与hbase支持版本的关系 HBase-0.92.x HBase-0.94.x HBase-0.96 Hadoop-0.20.205 S X X Hadoop-0.22.x S X X Hadoop-1.0.x S S S Hadoop-1.1.x NT S S Hadoop-0.23.x X S NT Hadoop-2.x X S S S = supported and tested,支持 X = not supported,不支持 NT = not tested enough.可以运行但测试不充分 我安装的是hadoop-1.0.0.tar.gz 及HBase-0.96
-
Hadoop的大数据分析技术以及未来发展趋势 Snow
Hadoop的大数据分析技术以及未来发展趋势 2 014是一个IT风云变幻莫测的一年，传统的行业都积极走向了互联网，从MWC大会闭幕我们可以看出未来互联网比拼的再也不是硬件而是“软”实力了。来自多个渠道的信息显示，阿里巴巴集团近期正与携程旅行网洽谈投资入股事宜。如果合作交易最终达成，将标识着在线旅游业也进入了百度、阿里巴巴、腾讯（BAT）三巨头阵营划分下的寡头竞争时代。BAT各自都在整合自己的产业链，未来大数据处理直接带动整个行业，目前整个IT行业也趋向于大数据和商业智能（BI），大数据带来的潜在商业
-
Google Spanner原理- 全球级的分布式数据库（总结） destiny
Google Spanner简介 Spanner 是Google的全球级的分布式数据库 (Globally-Distributed Database) 。Spanner的扩展性达到了令人咋舌的全球级，可以扩展到数百万的机器，数已百计的数据中心，上万亿的行。更给力的是，除了夸张的扩展性之外，他还能同时通过同步复制和多版本来满足外部一致性，可用性也是很好的。冲破CAP的枷锁，在三者之间完美平衡。 Spanner是个可扩展，多版本，全球分布式还支持同步复制的数据库。他是Google的第一个可以全球扩展并且支持外部一致的事务。Spanner能做到这些，离不开一个用GPS和原子钟实现的时
-
什么是Boinc分布计算平台
你有电脑吗？你的电脑用来玩游戏？有没想过让自己的电脑为科学做些有用的贡献呢？Boinc这个计算平台可以让你的电脑空闲的算力贡献出来，为各种需要计算的科学研究献出力量，这些参与计算的计算机联合起来犹如一台相当强大的超级计算机，使以往需要几十年甚至几百年才能完成的计算量，现在仅仅需要几个月、几年甚或更短的时间。要参与Boinc分布式计算需要下载Boinc软件，并申请对应科研项目的账户。 工具/原料 Bo
-
Mongodb和Hbase特点分析
1.Mongodb bson文档型数据库，整个数据都存在磁盘中，hbase是列式数据库，集群部署时每个familycolumn保存在单独的hdfs文件中。 2.Mongodb 主键是“_id”,主键上面可以不建索引,记录插入的顺序和存放的顺序一样，hbase的主键就是row key，可以是任意字符串(最大长度是 64KB，实际应用中长度一般为 10-100bytes)，在hbase内部，row key保存为字节数组。存储时，数据按照Row key的字典序(byte order)排序存储。设计key时，要充分排序存储这个特性，将经常一起读取的行存储放到一起。 字典序对int排序的结果是1,10,100,11,12,13,14,15,1
-
类Hadoop的高效分布式计算系统Spark
导读：本文对Spark进行了不厌其详的介绍，从比较优势到应用运行，再到对RDD的详解。多种模式下的编程语言也都罗列其中。 关键词：Spark 分布式计算系统 Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算，拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法。其架构如下图所示： Spark与Hadoop的对比
-
安卓厨房的搭建（cygwin安装，厨房工具配置）
心血来潮想做个自己的刷机包，却在厨房搭建过程中频频出错？别着急，接下来就教你怎么做。O(∩_∩)O~ 工具/原料 cygwin离线安装包 安卓厨房工具 方法/步骤 1 首先确保你的电脑已经完成了java的环境配置。验证方法：开始->运行->cmd回车->输入javac->回车，若出现一大串java命令如下，则表示已配置好。否则就需配置java环境，如何配置自行百度。 2 下载cygwin。cygwin安装可以在线安装以
-
最最靠谱公司优酷招聘
感兴趣请直接发送简历至jamie.mao@careerfocus.com.cn 数据挖掘算法工程师 岗位职责： 1. 推荐系统研发，给用户提供更智能化、个性化的观看服务 2. 视频Knowledge Graph及相关研发 3. 提升用户体验类创新产品研发，覆盖智能电视、手机、pad、客户端多种场景。 职位要求： 1. 具有良好的统计学、数学、人工智能和数据挖掘知识基础 2. java开发经验三年以上，熟悉面向对象技术 3. 有大规模数据处理经验；熟悉hadoop、spark者优先 4. 熟悉机器学习算法，有个性化推荐、广告精准投放、个性化搜索经验者优先 5. 熟练使
-
hadoop 添加kerberos认证
转载自:http://blog.chinaunix.net/uid-1838361-id-3243243.html 关于： hadoop的安全机制 hadoop kerberos的安全机制 参考Cloudera官方文档：Configuring Hadoop Security in CDH3 一、部署无kerberos认证的Hadoop环境 参考另一篇笔记：hadoop集群部署 或者按照Cloudera的官方文档：CDH3 Installation Guide. 二、环境说明 1、主机名 之前部署hadoop集群时，没有使用节点的hostname，而是在hosts文件里添加了ip要域名的解析，部署后的hadoop没有问题，但是在为集群添加kerberos认证时因为这一点，遇到很多的问题。所以，
-
每日一文：hadoop软文分享
Hadoop的大数据分析技术以及未来发展趋势 2014是一个IT风云变幻莫测的一年，传统的行业都积极走向了互联网，从MWC大会闭幕我们可以看出未来互联网比拼的再也不是硬件而是“软”实力了。来自多个渠道的信息显示，阿里巴巴集团近期正与携程旅行网洽谈投资入股事宜。如果合作交易最终达成，将标识着在线旅游业也进入了百度、阿里巴巴、腾讯（BAT）三巨头阵营划分下的寡头竞争时代。BAT各自都在整合自己的产业链，未来大数据处理直接带动整个行业，目前整个IT行业也趋向于大数据和商业智能（BI），大数据带来的潜在商业价
-
OGEM Solids Control Mud Mixing Tank & Solids Control to Indonesia
solids control equipment http://chinesesolidscontrol.blogspot.com/solids control http://www.ogemsolidscontrol.com/solids control system http://www.hbequipments.com/
-
在Windows下部署和运行hadoop
在Windows下部署hadoop前，都需要安装cygwin软件，那么我们先来看一下，如何安装和配置cygwin 一、cygwin的安装与配置 1、什么是cygwin cygwin是一个在windows平台上运行的unix模拟环境，是cygnus solutions公司开发的自由软件（该公司开发了很多好东西，著名的还有eCos，不过现已被Redhat收购）。它对于学习unix/linux操作环境，或者从unix到windows的应用程序移植，或者进行某些特殊的开发工作，尤其是使用gnu工具集在windows上进行嵌入式系统开发，非常有用。随着嵌入式系统开发在国内日渐流行，越来越多的开发者对cygwin
-
Windows 7 蓝屏代码解读和解决办法
蓝屏代码***STOP 0x0000001E(0xC0000005，0xFDE38AF9，0x0000001，0x7E8B0EB4） KMODE_EXCEPTION_NOT_HANDLED ***上面一行解释：第一部分是停机码(Stop Code)也就是STOP 0x0000001E，用于识别已发生错误的类型错误。第二部分是被括号括起来的四个数字集， 表示随机的开发人员定义的参数(这个参数对于普通用户根本无法理解，只有驱动程序编写者或者微软操作系统的开发人员才懂)。第三部分是错误名。信息第一行通常用来识别生产错误的驱动程序或者设备。这种信息多数很简洁，但停机码可以作搜索
-
京东大数据R语言应用-笔记
一：基础知识1：R的统计功能（已经实现现有及未来的统计模型）探索性语言？2：R的功能扩展包，基本覆盖了高级语言的功能，抽数，过滤，计算，图形，网络3：R与Hadoop的并行集群处理大数据，需要额外编程，实际运用少4：R自身的扩展包进行单机处理大数据，加速内核包，内存计算,向量化编程加速,GPU计算5：数据流：DB和log->清洗和预处理二：商业应用-电商分析1：广告位指标，特点分析，点击2：某品类下，评论突出指标（统计），识别出一些问题，算P值，求均值3：好评/差评分析4：兴趣模型，单个用户比较喜欢买哪几类商品。浏览次序
-
MapReduce流程分析(R1)
转载地址：http://blog.csdn.net/jackydai987/article/details/6227365接触Hadoop已经1年了，一直没时间好好学习下。这几天打算好好研究下Hadoop.本来是想打算改写下TextInputFormat。看了源码后，反而更迷糊了。所以干脆连MapReduce的整个流程写下来。也当为这几天的学习作个总结。先来一个我们常写的main函数。...
-
腾讯大规模Hadoop集群实践
TDW是腾讯最大的离线数据处理平台。本文主要从需求、挑战、方案和未来计划等方面，介绍了TDW在建设单个大规模集群中采取的JobTracker分散化和NameNode高可用两个优化方案。
-
《大数据技术全解：基础、设计、开发与实践》
《大数据技术全解：基础、设计、开发与实践》 基本信息 作者： 杨巨龙 出版社：电子工业出版社 ISBN：9787121223433 上架时间：2014-2-21 出版日期：2014 年1月 开本：16开 页码：376 版次：1-1 所属分类：计算机 > 数据库 > 数据库存储与管理 更多关于》》》 《程序员2013精华本》 内容简介 书籍 计算机书籍 “大数据”一词已成为当下最热门的词汇之一。人们热切期待大数据能给工作、学习和生活等方面带来前所未有的变化，而大数据的采集、存储、
-
java编程之简单猜数游戏
public class GussNumber1 extends JFrame {/*** */private static final long serialVersionUID = 1L;int randInt=0;int userInt=0;JLabel label1;JLabel label2;JTextField numJtf;JButton okBtn;void GuessNumber1(){setLayout(new FlowLayout());randInt=(int)(Math.random()*100);label1=new JLabel("请输入1到100的整数：");label2=new JLabel("猜猜看！");numJtf=new JTextField(12);okBtn=new JButton("确定");add(label1);add(numJtf);add(okBtn);add(label2);setSize(300,200);//窗口大小setVisible(true);ok
