-
Hadoop学习小结（3）.Hadoop的环境配置
1.集群部署介绍 1.1hadoop介绍 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。 对于Hadoop的集群来讲，可以分成两大类角色：Master和Salve。一个HDFS集群是由一个NameNode和若干个DataNode组成的。其中NameNode作为主服务器，管理文件系统的命名空间和客户端对文件系统的访问操作；集群中的DataNode管理存储的数据。M
-
光盘读不出来怎么办
光盘是用来存储数据的一种物品，例如我们看以前看的DVD就是以光盘的形式存储的，不过小编经常使用的光盘是系统光盘，用来做系统的，不管什么光盘都会面临这样一种问题，不读盘，相信不少使用光盘的用户深有体会，那么遇到这种情况我们应该怎么办呢？ 方法/步骤 1 光盘读不出来莫过于读盘的光驱和光盘本身的问题，首先我们先来看光盘是否有问题。购买光盘的时候很容易购买到盗版劣质光盘，因为盘片本身的质量很差，从而导致光驱无法识别，出现不读盘的现象，我们可以拿到其他的光驱上试试，如果
-
怎样修改pdf文件的文字内容
pdf文件由于无关操作系统平台，良好的跨平台特性能节省时间、人力、设备和成本等资源，在办公文档和开发文档领域得到广泛应用。很多初涉职场或是初用pdf文件的人，往往为修改pdf文件的文字内容而苦恼。 工具/原料 adobe acrobat 8 方法/步骤 1 如果需要整页修改文字内容，可以在word等软件里把目标文字内容编辑好，然后再在adobe acrobat里进行插入操作。如下图1所示，在“文档”菜单下，如果要在当前页面之前插入大幅文字内容，则选“插入页面”，若是要替
-
怎么使用u盘安装系统
随着光驱的光荣下岗，光盘安装系统已经逐渐退出了历史的舞台，取而代之的就是U盘安装系统，对于这个新兴事物可能很多朋友还不是很了解，其实小编也是最近才使用的U盘安装系统，下面就跟随小编一起来看看到底怎么使用U盘安装系统吧。 制作U盘启动盘 1 制作U盘启动需要制作工具，关于U盘制作启动盘的工具很多，大家可以根据自己的喜好进行选择（小编就以自己使用的大白菜为例），下载制作软件的时候一定要小心，最好到它们的官方网站进行下载。 2 下载和安装都比较简
-
Hadoop文档
http://hadoop.apache.org/docs/r0.19.2/cn/index.html 转发至微博 转发至微博
-
小米2刷机教程分享
刚买的小米2，还不会怎么用的，这里教你如何进行小米2的刷机过程，欢迎大家评价。 工具/原料 小米2一部 方法/步骤 1 首先遇到的是进入Recovery的方法，这个按照教程来 从系统更新里面进。 2 重启进入Recovery 音量为选择键 电源为确认键 （和米1一样）选择第二项清除数据子菜单我选择的是清空所有数据 其他应该也可以吧 不过根据教程来说 数据一定要清空 不然貌似有变砖的可能
-
使用hadoop进行大规模数据的全局排序
http://stblog.baidu-tech.com/?p=397 1. Hellow hadoop~~! Hadoop（某人儿子的一只虚拟大象的名字）是一个复杂到极致，又简单到极致的东西。 说它复杂，是因为一个hadoop集群往往有几十台甚至成百上千台low cost的计算机组成，你运行的每一个任务都要在这些计算机上做任务的分发，执行中间数据排序以及最后的汇总，期间还包含节点发现，任务的重试，故障节点替换等等等等的维护以及异常情况处理。谁叫hadoop集群往往都是由一些平民计算机组成，没事儿罢个工什么的，实在是再寻常不过的事情。 而说其简单，则是因为，
-
Web Portal的基本认证过程
Portal认证方式具有：不需要安装认证客户端， 减少客户端的维护工作量、；便于运营，可以在Portal页面上开展业务拓展、 技术成熟等优点而被广泛应用于运营商、学校等网络。 目前在公共场合也有很多的WIFI热点.WIFI本身不加密,但是当用户访问网络的时候,会要求用户输入用户名和密码.认证成功后就可以上网了.WEB认证的特点显而易见,就是不需要特殊的客户端,有浏览器就可以了.所以,手机也可以方面的使用. 方法/步骤 1 用户连接到网络后，终端通过DHCP由
-
单反相机入门教程
为初玩摄影的朋友支招! (还没买相机而准备玩摄影的朋友的应该看看以下内容!) 方法/步骤 1 1、 不要在接触摄影之前去反复琢磨自己主要拍什么次要拍什么不会去拍什么,想也是白想,更不要以此得出个什么结论而去决定买什么器材了.100%的人不会在学会开车之前问自己会去哪条街不会去哪条胡同一辈子出几次车祸闯几回红灯.摄影的道路是在未知中,依靠兴趣探索前进的,完全不必人云亦云,附庸风雅. 2 2 、不要迷信要拍好某种题材就一定要装备某
-
matlab并行计算
在实验室电脑上使用matlabpool总是报错：The interactive parallel job finished without any messages. 解决方案如下： http://www.mathkb.com/Uwe/Forum.aspx/matlab/153781/matlabpool-open-failure 在使用matlabpool之前使用如下语句： distcomp.feature( 'LocalUseMpiexec', false ) It's OK!
-
【新手指导】从数据分析师笔试试题看职业要求
【编者注】以下试题是来自阿里巴巴2011年招募实习生的一次笔试题，从笔试题的几个要求可见数据分析职业要求。 文章原文发布在：http://www.itongji.cn/article/111913C2012.html 一、异常值是指什么？请列举1种识别连续型变量异常值的方法？ 异常值（Outlier）是指样本中的个别值，其数值明显偏离所属样本的其余观测值。在数理统计里一般是指一组观测值中与平均值的偏差超过两倍标准差的测定值。 Grubbs’ test（是以Frank E. Grubbs命名的），又叫maximum normed residual test，是一种用于单变量数据集异常值识别的统计检测，
-
directx9.0c怎么用
DirectX它是由微软公司开发的用途广泛的API，它包含有众多组件（Direct Graphics(Direct 3D+Direct Draw)、Direct Input、Direct Play、Direct Sound、Direct Show、Direct Setup、Direct Media Objects等），它提供了一整套的多媒体接口方案。 方法/步骤 1 DirectX的众多组件中，在3D图形方面的表现尤其优秀，而今已发展成为对整个多媒体系统的各个方面都有决定性影响的接口，在PC电脑端的大型游戏是必须需要安装DirectX的。 2 DirectX安装到你的操作系统中以后一般不需要设置的，但
-
提“纯”大数据
大数据带来大商机。IBM推出一系列解决方案和PureData，帮助用户从中发现商机，Pure系统正在让大数据更有价值，更纯粹。 大数据为什么增长如此快?原因是科技在快速发展。云计算每年以90%的速度增长，按照这个速度计算，在今年年底，所有企业的数据将达到2.7ZB，这个数据与去年同期相比，增长了一倍。 这些数据是在今年10月底，IBM IOD(Informationon Demand，信息随需而变)大会中透露出来的。 像往年一样，IBM每年在这个时候召开IOD大会。今年是自2006年以
-
hadoop源码分析之MapReduce 阿-
hadoop的源码已经粗看过一遍,但每次想要了解细节的时候,还得去翻代码. 看了又是忘记. 所以我决定这些天把其中的重要的细节记下来。 声明： 1. 本文假设读者已经掌握一些MapReduce的基本概念,曾经编写过MapReduce程序。 2. 此源代码分析是基于hadoop svn的trunk之上(目前0.20.0-dev),由于hadoop正在换新的MapReduce api(org.apache.hadoop.mapreduce包), 以后很多类会弃用,很多接口会改变,这儿只能尽量保持同步。 3. 关于hdfs源代码可以参考caibinbupt的hdfs源代码分析 ,这儿就不再详述。 4. 这篇文章是基于javen 的分
-
怎么制作电子纪念册
随着时代的进步，人们的生活已经发生了飞越性的变化，也随之出现了很多电子类产品，比如电子地图、电子小说、电子相册等。说到电子相册，它较之传统相册有着无法比拟的优越性，永不褪色的恒久保存性是传统相册永远无法具备的。电子相册制作软件的好坏判断，其实并不是功能如何繁多，而是操作的人性化和效果精美度，接下来我就为大家介绍一款非常不错的电子相册制作软件狸(li)窝照片制作视频软件. 工具/原料 狸(li)窝照片制作视频软件 Powerpoint2010 图片
-
用菊子曰离线更新Zblog 2.0设置详解
注意事项 菊子曰是一个很好的软件，但最近却收到开发团队的消息，“由于经营不善，我们决定解散菊子曰开发团队，并且从即日起不再更新菊子曰了。”很可惜，希望团队能将该软件开源，让软件继续走下去。
-
怎么下载视频到手机里
视频是当前网络平台的一门热门应用模块，很多人每天电脑在线看视频，但是经常有些朋友想将视频下载到手机端进行播放，方便在床上，在外地等观看。可是怎么下载视频对于一些新手朋友来说是一个难题，这篇经验就以诺基亚C503机型为例子介绍一下怎么下载视频到手机里 工具/原料 迅雷下载软件 稞麦综合视频下载器 计算机，诺基亚C503手机，数据线等 一：下载网页视频 1 x下载网页视频诸如优酷等在线播放的视频，我们可以使
-
mysql大数据量下修改表结构的方法
当表数据量是几百万条以上时，如果要修改原表结构，比如给原表加个列字段，同时在这个表上加索引。 请勿使用以下方式： alter table video_names add column type VARCHAR(255) NOT NULL, add index(type) 原因是： 经过实际测试，表数据量是800多万条，运行上述语句时，几个小时执行不完。 正确方式： 1、创建一个新表tmp_names 2、执行insert into tmp_names(****) select ***** from video_name; 3、删除video_names 4、重命名tmp_name为video_names;语句为rename table tmp_names to video_names; 转载自：http://www.blogjav
-
dnf武斗大会门票怎么获取
《地下城与勇士》是一款韩国网络游戏公司NEOPLE开发的免费角色扮演2D游戏，由三星电子发行，并于2005年8月在韩国正式发布。该游戏是一款2D卷轴式横版格斗过关网络游戏 (MMOACT)，大量继承了众多家用机、街机2D格斗游戏的特色。以任务引导角色成长为中心，结合副本、PVP、PVE为辅，与其他网络游戏同样具有装备与等级的改变，并拥有共上千多种装备道具。每个人物有最多12个道具装备位置，在游戏中可以允许最多4个玩家进行组队挑战关卡，同样也可以进行4对4的PK。 dnf武斗大会
-
Facebook社交网Hadoop集群工作原理及故障迁移技术
摘要：我们知道，Facebook使用Hadoop来进行大数据的处理，但Facebook又是如何保障频繁、庞大的数据请求等高压环境下不发生故障的呢?我们一起来了解一下Facebook内部的Hadoop使用情况以及其NameNode故障转移技术。 据统计，在短短的60秒内，Facebook的用户会分享684478条信息，Like按钮被点击34772次。社交网络庞大的业务量时刻考验着Facebook的数据处理能力。我们知道，Facebook使用Hadoop来进行大数据的处理，但Facebook又是如何保障频繁、庞大的数据请求等高压环境下不发生故障的呢?我们一起来了解一下Fa
