ITPub博客

　　好程序员web前端学习路线分享css3中的渐进增强和降级，渐进增强和降级这两个概念是在 CSS3 出现之后火起来的。由于低级浏览器不支持 CSS3，但是 CSS3 特效太优秀不忍放弃，所以在高级浏览器中使用CSS3，而在低级浏览器只保证最基本的功能。二者的目的都是关注不同浏览器下的不同体验，但是它们侧重点不同，所以导致了工作流程上的不同。　　渐进增强（Progressive Enhanceme

　　好程序员大数据学习路线分享MapReduce全流程总结，首先，MapReduce是什么？干什么用的？　　MapReduce是一个基于yarn的分布式、离线、并行的计算框架，主要职责是处理海量数据集，是Hadoop生态圈中一个非常重要的一个工具，所以MapReduce是大数据学习的一个很关键的知识点，需要大家好好掌握！　　MapReduce其中包含许多组件，但最主要的还是Job提交和Map、Re

　　1.客户端或者用户通过调用FileSystem对象的Open()方法打开需要读取的文件，这时就是HDSF分布式系统所获取的一个对象　　2.FileSystem通过远程协议调用NameNode确定文件的前几个Block的位置，对于每一个block,NameNode返回一个含有Block的元数据信息，接下来DataNode按照上面定义的距离(offSet偏移量)进行排序,如果Client本身即是一

　　大数据学习路线分享Hadoop阶段的高可用配置，什么是Hadoop的HA机制　　Ha机制即Hadoop的高可用（7*24小时不中断服务）　　正式引入HA机制是从hadoop2.0开始，之前的版本中没有HA机制　　hadoop-ha严格来说应该分成各个组件的HA机制——HDFS的HA、YARN的HAHDFS的HA机制详解HDFS 的HA主要是通过双namenode协调工作实现双name

　　好程序员大数据学习路线之zookeeper干货，上周学习了zookeeper，一开始感觉不容易理解，后来随着学习的深入，渐渐地明白了很多知识，下面慢慢来介绍zookeeper。　　zookeeper是什么？？？　　zookeeper是一个分布式协调服务，就是为用户的分布式应用程序提供协调服务的。　　zookeeper是为其他的分布式程序提供服务的　　zookeeper本身就是一个分布式程序（只

　　好程序员大数据学习路线分享MapReduce全过程解析，移动数据与移动计算　　在学习数据的时候接触了移动数据和移动计算这两种联系紧密而又有很大不同的概念，其中移动计算也叫做本地计算。　　在以前的数据处理中时使用的移动数据，其实就是将需要处理的数据传输到存放不同处理数据方式逻辑的各个节点上。这样做的效率很低，特别是大数据中的数据量是很大的，至少都是GB以上，更大的是TB、PB甚至更大，而且磁盘

　　好程序员大数据学习路线分享AWK怎详解，awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。　　awk是在文件或者字符串中基于指定规则浏览和抽取信息，awk抽取信息后，才能进行其他文本操作。完整的awk脚本通常用来格式化文本文件中的信息

　　好程序员大数据学习路线分享hadoop常用四大模块文件　　1.1.1core-site.xml(工具模块)　　包括Hadoop常用的工具类，由原来的Hadoopcore部分更名而来。主要包括系统配置工具Configuration、远程过程调用RPC、序列化机制和Hadoop抽象文件系统FileSystem等。它们为在通用硬件上搭建云计算环境提供基本的服务，并为运行在该平台上的软件开发提供了所需

　　好程序员大数据学习路线Hadoop学习干货分享，Apache Hadoop 为可靠的，可扩展的分布式计算开发开源软件。Apache Hadoop软件库是一个框架，它允许使用简单的编程模型跨计算机群集分布式处理大型数据集（海量的数据）。包括这些模块： - Hadoop Common：支持其他Hadoop模块的常用工具。- Hadoop分布式文件系统（HDFS™）：一种分布式文件系统，可提供对应用

好程序员大数据学习路线分享函数+map映射+元祖，大数据各个平台上的语言实现hadoop   由java实现,2003年至今,三大块:数据处理,数据存储,数据计算存储: hbase --> 数据成表处理: hive --> 数据仓库的工具计算: mapreduce --> 入门级hive    java实现flink  

好程序员Java学习路线分享原生Ajax的使用，首先我们先来看一下什么是 AJAX        AJAX 是一种在无需重新加载整个网页的情况下，能够更新部分网页的技术。        AJAX 就是 异步、JavaScript 和 XML

　　好程序员Java学习路线分享实战Tomcat性能优化，前言，由于不同的硬件配置导致默认的tomcat配置无法达到最佳的性能，导致我们需要对tomcat的进行相应的配置调整。Tomcat内存优化配置信息：JAVA_OPTS=’-Xms1024m -Xmx2048m -XX: PermSize=256M -XX:MaxNewSize=256m -XX:MaxPermSize=256m’将以上配置信

　　好程序员Java学习路线分享JS中的面向对象，在JS中，一般情况下我们都是直接写函数，直接调用，但是发现JS中也有new关键字，那么new关键字作为创建对象的关键字，给我们的感觉就是在JS中可以定义一个类，然后用new创建对象，那么在JS中如何做呢？我们先看如下案例，下面的案例是写一个简单的喷泉效果的。window.onload = function(){// 创建一个画布对象 v

好程序员Java分享SpringMVC之@ResponseBody注解，本章我们学习到SpringMVC的服务器端如何提供数据查询服务，这里需要使用两个重要的注解：@ResponseBody和@RestController。@ResponseBody注解     在前面使用SpringMVC时，Controller中的方法返回值会通过视图处理器Vi

好程序员大数据学习路线分享分布式文件系统HDFS，设计目标：1、存储量大2、自动快速检测应对硬件错误3、流式访问数据4、移动计算比移动数据本身更划算5、简单一致性模型6、异构平台可移植特点优点：高可靠性：Hadoop按位存储和处理数据的能力强高扩展性：hadoop是在可用的计算机集簇间分配数据并完成计算任务的，这些集簇可以方便地扩展到数以千计的节点中高效性：hadoop能够在节点之间动态地移动数据

　　好程序员大数据学习路线分享MAPREDUCE，需求：统计大量的文本文件中的单词出现的次数- 1）整个运算需要分阶段- 阶段一：并行局部运算- 阶段二 ：汇总处理，不同的阶段需要开发不同的程序- 2）阶段之间的调用- 3）业务程序（task程序）如何并发到集群并启动程序- 4）如何监控task程序的运行状态，如何处理异常- ::这些问题是开发分布式程序都会面临的问题，完全可以封装成框架::MR

　　好程序员Java学习路线分享JDBC初体验，JDBC（Java DataBase Connectivity,java数据库连接）是一种用于执行SQL语句的Java API，可以为多种关系数据库提供统一访问，它由一组用Java语言编写的类和接口组成。JDBC提供了一种基准，据此可以构建更高级的工具和接口，使数据库开发人员能够编写数据库应用程序- Java 具有坚固、安全、易于使用、易于

　　好程序员大数据学习路线分享高阶函数，我们通常将可以做为参数传递到方法中的表达式叫做函数高阶函数包含：作为值的函数、匿名函数、闭包、柯里化等等。定义函数时格式：val 变量名 = (输入参数类型和个数) => 函数实现和返回值类型和个数“=”表示将函数赋给一个变量“=>”左面表示输入参数名称、类型和个数，右边表示函数的实现和返回值类型和参数个数作为值的函

　　好程序员大数据学习路线分享弹性分布式数据集RDD，RDD定义，RDD（Resilient Distributed Dataset）叫做分布式数据集，是Spark中最基本的数据抽象，它代表一个不可变(数据和元数据)、可分区、里面的元素可并行计算的集合。RDD的特点:自动容错,位置感知性调度和可伸缩性RDD的属性1.一组分片 即数据集的基本组成单位。对于RDD来说，每个分片都会被一个计算任务处理，

好程序员大数据学习路线分享scala单列和伴生对象scala单例object SingletonDemo {  def main(args: Array[String]): Unit = {    val s = SessionFactory    println(s.getSession)&nbs