-
编辑 删除
Linux下使用Jmeter进行性能测试
一、Linux下安装Jmeter1. Linux下首先安装Jdk；2. 下载apache-jmeter-2.13.tgz，复制到Linux系统中的/opt目录下；3. 解压apache-jmeter-2.13.tgz：tar -zxvf apache-jmeter-2.13.tgz4. 配置Jmeter的环境变量： vi /etc/profile；5. 添加下述两...
-
编辑 删除
JVisualVM之GC插件+错误"not supported for this jvm"+命令jstatd
插件安装tools->plugin->Available Plugin 会有值得安装的插件，如：VisualGC 插件列表：https://visualvm.dev.java.net/plugins.html注意：上面提供的端口配置有些麻烦，不如直接这样做： 要使用 VisualGC 必须在远程机上启动jstatd代理程序，否则会显示 “not supported for this jvm”...
-
编辑 删除
Java程序性能分析工具Java VisualVM（Visual GC）
VisualVM 是一款免费的\集成了多个JDK 命令行工具的可视化工具，它能为您提供强大的分析能力，对 Java 应用程序做性能分析和调优。这些功能包括生成和分析海量数据、跟踪内存泄漏、监控垃圾回收器、执行内存和 CPU 分析，同时它还支持在 MBeans 上进行浏览和操作。在内存分析上，Java VisualVM的最大好处是可通过安装...
-
编辑 删除
CDH4/5配置文件之深度解析
一.目录 B.重启MapReduce单个服务 只更新/var/run/cloudera-scm-agent/process/*目录 #因为只重启MapReduce服务，没有重启其他服务，如Hive,所以就只更新MapReduce 四.个人理解总结: cm web界面修改------>数据库表configs表...
-
编辑 删除
Flume1.6.0之Error-protobuf-This is supposed to be overridden by subclasses
Error-protobuf-This is supposed to be overridden by subclasses,flume,protobuf
-
编辑 删除
Hadoop2.7实战v1.0之Flume1.6.0搭建(Http Source-->Memory Chanel --> Hdfs Sink)
hadoop,flume,http source,hdfs,sink
-
编辑 删除
Hadoop2.7实战v1.0之JVM参数调优
Hadoop正式上线之前，首先要调整的是各个进程的JVM参数设置，特别是对于HDFS Namenode来说。HDFS的JVM参数配置文件: hadoop-env.sh Namenode进程的JVM配置: HADOOP_NAMENODE_OPTS Datanode进程的JVM配置: HADOOP_DATANODE_OPTS client命令行的JVM配置: HADOOP_CLIENT_OPTS对于Namenode而言, 由于元数据存...
-
编辑 删除
CCAH-CCA-500-6题:You want YARN to launch no more than 16 containers per node.
6.What should you do?Each node in your Hadoop cluster, running YARN, has 64GB memory and 24 cores. Your yarn.site.xml has the following configuration:<property><name>yarn.nodemanager.resource.memory-mb</name><value>32768</value></property><property><name>yarn.nodemanager.resource.cpu-vcore...
-
编辑 删除
CCAH-CCA-500-5题:How will the Fair Scheduler handle these two jobs?
5.How will the Fair Scheduler handle these two jobs?You have a cluster running with the fair Scheduler enabled. There are currently no jobs running on the cluster, and you submit a job A, so that only job A is running on the cluster. A while later, you submit Job B. Now Job A and Job B are ru...
-
编辑 删除
MapReduce工作原理图文详解
1.MapReduce作业运行流程下面贴出我用visio2010画出的流程示意图： 流程分析：1.在客户端启动一个作业。2.向JobTracker请求一个Job ID。3.将运行作业所需要的资源文件复制到HDFS上，包括MapReduce程序打包的JAR文件、配置文件和客户端计算所得的输入划分信息。...
-
编辑 删除
Cloudera编译好的各种hadoop,oozie等组件压缩包URL
cloudera
-
编辑 删除
CCAH-CCA-500-4题:Where are Hadoop task log files stored?
CCAH,cca-500,cdh
-
编辑 删除
CCAH-CCA-500-3题:Table schemas in Hive are?
CCAH,hive,schematool
-
编辑 删除
Hadoop2.7实战v1.0之Linux参数调优
hadoop,tuning,调优,cdh4,cdh5
-
编辑 删除
CCAH-CCA-500-2题:what is the maximum number of NameNode daemons.....
ccah,cca-500
-
编辑 删除
CCAH-CCA-500-1题:What is the maximum amount of virtual memory allocated......
CCAH,CCA-500
-
编辑 删除
alternatives命令用法
alternatives是Linux下的一个功能强大的命令。只能在root权限下执行。如系统中有几个命令功能十分类似，却又不能随意删除，那么可以用 alternatives 来指定一个全局的设置。alternatives常用于同一个系统中安装同一软件的多个版本。比如为了开发需要，我需要安装JDK1.4.2，同时还需要JDK1.6.10，我怎么样才能忽略安装路径...
-
编辑 删除
Hadoop2.7实战v1.0之Hive-2.0.0+MySQL远程模式安装
hadoop,hive
-
编辑 删除
CDH5之Found class jline.Terminal, but interface was expected
一.背景: 公司CDH5集群已经部署完毕,需要通过web界面添加hive组件,一般来说通过web界面来添加,会报两个错误,一个是配置hive的元数据的/usr/share/java/mysql-connector-java.jar驱动包,还有一个错误就是如图: 二.错误明细: ++ exec /opt/cloudera/parcels/CDH/lib/hadoop/bin/hadoop j...
-
编辑 删除
CDH5之Exhausted available authentication methods
1.机器环境:前几天,要在 阿里环境装两套CDH的产品环境,其中一套CDH5在安装过程就抛错"Exhausted available authentication methods" 其中的抛错的机器是运维从stage环境机器上,copy的镜像做的新的机器。2.在哪步出错: 在安装CDH5过程中，输完hadoop用户和密码的下一步(集群安装)，web开始刷新数据源抛错: Exhaust...
