架构设计
参考博客地址:http://blog.csdn.net/yinwenjie/article/details/48274255
fdisk 操作及挂载
参考链接:http://sookk8.blog.51cto.com/455855/335581/
ElasticSearch 2.3.3 java API操作二
点击(此处)折叠或打开import org.elasticsearch.action.search.SearchResponse;import org.elasticsearch.client.transport.TransportClient;import org.elasticsearch.index.query.QueryBuilders;import org.elasticsearch.search.aggregations.Agg...
ElasticSearch java api
参考:https://www.elastic.co/guide/en/elasticsearch/client/java-api/current/index.html
ES常用参数详解
来自:http://www.searchtech.pro/articles/2013/02/18/1361194291548.htmlelasticsearch的config文件夹里面有两个配置文 件:elasticsearch.yml和logging.yml,第一个是es的基本配置文件,第二个是日志配置文件,es也是使用log4j来记录日志的,所以logging.yml里的设置按普通log4j配置文件来设置就行了...
wget
wget下载文件,可以测试局域网内的网速
time bash
ime命令 用于 打印出一条命令或一个程序的执行时间time 命令以秒为单位将一条命令执行期间所用的时间、系统时间和 time 命令的执行时间打印在标准错误中。用法:time [ -p ] Command [ Argument ... ]举例:想知道 列举home文件夹这一命令 花费的时间: time ls /home &nb...
ElasticSearch 2.3.3 集群安装+ Marvel + kibana
1 . ElasticSearch 2.3.3 集群安装 注意:重点先从使用入手,使用起来后我们再说理论本文基于elasticsearch最新版搭建的 开发环境:redhat 6.4,三台机子:solr1 192.168.1.150solr2 192.168.1.151solr3 192.168.1.152elasticsearch的集群搭建相当简单,不...
ES插件常见问题
ES安装版本2.3.3, 直接使用${ES_HOME}/bin/plugin install mobz/elasticsearch-head 安装不上,总是报如下异常:Trying https://github.com/mobz/elasticsearch-head/archive/master.zip...Failed to install mobz/elasticsearch-head, reason: failed to download out of al...
hadoop hdfs 命令使用
参考链接:http://lxw1234.com/archives/2015/08/452.htm在HDFS中,提供了fsck命令,用于检查HDFS上文件和目录的健康状态、获取文件的block信息和位置信息等。fsck命令必须由HDFS超级用户来执行,普通用户无权限。[hadoop@dev ~]$ hdfs fsckUsage: DFSck [-list-corruptfileblocks | [-move | -de...
ElasticSearch 安装root用户启动失败问题解决
1. 下载ElasticSearch 2.3.32. 安装JDK 1.8.0以上版本3. ElasticSearch 安装时会出现 Exception in thread "main" java.lang.RuntimeException: don't run elasticsearch as root. 解决方法: 因为安全问题elasticsearch ...
Es集群搭建,及常用插件
http://my.oschina.net/xiaohui249/blog/228748
ElasticSearch CURD Sense 及常用操作
集群操作参考链接:http://zhaoyanblog.com/archives/732.html
hadoop 集群重启是出现Journalnode节点目录无法格式化问题
参考链接:http://blog.csdn.net/knowledgeaaa/article/details/23759099
storm 问题日志记录
5个worker1. Nimbus机器: work的内存设置太小,导致excutor无法启动2016-05-18T11:20:51.300+0800 b.s.d.nimbus [INFO] Executor wcd-3-1463540797:[12 12] not alive2016-05-18T11:20:51.300+0800 b.s.d.nimbus [INFO] Executor wcd-3-1463540797:[13 13] not alive2016-05-18T11:20:51.300+0800 b.s.d.nimbus...
avro处理hadoop上的小文件
参考链接:http://sishuok.com/forum/blogPost/list/6921.html
LRU缓存
参考链接:http://blog.csdn.net/beiyeqingteng/article/details/7010411
shell 操作mysql数据库
参考链接:http://blog.chinaunix.net/uid-23062171-id-5728835.html
HA手动切换方式及方法
参考链接:http://www.aboutyun.com/thread-13391-1-1.html 确定要转为active的namenode的id,这里将namenode1设为active,使用命令行工具进行状态切换:$HADOOP_HOME/bin/hdfs haadmin -failover --forcefence --forceactive nn2 nn1注意:此处“nn2 nn1”的顺序表...
hadoop hdfs 命令使用
参考链接:http://lxw1234.com/archives/2015/08/452.htm在HDFS中,提供了fsck命令,用于检查HDFS上文件和目录的健康状态、获取文件的block信息和位置信息等。fsck命令必须由HDFS超级用户来执行,普通用户无权限。[hadoop@dev ~]$ hdfs fsckUsage: DFSck [-list-corruptfileblocks | [-move | -de...