Linux-Memory小记
以前我对这块认识很模糊,而且还有错误的认识;今天由我同事提醒,所以我决定来好好的缕缕这块的关系。图: -------------------------------------------1.参数含义-----------------------------------------------------------------------Mem:表示物理内存统计 total: 表示系统总物...
2016年大数据80篇爆款文章:这一年你追过的那些技术
2016年即将过去,各位大数据的程序员们,是否觉得这一年都不断的追着新技术跑?这个大数据公众号是今年一月底创立的,一年过去,我们积累了不少好内容。回过头来我们看看这一年的脚印,这里我按照文章内容做了一次汇总,分为:流处理、机器学习、用户画像、数据驱动、Hadoop、Apache Spark、Apache Kylin、Druid、推荐系...
PostgreSQL小记
当前环境: PostgreSQL 9.5.1 CentOS 6.5 1.查看当前客户端连接数 #查询当前的连接的pidselect pg_backend_pid(); #查看表结构,pg_stat_activity是一个系统视图\d+ pg_stat_activity #查看当前连接总数ps -ef|grep -v grep |grep postgres |grep "idle" | wc -ls...
PostgreSQL索引页
磨砺技术珠矶,践行数据之道,追求卓越价值 [作者 高健@博客园 luckyjackgao@gmail.com] 本页目的,是起到索引其他所有本人所写文档的作用: 分类一:PostgreSQL基础知识与基本操作-------------------- PostgreSQL基础知识与基本操作索引页 分类二:P...
大数据之MySQL基础(含Linux)
百度云链接:?? http://pan.baidu.com/s/1gfaBoSr???? 密码:7v9p
MySQL的leftjoin、rightjoin、innerjoin的案例
举例如下: 点击(此处)折叠或打开 CREATE TABLE a( aID int, aNum char(20) ) ;CREATE TABLE b( bID int, bName char(20) ) ;...
MySQL字段类型小记
这里先总结数据类型。MySQL中的数据类型大的方面来分,可以分为:日期和时间、数值,以及字符串。下面就分开来进行总结。 1.日期和时间数据类型 MySQL数据类型 含义 date 3字节,日期,格式:2014-09-18 ...
Linux tar压缩和解压缩等命令
1.tar-c: 建立压缩档案-x:解压-t:查看内容-r:向压缩归档文件末尾追加文件-u:更新原压缩包中的文件2.这五个是独立的命令,压缩解压都要用到其中一个,可以和别的命令连用但只能用其中一个。下面的参数是根据需要在压缩或解压档案时可选的。-z:有gzip属性的-j:有bz2属性的-Z:有compress属性的-v:显示所有...
CentOS最常用命令及快捷键整理
常用命令:文件和目录:# cd /home 进入 '/home' 目录# cd .. 返回上一级目录# cd ../.. ...
VMware Workstation9 下安装 CentOS6.5( 安装图文教程 )
一、下载CentOSer6.5镜像文件https://pan.baidu.com/s/1pKZEUJD 二、创建新的虚拟机,命名CentOS6.51、在VMware Workstation 9 主页中选择“Create a New Virtual Machine”,创建新的虚拟机。 2、选择“Custom(advanced)“,自定义(高级)配置。 3、默认,下一步 4、选择“I wil...
记录配置HDFS HA后,hive抛错Wrong FS
1.问题:在CDH5.x或者Apache环境下,配置了NameNode的HA后,Hive无正常查询数据了。Hive查询会出现如下异常:点击(此处)折叠或打开FAILED: SemanticException Unable to determine if hdfs://hadoop-01:8020/user/hive/warehouse/t1 is encrypted: j...
参加“谛听金融大数据产品”的开发,赢得了IBM Spark全球大赛的中国大奖
项目可视化web:http://diting.tech/diting/视频与代码: http://diting.tech/diting/download_contact.html微信博文原处: http://mp.weixin.qq.com/s/ExfdB2ApLTfv6oYyxvH81g
CentOS6.x使用163和epel yum源的选择
注:操作系统 CentOS 6.X ,CentOS 5.X EPEL,即Extra Packages for Enterprise Linux(http://fedoraproject.org/wiki/EPEL) 是由 Fedora 社区打造,为 RHEL 及衍生发行版如 CentOS、Scientific Linux 等提供高质量软件包的项目。在这里可以获得 RHEL 的高质量、高性能、高可靠性、免费、方便易用的软件包。 今天...
正式开通GitHub啦
主要近期想要做一些代码的项目的学习,所以开通GitHub,当然ItPub 博客我也会接着写,写的不好,希望大家海涵!地址:https://github.com/Hackeruncle
Centos6.5 python2.6.6 升级到2.7.5
查看python的版本 [plain] view plain copy print? #python -V Python 2.6.6 1.下载Python-2.7.5至/usr/local/[plain] view plain copy print? ...
记录 libldap-2.4.so.2: cannot open shared object file: No such file or directory
1.背景: 卸载openldap相关的所有rpm包后,出现libldap-2.4.so.2: cannot open shared object file: No such file or directory [root@sht-sgmhadoopcm-01 ~]# rpm -qa|grep openldap openldap-2.4.23-32.el6_4.1.x86_64 openldap-devel-2.4.23-32.el6_4.1.x86_64 openldap-clients-2.4.23-32.el6_4.1.x86_64 ope...
CDH集群机器,安装多个CDH版,会出现命令找不到,如hadoop,hdfs等等
1.想使用hadoop命令,发现无效[root@hadoopnn-01 ~]# which hadoop/usr/bin/which: no hadoop in (/usr/java/jdk1.7.0_67-cloudera/bin:/usr/java/jdk1.7.0_67-cloudera/bin:/usr/lib64/qt-3.3/bin:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin)2.进/usr/bin/目录查看hadoop[root@hadoop...
CDH5.8.2之Enabling NTP
一.问题 CDH requires that you configure the NetworkTime Protocol (NTP) service on each machine in your cluster. To start NTPand configure it to run automatically on reboot, perform the following steps oneach node in your cluster. 报错: 1)此角色的主机的运行状况为不良...
Redis3.2.5部署(单节点)
1.安装jdk1.8 [root@sht-logstash-01~]# cd /usr/java/ [root@sht-logstash-01java]# wget --no-check-certificate --no-cookies --header "Cookie:oraclelicense=accept-securebackup-cookie" http://download.oracle.com/otn-pub/java/jdk/8u111-b14/jdk-8u111-linux-x64.tar.gz [root@sht-l...
ELK之简介
一.简介 1. 核心组成 ELK由Elasticsearch、Logstash和Kibana三部分组件组成; Elasticsearch: 个开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,restful风格接口,多数据源,自动搜索负载等。 Logstash: 一个完全开源的工具,它可以对你的日志进行收集、...