CentOS 6.7下yum方式安装MySQL 5.6
这两天突然有了动手操作一下MySQL日常管理和备份恢复基础命令的想法,就开始前后在windows和linux上进行安装和部分测试。如下为linux上的yum方式安装特定版本的笔记。
Mysql导出文件及备份操作笔记
之前连接mysql时,有时会遇到连接错误。虽然看过关于mysql的部分资料,但因没有实际操作原因,心理还是有点陌生感。最近决定对Mysql数据库基础操作做一些操作实践笔记,以便碰到mysql相关数据库场景时心里有数。接下来是对导出功能做的一些测试及学习笔记。
用python客户价值分析案例一则
一个完整的数据分析项目由如下几个步骤组成:1)数据获取:分为本地文本文件、数据库链接、爬虫技术等方式获取数据;2)数据存储:存到本文本文件、数据库、分布式文件系统等;3)数据预处理:据经验,占80%的工作量。可以使用Numpy和Pandas这两个工具库;4)建模与分析:这一阶段首先要清楚数据的结构,结合项目需求来选取模型,常见的数据挖掘模型有如下图所示: &nbs
sklearn建模及评估(回归)
回归算法的实现过程与分类算法类似,区别在于分类算法的标签是分离散的(字符型分类而不是数值性),而回归算法的标签是连续的(数值性)。常用的有linear_model、svm、neighbors、tree、ensemble(RandomForestClassifier)、ensemble(GradientBoostingClassifier)等。 &nbs
sklearn建模及评估(分类)
分类是指构造一个分类模型,输入样本的特征值,输入出对应的类别,将每个样本映射到预先定义好的类别。Sklearn中分类算法很多,用于不同场景,常用的有linear_model、svm、neighbors、naïve_bayes、tree、ensemble(RandomForestClassifier)、ensemble(GradientB
sklearn建模及评估(聚类)
作为机器学习工具的sklearn,它主要作用是构建模型和评估。其主要的模型分为聚类、分类、回归等,而没有模型也有适应不同场景的多个算法。接下来我们从这几点进行简要总结。1、聚类模型 聚类的输入是一组未被标记(所谓target值或lable)的样本,聚类根据数据自身的距离或相似度将它们划分为若干组。
sklearn基础及数据处理
sklearn库整合了多种机器学习算法,可在数据分析过程快速建立模型。通过pandas库虽然已经提供数据合并、清洗、标准化(离差标准化、标准差标准化、小数定标标准化),为构建机器学习模型对数据特征还需处理更多预处操作,因此sklearn将相关预处理功能封装为统一接口---转换器(Transformer)。使用sklearn转换器能够实现对传入的NumPy数组进行标准化处理
python入门总结(数据分析方向)
随着Python自身功能的完善以及生态系统的扩展,Python在Web开发、网络爬虫、数据分析与数据挖掘、人工智能等应用方面逐渐崭露头角。回顾phthon演变史,主要如下介个阶段:
python入门总结(数据分析方向)
随着Python自身功能的完善以及生态系统的扩展,Python在Web开发、网络爬虫、数据分析与数据挖掘、人工智能等应用方面逐渐崭露头角。回顾phthon演变史,主要如下介个阶段:
python环境链接Oracle数据库
最近开始学python,发现链接Oracle数据库也是非常简单。如下代码链接成功前提是在配置之前需要安装Oracle客户端程序。
在Oracle11g RAC环境下处理ORA-00845错误案例
因机房空调停电原因机房温度过高而导致两个节点的Oracle11G RAC数据库服务器自动关机。等启动服务器后,发现数据库起不来,如题如下: [oracle@DB-2 ~]$sqlplus / as sysdbaSQL*Plus: Release11.2.0.1.0 Production on Wed Aug 2 10:35:31 2017Copyright (c) 1982,2009, Oracle. All...
将Oracle数据库改为归档模式并启用Rman备份
如下Linux环境下对单节点数据库采用文件系统情况的配置归档模式过程。 首先查看数据库归档模式和磁盘使用情况,确定归档文件放到什么位置:[oracle@gisdbserver~]$ sqlplus / as sysdbaSQL> archive loglistDatabase logmode &n...
奈奎斯特定理和香农定理
奈奎斯特定理(Nyquist's Theorem)和香农定理(Shannon's Theorem)是网络传输中的两个基本定理。这两天复习无线网络,想想就从基础开始吧,把复习的东西用文字写下来,总结一下,整理一下思路。 要搞清楚这两个定理,我们要先弄懂一些定义:波特率(baud rate)、比特率(bit rate)、带宽(bandwidth)、...
TCP/IP四层模型
TCP/IP参考模型源文档 <http://www.cnblogs.com/BlueTzar/articles/811160.html> ISO制定的OSI参考模型的过于庞大、复杂招致了许多批评。与此对照,由技术人员自己开发的TCP/IP协议栈获得了更为广泛的应用。如图2-1所示,是TCP/IP参考模型和OSI参考模型的对比示意图。 &nbs...
查看RMAN备份进度的两条SQL
近期在生产系统重新部署DG时网上收集发现如下两条SQL还是挺好用的,在此作为记录分享一下。<br />SELECT SID,<br /> SERIAL#,<br /> CONTEXT,<br /> SOFAR,<br /> TOTALWORK,<br /> ...
令DBA迷惑的共享池核心概念总结(一)
我们知道shared _pool非常重要,在自动管理的环境情,可能会被其他的内存组件占用shared_pool的空间,当shared_pool空间不够时会引发各种各样的问题。在自动管理内存的环境下也可以定义各种组件的大小,这时候的定义是表示一个组件的最小值。所以建议给shared_pool_size手动设置一个最小值,这样保证shared_pool不...
Oracle读取和修改数据块的过程
Oracle读取和修改数据块的过程 Oracle数据库处理SQL都会经过三个过程:解析(parse)、执行(exec)、返回结果(fetch)。为了便于理解,我们首先省略的SQL的处理过程,而直接介绍数据块的读取或修改过程。 物理读和逻辑读概念 1.对要访问的块地址做HASH HASH(FILE#,BLOCK#) = hash_value(HV)...
定位热链和热块的方法
定位热链的方法declare v_num number;begin for i in 1..1000000 loop select ...
数据缓冲区热链和热块争用及解决方法
CBC LATCH争用(热链)latch:cache buffers chains多个server_process同时以排他模式访问了同一个CBClatch管辖的资源时出现。这个资源:可以是不同bucket中的不同buffer可以是相同bucket中的不同buffer可以是相同bucket中的相同buffer解决方法:1.唯一索引 2.加大buffer_cache内存,目的是将bucket数量增加,CBC l...
mysqldump常用备份恢复方法
一、使用mysqldump对数据库进行备份1. 全备份单库: 语法: mysqldump -h主机名 -P端口 -u用户名 -p密码 数据库名 > 文件名.sql 例子: [mysql@sam ~]$ mysqldump -hlocalhost -P3306 -ur...