-
编辑 删除
使用PowerDesigner生成达梦数据库E-R图
PowerDesigner，达梦，E-R
-
编辑 删除
读后感----《数据驱动》从方法到实践
数据驱动
-
编辑 删除
利用powerdesigner生成E-R图
powerdesigner,e-r,information_schema
-
编辑 删除
关于“数据结构”的一点思考
数据结构
-
编辑 删除
linux下按月份过滤文件移动到指定文件夹
linux grep mv
-
编辑 删除
mysql 实现类似于oracle的merge语句
insert...select...on duplicate key update
-
编辑 删除
小结：《笨办法学python》
学习python
-
编辑 删除
解决max_connections最大为214的问题
mysql max_connections
-
编辑 删除
python高效处理-批量insert数据到mysql
2018年4月9日今天在帮助同事执行mysql数据库导出导入问题时，无意间发现，一个是通过客户端工具备份数据库，一个是通过mysqldump备份数据库，结果两者生成的文本相差一倍大小。于是很好奇分别打开看里面的内容，发现客户端导出的文本中，是完完整整的sql;而mysqldump的文本中sql 是合并的sql，即一个insert 后面带了很...
-
编辑 删除
mysql中类似oracle的over() row_number()的功能实现
mysql 分析函数
-
编辑 删除
python安装matplotlib
前提：环境： win x64.1、已经安装python2、已经安装pip #python -m pip install -U pip setuptools步骤：1、查看python中已经安装的模块C:\Users\Administrator>python -m pip list发现没有安装，接下来安装；2、安装matplotlibC:\Users\Administrator>python -m pip install matplotlib等待安装完成。3、验...
-
编辑 删除
《利用python进行数据分析》-安装pandas
安装pandas
-
编辑 删除
mysql使用sql导出成excel
mysql数据库字符集是utf8,excel字符集是gbk,所以为了避免乱码，在导出时统一字符集。SELECT a.*INTO OUTFILE 'd:\aqq.xls' CHARACTER SET gbkFIELDS TERMINATED BY '' OPTIONALLY ENCLOSED BY '"'LINES TERMINATED BY '\n'from table_name a;结果导出的路径不在指定的路径下，跑到D:\mysql-5.7.16-winx64\d...
-
编辑 删除
与第三方应用的数据库同步数据的方式
与第三方应用的数据库同步数据的方式，抛开第三方开源服务和自编码java实现，仅从数据库层面考虑：环境假设：第三方数据库为关系型数据库；我们的应用为mysql数据库。方案一：一般提出要同步通常都是关系型数据库，所以不管第三方的数据库如何，我们都可以要求对方按照mysql的sql脚本风格进行导出成文本；本地...
-
编辑 删除
我用的awk的边边角角
这两天整理文档，让我发现还是linux下的awk比较实用。比用ue顺手多了。尤其是列编辑。cat tmp1 |awk '{print $4}' >aa --把第四列截取出来，存放到文本aa中再结合vi 编辑器 ：:%s/'//g ------把文本中的单引号全部去掉
-
编辑 删除
Ubuntu14.04下自动备份PostgreSQL数据库
【目标】：每天上午5:10自动备份postgreSql中的bloodhound数据库，备份文件存放在/opt/bloodhound/backup/，并保留最近30天的备份文件。【步骤】：1、生成.pgpass文件由于备份数据库时需要输入密码，所以这里先配置下，这样在执行备份命令时就不需要手动输入密码了。crontab 是在root 用户下编辑的，所以我们需要在r...
-
编辑 删除
常用的linux命令（一）
有时候在做数据迁移时，需要编写批量的sql 脚本，有一些文本工具如果能熟练使用，工作效率会有很大的提升的。UltraEdit的列编辑功能就很不错，我也是我经常使用这个工具的原因。另外还有一些工具，但是前提或需要做一些导入的功能，比如通过sql的函数也能处理大批量的文本，excel也可以。sql处理方式需要对sql函数有了...
-
编辑 删除
性能测试------采用uuid而不使用自增ID
采用uuid而不使用自增ID的,优势：1、数据迁移时不会有主键冲突。2、在使用分布式架构的主主同步时，也无需配置auto_increment_offset/auto_increment_increment，保证搭建比较简单。劣势：1、uuid比bigint占用存储空间大。2、数据量达到500w以上性能明显没有bigint快。（性能从哪些方面去比较呢？）单条查询，范围...
-
编辑 删除
Mysql字符集的设置
今天一个同事问我 ，比如varchar(5) ,能存储几个汉字。我演示了一个例子如下：####################################DROP TABLE test_var;CREATE TABLE test_var(NAME VARCHAR(5)) CHARACTER SET utf8;INSERT INTO test_var(NAME) VALUES('一路上有你'); --successfulINSERT INTO test_var(NAME) VALUES('一路上有你们...
-
编辑 删除
ubuntu14.04 64位下安装mysql5.7.*
1、去mysql官网下载对应操作系统的mysql版本 本人下载的是（mysql-server_5.7.15-1ubuntu14.04_amd64.deb-bundle.tar）， 并查看mysql reference Manual中关于安装mysql的步骤， 链接如下 http://dev.mysql.com/doc/refman/5.7/en/linux-installation-debian.html 补充下：通过uname -...
