ITPub博客

在编写Python 程序或者工具脚本时，需要完成某个功能，可以选择编写一个具体的函数达到目的，当然也可以通过匿名/Python 内建函数来完成。本问讲述常见的Python匿名、内建函数---lambda,map,filter,reduce .

fileinput 是python 提供的一个可以快速遍历，修改一个或者多个文件的模块。我们可以使用该模块进行文本替换 并做文件备份。

python 字符串输出格式化有两种方式 %[s,d,] ,还有一种是string.format()。python 2.6 版本提供了后者，其功能也相当强大。

*args 和 **kwargs 主要用于函数定义。 当我们需要定义的函数的传入参数个数不确定时，可以使用*args 和 **kwargs 代替不确定的参数个数。其实并不是必须写成*args 和**kwargs。 只有变量前面的 *(星号)才是必须的. 我们可以写成*var和**vars. 而写成*args 和**kwargs只是一个通俗的命名约定。

Python 内置了很多非常有用的函数 比如map() ,reduce(),filter(),还有lambda。熟练应用这些函数可以在写python程序的时候构建精简的代码。本文先来了解map函数。

使用python进行并发处理多台机器/多个实例的时候，我们可以使用threading ，但是由于著名的GIL存在，实际上threading 并未提供真正有效的并发处理，要充分利用到多核CPU，我们需要使用多进程。Python提供了非常好用的多进程包--multiprocessing。multiprocessing 可以利用multiprocessing.Process对象来创建一个进程,该Process对象与Threading对象的用法基本相同，具有相同的方法(官方原话:"The multiprocessing package mostly replicates the API of the threading module.") 比如:start(),run(),join()的方法。multiprocessing包中也有Lock/Event/Semaphore/Condition/Pipe/Queue类用于进程之间的通信。话不多说 show me the code！

Python和MySQL交互的模块有 MySQLdb 和 PyMySQL(pymysql),MySQLdb是基于C 语言编写的，而且Python3 不在支持MySQLdb 。PyMySQL是一个纯Python写的MySQL客户端，它的目标是替代MySQLdb，可以在CPython、PyPy、IronPython和Jython环境下运行,PyMySQL在MIT许可下发布。 在开发基于Python语言的项目中，为了以后系统能兼容Python3,我们使用了PyMySQL替换了MySQLdb。下面我们来熟悉一下pymysql的使用。

装饰器是一个用于封装函数或者类的代码工具，显式地将封装器作用于函数或者类上，达到程序运行时动态增加功能的目的。对于函数运行前处理常见前置条件(常见的web登陆授权验证)，或者在函数执行之后做善后工作(比如异常处理，记录log 等等)。

最近在和 同事 一起开发一套数据库管理平台 ，该平台使用Django 作为web 框架。和大多数数据库管理平台一样 ，该平台提供 备份，恢复，申请实例，实例上下线 以及数据质量对比 等功能。本文主要是记录 开发一套系统使用哪些功能组件。

最近一直在做开发相关的工作--基于Django的web 平台，其中需要从model层传输数据到view 层做数据展示或者做业务逻辑处理。我们采用通用的Json格式--Json(JavaScript Object Notation) 是一种轻量级的数据交换格式，易于阅读和程序解析。

最近研究备份恢复MySQL数据库实例，老的数据配置和新的实例的my.cnf 配置不统一，依赖backup-my.cnf 来判断innodb_data_file_path 参数是否修改修改。如何解析 my.cnf 呢？于是研究了Python提供ConfigParser模块。该模块可以完成针对常见的配置文件的读取和修改操作，基本满足需求。

Supervisor是一款基于Python的进程管理工具，可以很方便的用来管理服务器上部署的程序。supervisor是C/S模型的程序，其server端是supervisord,client 端是supervisorctl ，思考一下当应用服务器要部署多个服务程序，机器关闭，重启，如何批量维护？此时supervisor是一个不错的选择。可以用 supervisor 同时启动所有应用程序而不用逐个启动。

Redis Queue 一款轻量级的P分布式异步任务队列，基于Redis作为broker，将任务存到redis里面，然后在后台执行指定的Job。就目前而言有三套成熟的工具celery，huey ，rq 。按照功能和使用复杂度来排序的话也是 celery>huey>rq. 因为rq 简单，容易上手，所以自己做的系统也会使用RQ作为分布式任务调度系统。

在使用Python 开发MySQL自动化相关的运维工具的时候，遇到一些有意思的问题，本文介绍Python的 subprocess 模块以及如何和MySQL交互具体操作，如启动 ，关闭 ，备份数据库。

Python 的logging 模块定义的函数和类为应用程序和库实现了一个灵活的事件日志系统。该模块提供多种日志级别并且支持多种记录日志的方式比如 终端，文件等等。在编写一个软件系统的时候 ，使用日志系统十分有必要 记录函数的执行过程和异常报错信息。本文算是一个学习笔记，对于跨文件引用的初学者有一定帮助。

Socket是两个应用程序进行通信的管道,这两个应用程序可以在同一台机器上，也可以位于两台不同的机器上,相同的网络或者不同网络之间的。Python socket有丰富的类和方法，可以简化socket编程。本文算是一个学习笔记。

本文介绍 python的内置函数 enumerate 能优雅的解决同时需要索引和值的 序列需求。

因为项目的原因我需要深入的学习python，后端程序依赖各种各种软件包，比如MySQLdb，新手可能会有些不熟悉 如何快速安装所需要的python 包。常用的python 包安装和管理有 easy_install, setuptools, pip，distribute。本文则介绍pip---“A tool for installing and managing Python packages.“

本文介绍如何关闭 python 脚本执行过程中 出现的 各种warning 信息 。

本文介绍 两种python 和三种shell 获取 主机ip 地址的方法