ITPub博客

首页 > 数据库 > > 20200915

20200915

作者:数据库干货铺 时间:2020-09-15 15:52:42 0 删除 编辑

点击上方蓝字“数据库干货铺” 解锁更多精彩内容


统计每天的数据量变化,数据量变动超过一定范围时,进行告警。




统计每天的数据量变化,数据量变动超过一定范围时,进行告警。告警通过把对应的参数传递至相应接口。


做一个工作日志,处理以上需求,考虑到要操作数据库,调用接口等操作,还是用python来写个简单的脚本。

主要涉及如下知识点:

  • python操作MySQL数据库

  • python调用接口


原数据波动使用grafana展示如下:

python程序示例如下:


#!/usr/bin/python# coding=utf-8import pymysql as mdbimport osimport sysimport requestsimport json

tar_conn = mdb.connect(host='192.168.56.128',port=3306,user='xxx',passwd='xxx123',db='bak_db')tar_cur = tar_conn.cursor()
v_sql_dt =" SELECT DATE_FORMAT(CURRENT_DATE(),'%Y-%m-%d')t1 ,DATE_FORMAT(SUBDATE(CURRENT_DATE(),INTERVAL 1 DAY),'%Y-%m-%d')t2,DATE_FORMAT(SUBDATE(CURRENT_DATE(),INTERVAL 1 WEEK),'%Y-%m-%d')t3,DATE_FORMAT(SUBDATE(CURRENT_DATE(),INTERVAL 1 MONTH),'%Y-%m-%d %H:%i:00')t4"v_extract_rows=tar_cur.execute(v_sql_dt)v_res=tar_cur.fetchone()v_dt1=v_res[0]v_dt2=v_res[1]v_dt3=v_res[2]v_dt4=v_res[3]
print v_dt1,v_dt2,v_dt3,v_dt4#v_start_time='2020-09-10'#v_end_time='2020-09-11'def get_cnt(v_dt):
v_sql1="select tb_rows from bak_db.tb_size where dt='%s';"%(v_dt)
v_extract_rows=tar_cur.execute(v_sql1) v_res=tar_cur.fetchone() v_cnt1=v_res[0]
return(v_cnt1)
(v_cnt_now)=get_cnt(v_dt1)(v_cnt_1d)=get_cnt(v_dt2)(v_cnt_1w)=get_cnt(v_dt3)(v_cnt_1m)=get_cnt(v_dt4)
def f_notify(v_cnt_now,v_cnt_before,v_message): v_rate1=abs(((v_cnt_before-v_cnt_now)*1.00/v_cnt_before*1.00)*100)
# print v_rate1,v_rate2 if (v_rate1>100 ) and (v_cnt_now>500 or v_cnt_before>500) : v_level=1 v_list=[v_message,',','当前量:',str(v_cnt_now),',','前期量:',str(v_cnt_before)] v_message1=''.join(v_list) print v_message1 url = 'http://192.168.56.128:9000/api/v1/alarm' # 接口地址 body ={"level": v_level, "group": ["dba"], "msg": {"content": v_message1}} headers = {'content-type': "application/json"} # 如有认证信息,添加认证信息即可,例如'Authorization': 'APP appid = xxx,token = xxxxxxxxxxxxxxxx' response = requests.post(url, data = json.dumps(body), headers = headers) # body是json格式的,用 json.dumps(body)方式进行处理 print response.text print response.status_code
f_notify(v_cnt_now,v_cnt_1d,'数据量与前一天相比波动超过100%')f_notify(v_cnt_now,v_cnt_1w,'数据量与前一周相比波动超过100%')f_notify(v_cnt_now,v_cnt_1m,'数据量与前一月相比波动超过100%')
tar_conn.close()



往期精彩回顾



1.  升级python,就是这么简单

2.  mysql8.0新增用户及加密规则修改的那些事

3.  比hive快10倍的大数据查询利器-- presto

4.  监控利器出鞘:Prometheus+Grafana监控MySQL、Redis数据库

5.  PostgreSQL主从复制--物理复制

6.  MySQL传统点位复制在线转为GTID模式复制

7.  MySQL敏感数据加密及解密

8.  MySQL数据备份及还原(一)

9.  MySQL数据备份及还原(二)




扫



码


关
注



原文作者:;如有侵权,请联系管理员删除。

请登录后发表评论 登录
全部评论

注册时间:2019-07-18

  • 博文量
    273
  • 访问量
    66459