ITPub博客

首页 > 数据库 > 数据库开发技术 > shell脚本+webhook实现联动一键联动删除异常大小的文件

shell脚本+webhook实现联动一键联动删除异常大小的文件

原创 数据库开发技术 作者:u_2ebce1c3a860 时间:2024-07-28 17:24:20 0 删除 编辑

之前有写过

现通过简单的实践案例介绍shell脚本+webhook实现联动一键联动删除异常大小的文件

具体步骤如下

1、monitor_files_size.sh

脚本内容如下

#!/bin/bash

# 监控目录和文件名
dir_path="/data/logfile"

# webhook 地址
webhook_url="https://oapi.dingtalk.com/robot/send?access_token=838eb303c4035b35447b3caaaa486b2ee6b1f4918be28eba07f7b491155652bc"
set_payload_file(){
cat  > /opt/payload_result.json << \EOF
{       
"msgtype": "actionCard",
"actionCard": {
"title":"日志文件大小异常告警",
"text":"
##### Linux服务器的日志文件大小异常告警 \n
>  ##### <font color=#67C23A> 【文件路径】</font> :<font color=#FF0000> template1 </font> \n
>  ##### <font color=#67C23A> 【文件大小】</font> :<font color=#FF0000> template2,请及时关注并排查</font> \n
"

}
}        
EOF

cat  > /opt/fileDelete_request.json << \EOF
{
 "msgtype": "actionCard",
 "actionCard": {
  "title":"是否删除大小异常的文件",
  "text":"
   ##### 请确认是否删除大小异常的文件 \n
>  ##### <font color=#FF0000>  待删除的文件路径:template1  </font> \n
>  ##### <font color=#FF0000>  说明:删除操作请务必谨慎!  </font> \n
        "
,
        "btnOrientation": "1", 
        "btns": [
            {
                "title": "同意删除", 
                "actionURL": "http://192.168.31.20:9090/hooks/fileDelete?filepath=tempFile"
            }, 
            {
                "title": "忽略", 
                "actionURL": "https://www.baidu.com"
            }
        ]
    }
}
EOF
}
scan_file(){  
for file in $dir_path/*; do
    if [[ -f "$file" ]]; then
      # 获取文件大小(单位:字节)
      file_size=$(stat -c "%s" "$file")
      file_size_mb=$((file_size/(1024*1024)))
      # 判断文件大小是否超过 500MB
      if (( $file_size > 524288000 )); then
      # 发送告警到 webhook 机器人
        message1="File:${file}"
        message2="(${file_size_mb} MB),超过了500MB"
        message3="${file}"
        set_payload_file
        sed -i "s^template1^$message1^g" /opt/payload_result.json
        sed -i "s^template2^$message2^g" /opt/payload_result.json
        sed -i "s^template1^$message3^g" /opt/fileDelete_request.json
        sed -i "s^tempFile^$message3^g" /opt/fileDelete_request.json
        response1=$(curl -sS -H "Content-Type: application/json" -X POST -d @/opt/payload_result.json "${webhook_url}")
        if [ $? -eq 0 ]; then
            echo "Alert sent successfully"
        else
            echo "Failed to send alert: ${response1}"
        fi
        response2=$(curl -sS -H "Content-Type: application/json" -X POST -d @/opt/fileDelete_request.json "${webhook_url}")
        if [ $? -eq 0 ]; then
            echo "Alert sent successfully"
        else
            echo "Failed to send alert: ${response2}"
        fi
      fi
    fi
done
}
scan_file

2、定时任务

[root@almalinux opt]# crontab -e
添加如下行
*/1 * * * *   /opt/monitor_files_size.sh

3、配置webhook

mkdir /opt/webhook
上传webhook文件
mkdir /opt/webhook/logs
vim /opt/webhook/hooks.json
添加如下内容
[
 {
  "id": "fileDelete",
  "execute-command" : "/opt/fileDelete_bydingdingclick.sh",
  "include-command-output-in-response": true,
  "incoming-payload-content-type": "application/json",
  "pass-arguments-to-command":
  [
    {
      "source":"url",
      "name":"filepath"
    }
  ]
 }
]

4、设置webhook的systemd服务文件

vim /etc/systemd/system/webhook.service 
[Unit]
Description=Webhooks

[Service]
ExecStart=/opt/webhook/webhook -port 9090 --verbose -hooks /opt/webhook/hooks.json -hotreload -logfile /opt/webhook/logs/webhook.log

[Install]
WantedBy=multi-user.target

然后
systemctl enable webhook.service 
 
systemctl start webhook.service 
firewall-cmd --permanent --zone=public --add-port=9090/tcp
firewall-cmd --reload

5、编写删除脚本

/opt/fileDelete_bydingdingclick.sh
#!/bin/bash
filePath=$1
LOCK=/data/largefiledelete_record.log
echo "================= File Delete Record Start==============================="   >> ${LOCK} 2>&1
echo "================= File Delete Record Start==============================="   
echo "删除日期:" >> ${LOCK} 2>&1
echo "删除日期:" 
echo `date '+%Y-%m-%d_%T'`  >> ${LOCK} 2>&1
echo `date '+%Y-%m-%d_%T'`
# 检查文件是否存在
if [ ! -f "$filePath" ]; then
    # 文件不存在
    echo "文件文件不存在:$filePath"  >> ${LOCK} 2>&1
    echo "文件文件不存在:$filePath"  
else
    echo "删除文件的路径:" >> ${LOCK} 2>&1
    echo "删除文件的路径:"
    echo $filePath >> ${LOCK} 2>&1
    echo $filePath 
    rm -rf $filePath >> ${LOCK} 2>&1
fi
echo "================= File Delete Record END==============================="   >> ${LOCK} 2>&1
echo "================= File Delete Record END===============================" 

6、测试效果

记得shell添加执行权限

chmod a+x /opt/fileDelete_bydingdingclick.sh
chmod a+x /opt/monitor_files_size.sh

例如创建一个大于500M的测试文件 最后的效果如下 告警推送消息如下 

点击同意删除进行联动删除的效果如下

Tips

  • 1、webhook链接为内网地址,建议手机连入远程VPN后,即可进行手机钉钉一键联动删除
  • 2、删除的脚本写得比较粗略,可以自行优化

原文作者:WalkingCloud;如有侵权,请联系管理员删除。

请登录后发表评论 登录
全部评论

注册时间:2018-05-05

  • 博文量
    441
  • 访问量
    209309