百度360必应搜狗淘宝本站头条
mqtt服务器xftp6mybatiscollectionkeyerrorc#var
当前位置：网站首页 > 热门文章 > 正文

Linux日常小技巧shell脚本

bigegpt 2024-08-29 11:35 2 浏览

在工作中我们常用shell脚本处理一些问题，这里整理了一些工作中常用的简单shell脚本。

  1. 定时备份文件
#!/bin/bash
backup_dir="/data1/backup"
src_dir="/data1/app"
date_time=$(date +%Y%m%d_%H%M%S)
tar -czvf ${backup_dir}/${date_time}.tar.gz ${src_dir}
  1. 批量更改文件后缀名
#!/bin/bash
for file in *.jpg
do
    mv "$file" "${file%jpg}png"
done
  1. 执行多个任务并发运行
#!/bin/bash
task1 &
task2 &
task3 &
wait
echo "All tasks completed!"
  1. 根据文件大小清理指定目录
#!/bin/bash
dir="/data/log"
max_size="50M"
find ${dir} -type f -size +${max_size} -delete
  1. 自动解压文件并删除原文件
#!/bin/bash
for file in *.zip
do
    unzip ${file} && rm ${file}
done
  1. 监控服务器内存使用情况
#!/bin/bash
total_mem=$(free -m | awk 'NR==2{print $2}')
used_mem=$(free -m | awk 'NR==2{print $3}')
percent=$(bc -l <<< "scale=2;${used_mem}/${total_mem}*100")
if (( $(echo "${percent} > 80" | bc -l) )); then
    echo "Memory usage exceeds 80%!"
    # Send notification email or alert
fi
  1. 传参数启动java项目
#! /bin/bash

#jar包的文件路径
APP_NAME="$2"
PORT=9086

help(){
	echo "====================================="
	echo "项目地址： ${APP_NAME}"
	echo "你可以使用如下参数进行操作"
	echo "-status  -查看当前项目运行状态"
	echo "-start   -启动当前项目"
	echo "-stop    -停止当前项目"
	echo "-restart -重启当前项目" 
	echo "====================================="
}

#查找jar包进程，排除grep，进程信息的第二个字段：即进程号
pid=`netstat -apn |grep $PORT |awk '{print $7}' |cut -d/ -f 1`

status(){
	if [ -z "$pid" ]
		then 
			echo "项目已停止运行"
	else
			echo "项目正在运行..."
                        echo "进程号:$pid"
                        echo "项目名称:$APP_NAME"
	fi
}

start(){
	if [ -z "$pid" ]
		then 
			echo "正在启动..."
			nohup java -Dspring.profiles.active=prod -jar $APP_NAME  >/dev/null 2>nohup &
                        tail -f -n 200 nohup.out
		else
			echo "项目正在运行中或端口被占用"
                        echo "进程号:$pid"
	fi
}

stop(){
	if [ -z "$pid" ] 
		then 
			echo "项目已经停止"
	else
			kill -9 $pid
			echo "完成停止项目"
	fi
}

restart(){
	if [ -z "$pid" ]
		then
			echo "项目未启动"
	else
		kill -9 $pid
	fi
	sleep 5
	start
	echo "完成项目重启"
}

case "$1" in
	"-status")
	status
	;;
	"-start")
	start
	;;
	"-stop")
	stop
	;;
	"-restart")
	restart
	;;
        "-help")
        help
        ;;
	*)
	help
	;;
esac
  1. 自动备份数据库
#!/bin/bash
db_host="127.0.0.1"
db_port="3306"
db_user="root"
db_pass="password"
db_name="mydb"
backup_dir="/data/backup"
date_time=$(date +%Y%m%d_%H%M%S)
mysqldump -h${db_host} -P${db_port} -u${db_user} -p${db_pass} ${db_name} | gzip > ${backup_dir}/${db_name}-${date_time}.sql.gz
  1. 扫描服务器端口并发送报告邮件
#!/bin/bash
host_ip="127.0.0.1"
report_file="/tmp/port_scan_report.txt"
for port in {1..65535}
do
    timeout 1 bash -c "echo >/dev/tcp/${host_ip}/${port}" 2>/dev/null && echo "${host_ip}:${port} is open" >> ${report_file}
done
# Send report email
mail -s "Port scan report" admin@example.com < ${report_file}
  1. 自动更新服务器软件包并重启服务
#!/bin/bash
yum update -y
service nginx restart
service mysql restart
service tomcat restart

11.自动清理过期日志文件

#!/bin/bash
log_dir="/data/log"
max_age="30" # days
find ${log_dir} -type f -mtime +${max_age} -delete

12.自动备份MySQL数据库并删除旧备份

#!/bin/bash
db_user="root"
db_pass="password"
backup_dir="/data/backup"
date_time=$(date +%Y%m%d_%H%M%S)
db_list=$(mysql -u${db_user} -p${db_pass} -e "show databases;" | grep -Ev "(Database|information_schema|performance_schema)")
for db in ${db_list}
do
    mysqldump -u${db_user} -p${db_pass} ${db} | gzip > ${backup_dir}/${db}-${date_time}.sql.gz
done
find ${backup_dir} -type f -name '*.gz' -mtime +7 -delete

13.批量重命名文件名中的空格为下划线

#!/bin/bash
for file in *\ *
do
    mv "${file}" "${file// /_}"
done

14.自动清理过期Docker镜像及容器

#!/bin/bash
image_age="7" # days
container_age="2" # days
docker system prune -f
docker rmi $(docker images -q --filter "dangling=true") 2>/dev/null || true
docker container prune -f
docker ps -a | awk '/Exited/ {print $1}' | xargs docker rm
docker container ls -a -q --filter "status=exited" --filter "created<=$(( ${container_age} * 86400 ))" | xargs docker rm

15.自动压缩指定目录并上传到远程服务器

#!/bin/bash
local_dir="/data/app"
backup_dir="/data/backup"
remote_host="192.168.1.100"
remote_port="22"
remote_user="root"
remote_dir="/backup"
ssh_key="/root/.ssh/id_rsa"
date_time=$(date +%Y%m%d_%H%M%S)
filename="${backup_dir}/app_${date_time}.tar.gz"
tar -czvf ${filename} ${local_dir}
scp -i ${ssh_key} -P ${remote_port} ${filename} ${remote_user}@${remote_host}:${remote_dir}
rm ${filename}

16.自动监控Nginx请求量及响应时间

#!/bin/bash
log_file="/var/log/nginx/access.log"
interval="60" # seconds
req_count=$(tail -n 100 ${log_file} | wc -l)
avg_resp_time=$(tail -n 100 ${log_file} | awk '{total+=$NF} END {print total/NR}')
if (( $(echo "${req_count} > 100" | bc -l) )); then
    echo "High request count: ${req_count}"
    # Send notification email or alert
fi
if (( $(echo "${avg_resp_time} > 1.0" | bc -l) )); then
    echo "High average response time: ${avg_resp_time}s"
    # Send notification email or alert
fi

17.定时同步文件到远程服务器

#!/bin/bash
local_file="/data/app/myfile"
remote_host="192.168.1.100"
remote_port="22"
remote_user="root"
remote_file="/data/files/myfile"
ssh_key="/root/.ssh/id_rsa"
md5sum_local=$(md5sum ${local_file} | awk '{print $1}')
md5sum_remote=$(ssh -i ${ssh_key} -p ${remote_port} ${remote_user}@${remote_host} "md5sum ${remote_file} 2>/dev/null" | awk '{print $1}')
if [ "${md5sum_local}" != "${md5sum_remote}" ]; then
    scp -i ${ssh_key} -P ${remote_port} ${local_file} ${remote_user}@${remote_host}:${remote_file}
fi

18.自动备份MongoDB数据库并上传到远程服务器

#!/bin/bash
db_name="mydb"
backup_dir="/data/backup"
remote_host="192.168.1.100"
remote_port="22"
remote_user="root"
remote_dir="/backup"
ssh_key="/root/.ssh/id_rsa"
date_time=$(date +%Y%m%d_%H%M%S)
filename="${backup_dir}/${db_name}_${date_time}.tar.gz"
mongodump --gzip --archive=${filename} --db=${db_name}
scp -i ${ssh_key} -P ${remote_port} ${filename} ${remote_user}@${remote_host}:${remote_dir}
rm ${filename}

19.批量更新Docker镜像

#!/bin/bash
docker-compose pull
docker-compose up -d

20自动备份文件到FTP服务器并删除旧备份

#!/bin/bash
local_dir="/data/app"
backup_dir="/data/backup"
remote_host="ftp.example.com"
remote_user="backup_user"
remote_pass="backup_password"
remote_dir="/backup/files"
filename="${backup_dir}/app_$(date +%Y%m%d_%H%M%S).tar.gz"
tar -czvf ${filename} ${local_dir}
ncftp -u ${remote_user} -p ${remote_pass} ${remote_host} <<EOF
cd ${remote_dir}
put ${filename}
ls -t | awk 'NR>7' | xargs rm
quit
EOF
rm ${filename}

相关推荐

Docker篇(二):Docker实战，命令解析

大家好，我是杰哥上周我们通过几个问题，让大家对于Docker有了一个全局的认识。然而，说跟练往往是两个概念。从学习的角度来说，理论知识的学习，往往只是第一步，只有经过实战，才能真正掌握一门技术所以，本...

docker学习笔记——安装和基本操作

今天学习了docker的基本知识,记录一下docker的安装步骤和基本命令(以CentOS7.x为例)一、安装docker的步骤：1.yuminstall-yyum-utils2.yum-con...

不可错过的Docker完整笔记（dockerhib）

简介一、Docker简介Docker是一个开源的应用容器引擎，基于Go语言并遵从Apache2.0协议开源。Docker可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，...

扔掉运营商的 IPTV 机顶盒，全屋全设备畅看 IPTV!

其实现在看电视节目的需求确实大大降低了，折腾也只是为了单纯的让它实现，享受这个过程带来的快乐而已，哈哈！预期构想家里所有设备直接接入网络随时接收并播放IPTV直播（电信点播的节目不是太多，但好在非常稳...

第五节 Docker 入门实践:从 Hello World 到容器操作

一、Docker容器基础运行（一）单次命令执行通过dockerrun命令可以直接在容器中执行指定命令，这是体验Docker最快捷的方式：#在ubuntu:15.10容器中执行ech...

替代Docker build的Buildah简单介绍

Buildah是用于通过较低级别的coreutils接口构建OCI兼容镜像的工具。与Podman相似，Buildah不依赖于Docker或CRI-O之类的守护程序，并且不需要root特权。Builda...

Docker 命令大全（docker命令大全记录表）

容器生命周期管理run-创建并启动一个新的容器。start/stop/restart-这些命令主要用于启动、停止和重启容器。kill-立即终止一个或多个正在运行的容器rm-于删除一个或...

docker常用指令及安装rabbitMQ（docker安装rabbitmq配置环境）

一、docker常用指令启动docker：systemctlstartdocker停止docker：systemctlstopdocker重启docker：systemctlrestart...

使用Docker快速部署Storm环境（docker部署confluence）

Storm的部署虽然不是特别麻烦，但是在生产环境中，为了提高部署效率，方便管理维护，使用Docker来统一管理部署是一个不错的选择。下面是我开源的一个新的项目，一个配置好了storm与mono环境的D...

Docker Desktop安装使用指南:零基础教程

在之前的文章中，我多次提到使用Docker来安装各类软件，尤其是开源软件应用。鉴于不少读者对此有需求，我决定专门制作一期关于Docker安装与使用的详细教程。我主要以Macbook（Mac平台）为例进...

Linux如何成功地离线安装docker（linux离线安装httpd）

系统环境：Redhat7.2和Centos7.4实测成功近期因项目需要用docker，所以记录一些相关知识，由于生产环境是不能直接连接互联网，尝试在linux中离线安装docker。步骤1.下载...

Docker 类面试题(常见问题)（docker面试题目）

Docker常见问题汇总镜像相关1、如何批量清理临时镜像文件？可以使用sudodockerrmi$(sudodockerimages-q-fdanging=true)命令2、如何查看...

面试官:你知道Dubbo怎么优雅上下线的吗?你:优雅上下线是啥?

最近无论是校招还是社招，都进行的如火如荼，我也承担了很多的面试工作，在一次面试过程中，和候选人聊了一些关于Dubbo的知识。Dubbo是一个比较著名的RPC框架，很多人对于他的一些网络通信、通信协议、...

【Docker 新手入门指南】第五章:Hello Word

适合人群：完全零基础新手|学习目标：30分钟掌握Docker核心操作一、准备工作：先确认是否安装成功打开终端（Windows用户用PowerShell或GitBash），输入：docker--...

松勤软件测试:详解Docker，如何用portainer管理Docker容器

镜像管理搜索镜像dockersearch镜像名称拉取镜像dockerpullname[:tag]列出镜像dockerimages删除镜像dockerrmiimage名称或id删除...

一周热门
最近发表
标签列表