#!/bin/bash
echo "=== 硬件巡检报告 ==="
echo ""

# CPU使用率
echo "1. CPU使用率"
top -bn1 | head -5

# 内存使用
echo ""
echo "2. 内存使用"
free -h

# 磁盘空间
echo ""
echo "3. 磁盘空间"
df -h

# 磁盘IO
echo ""
echo "4. 磁盘IO"
iostat -x 1 1

# 系统温度
echo ""
echo "5. 系统温度"
sensors 2>/dev/null || echo "未安装sensors工具"

#!/bin/bash
echo "=== 系统巡检报告 ==="
echo ""

# 系统运行时间
echo "1. 系统运行时间"
uptime

# 僵尸进程
echo ""
echo "2. 僵尸进程检查"
zombie=$(ps aux | grep -E '^.*[Zz]' | wc -l)
if [ $zombie -eq 0 ]; then
    echo "✅ 无僵尸进程"
else
    echo "⚠️ 发现 $zombie 个僵尸进程"
    ps aux | grep -E '^.*[Zz]'
fi

# 关键服务状态
echo ""
echo "3. 关键服务状态"
services=("nginx" "mysql" "redis")
for service in "${services[@]}"; do
    status=$(systemctl is-active $service)
    if [ "$status" = "active" ]; then
        echo "✅ $service: 运行中"
    else
        echo "❌ $service: 已停止"
    fi
done

# 系统错误日志
echo ""
echo "4. 最近错误日志"
journalctl -p err -n 10

#!/bin/bash
echo "=== 网络巡检报告 ==="
echo ""

# 网络连通性测试
echo "1. 网络连通性测试"
echo "测试网关..."
ping -c 3 192.168.1.1 > /dev/null && echo "✅ 网关可达" || echo "❌ 网关不可达"

echo ""
echo "测试DNS解析..."
nslookup google.com > /dev/null && echo "✅ DNS解析正常" || echo "❌ DNS解析失败"

# 关键端口检查
echo ""
echo "2. 关键端口监听"
ports=("80" "443" "3306" "6379")
for port in "${ports[@]}"; do
    result=$(ss -tlnp | grep ":$port")
    if [ -n "$result" ]; then
        echo "✅ 端口 $port: 已监听"
    else
        echo "❌ 端口 $port: 未监听"
    fi
done

#!/bin/bash
echo "=== 应用巡检报告 ==="
echo ""

# HTTP服务检查
echo "1. HTTP服务检查"
url="http://localhost:80/health"
response=$(curl -s -w "%{http_code}" -o /dev/null $url)
time=$(curl -s -w "%{time_total}s" -o /dev/null $url)
if [ "$response" = "200" ]; then
    echo "✅ HTTP服务正常，响应时间: $time"
else
    echo "❌ HTTP服务异常，状态码: $response"
fi

# 数据库连接测试
echo ""
echo "2. 数据库连接测试"
mysql -u root -psecret -e "SELECT 1" > /dev/null 2>&1 && echo "✅ 数据库连接正常" || echo "❌ 数据库连接失败"

# Redis状态检查
echo ""
echo "3. Redis状态检查"
redis-cli PING | grep -q PONG && echo "✅ Redis运行正常" || echo "❌ Redis运行异常"

# 异常分级标准
- P0（紧急）：服务不可用、数据丢失、安全漏洞
- P1（严重）：性能严重下降、关键服务异常
- P2（中等）：非关键服务异常、资源使用率偏高
- P3（提示）：配置问题、日志警告

# 处理流程
1. 发现异常 → 2. 确认问题 → 3. 评估级别 → 4. 处理问题 → 5. 记录归档

# 处理时限
- P0：立即响应（5分钟内）
- P1：1小时内处理
- P2：4小时内处理
- P3：工作时间内处理

#!/bin/bash
# 综合巡检脚本
# 输出格式：时间戳、服务器、检查项、状态、详情

timestamp=$(date "+%Y-%m-%d %H:%M:%S")
hostname=$(hostname)

echo "=== $timestamp $hostname 巡检报告 ==="

# CPU检查
cpu_usage=$(top -bn1 | grep "Cpu(s)" | sed "s/.*, *\([0-9.]*\)%* id.*/\1/" | awk '{print 100 - $1}')
echo "CPU使用率: $cpu_usage%"
if (( $(echo "$cpu_usage > 80" | bc -l) )); then
    echo "⚠️ CPU使用率超过阈值"
fi

# 内存检查
mem_total=$(free -m | grep Mem | awk '{print $2}')
mem_available=$(free -m | grep Mem | awk '{print $7}')
mem_usage=$(echo "scale=2; ($mem_total - $mem_available) / $mem_total * 100" | bc)
echo "内存使用率: $mem_usage%"
if (( $(echo "$mem_usage > 85" | bc -l) )); then
    echo "⚠️ 内存使用率超过阈值"
fi

# 磁盘检查
disk_usage=$(df -h / | grep / | awk '{print $5}' | sed 's/%//g')
echo "根目录使用率: $disk_usage%"
if (( disk_usage > 90 )); then
    echo "⚠️ 磁盘空间不足"
fi

echo "=== 巡检完成 ==="

# 每日早8点执行日常巡检
0 8 * * * /usr/local/bin/daily_check.sh >> /var/log/daily_check.log 2>&1

# 每周日凌晨执行深度巡检
0 0 * * 0 /usr/local/bin/weekly_check.sh >> /var/log/weekly_check.log 2>&1

# 每月1号执行专项巡检
0 0 1 * * /usr/local/bin/monthly_check.sh >> /var/log/monthly_check.log 2>&1

# 根据业务特点设置阈值
- CPU：70%警告，85%紧急（数据库服务器可设60%/75%）
- 内存：70%警告，85%紧急（应用服务器可设65%/80%）
- 磁盘：80%警告，90%紧急（日志服务器可设75%/85%）
- 响应时间：500ms警告，1000ms紧急
- 错误率：1%警告，5%紧急

# 建立标准化巡检清单
# 使用自动化工具代替人工
# 设置检查项优先级，确保核心项必查

# 设置合理的告警阈值
# 使用持续时间判断（for: 5m）
# 建立告警分级，夜间静默非紧急告警

# 输出巡检报告到日志文件
# 使用版本控制管理巡检记录
# 定期汇总分析巡检数据

# 使用Ansible批量执行巡检脚本
# 使用Prometheus统一监控
# 建立巡检代理节点

# 系统资源
top -bn1 | head -5        # CPU使用概览
free -h                   # 内存使用
df -h                     # 磁盘空间
iostat -x 1 1             # 磁盘IO
vmstat 1 3                # 系统状态

# 网络
ping -c 3 host            # 连通性测试
nslookup domain           # DNS解析
ss -tlnp                  # 端口监听
iftop -n -t -s 10         # 带宽使用

# 服务
systemctl status service  # 服务状态
ps aux --sort=-%mem | head -10  # 内存TOP进程

# 日志
journalctl -p err -n 20   # 错误日志
tail -f /var/log/app.log  # 应用日志