记一次健康检查脚本执行超时的排查与优化实践

# 查看最近一次健康检查的详细日志
cat /var/log/health-check.log | tail -100

# 查找超时相关的日志条目
grep -i "timeout" /var/log/health-check.log

# 查看健康检查的执行时间
grep "execution time" /var/log/health-check.log

# 查看健康检查脚本内容
cat /usr/local/bin/health-check.sh

# 测试API响应时间（多次）
for i in {1..10}; do
  time curl -s -o /dev/null -w "%{time_total}s\n" https://api.example.com/status
done

#!/bin/bash

# 健康检查脚本 - 带缓存版本

# 配置
CACHE_FILE="/tmp/health-check-cache.json"
CACHE_TTL=300  # 缓存有效期：5分钟
API_URL="https://api.example.com/status"
TIMEOUT=10     # API调用超时：10秒

# 获取缓存数据
get_cache() {
    if [ -f "$CACHE_FILE" ]; then
        local cache_time=$(stat -c %Y "$CACHE_FILE" 2>/dev/null)
        local current_time=$(date +%s)
        local age=$((current_time - cache_time))
        
        if [ $age -lt $CACHE_TTL ]; then
            cat "$CACHE_FILE"
            return 0
        fi
    fi
    return 1
}

# 设置缓存数据
set_cache() {
    local data="$1"
    echo "$data" > "$CACHE_FILE"
}

# 检查Gateway进程
check_gateway_process() {
    if pgrep -f "openclaw-gateway" > /dev/null; then
        echo "Gateway进程运行中"
        return 0
    else
        echo "Gateway进程未运行"
        return 1
    fi
}

# 检查端口监听
check_port_listening() {
    if ss -tlnp | grep -q ":18789 "; then
        echo "端口18789正常监听"
        return 0
    else
        echo "端口18789未监听"
        return 1
    fi
}

# 获取API状态（带缓存）
get_api_status() {
    # 尝试从缓存获取
    local cached_data=$(get_cache)
    if [ $? -eq 0 ] && [ -n "$cached_data" ]; then
        echo "使用缓存数据"
        echo "$cached_data"
        return 0
    fi
    
    # 缓存不存在或已过期，调用API
    echo "调用外部API获取状态..."
    local response
    response=$(curl -s -m $TIMEOUT "$API_URL" 2>&1)
    
    if [ $? -eq 0 ]; then
        # 保存到缓存
        set_cache "$response"
        echo "$response"
        return 0
    else
        # API调用失败，尝试使用过期缓存
        if [ -f "$CACHE_FILE" ]; then
            echo "API调用失败，使用过期缓存"
            cat "$CACHE_FILE"
            return 0
        else
            echo "API调用失败，且无缓存可用"
            return 1
        fi
    fi
}

# 主函数
main() {
    echo "=== 健康检查开始 ==="
    echo "时间：$(date '+%Y-%m-%d %H:%M:%S')"
    echo ""
    
    local exit_code=0
    
    # 检查Gateway进程
    if ! check_gateway_process; then
        exit_code=1
    fi
    
    # 检查端口监听
    if ! check_port_listening; then
        exit_code=1
    fi
    
    # 获取API状态
    if ! get_api_status; then
        exit_code=1
    fi
    
    echo ""
    echo "=== 健康检查结束，退出码：$exit_code ==="
    
    return $exit_code
}

# 执行主函数
main

#!/bin/bash

# 健康检查超时问题快速排查脚本

echo "=== 健康检查超时问题排查 ==="
echo ""

# 1. 检查Gateway进程
echo "1. 检查Gateway进程状态："
ps aux | grep openclaw-gateway | grep -v grep
echo ""

# 2. 检查端口监听
echo "2. 检查端口18789监听状态："
ss -tlnp | grep 18789
echo ""

# 3. 测试网络连通性
echo "3. 测试网络连通性："
curl -v -m 10 https://api.example.com/status 2>&1 | head -20
echo ""

# 4. 检查缓存状态
echo "5. 检查缓存文件状态："
if [ -f /tmp/health-check-cache.json ]; then
    echo "缓存文件存在，最后修改时间："
    stat /tmp/health-check-cache.json | grep Modify
    echo "缓存内容："
    cat /tmp/health-check-cache.json
else
    echo "缓存文件不存在"
fi

echo ""
echo "=== 排查完成 ==="