主页 / unix / 问题 / 474805
Accepted
mindlessgreen
Asked: 2018-10-12 03:38:07 +0800 CST

验证 URL 是否存在

  • 772

我想验证一个 URL 是否存在而无需下载。我在下面使用curl：

if [[ $(curl ftp://ftp.somewhere.com/bigfile.gz) ]] 2>/dev/null;
 then
  echo "This page exists."
 else
  echo "This page does not exist."
fi

或使用wget：

if [[ $(wget ftp://ftp.somewhere.com/bigfile.gz) -O-]] 2>/dev/null;
 then
  echo "This page exists."
 else
  echo "This page does not exist."
fi

如果 URL 不存在，这很有效。如果存在，它会下载该文件。就我而言，文件非常大，我不想下载它。我只想知道那个 URL 是否存在。

scripting curl

5 个回答

  1. Best Answer

    你很近。解决这个问题的正确方法是使用HEAD方法。

    使用卷曲：

    if curl --head --silent --fail ftp://ftp.somewhere.com/bigfile.gz 2> /dev/null;
 then
  echo "This page exists."
 else
  echo "This page does not exist."
fi

    或使用 wget：

    if wget -q --method=HEAD ftp://ftp.somewhere.com/bigfile.gz;
 then
  echo "This page exists."
 else
  echo "This page does not exist."
fi
    • 16

  2. 我认为，最好将--spider参数与wget工具一起使用。它也适用于该工具的轻量级版本wget（在 BusyBox 中）。

    例子：

    URL="http://www.google.com"

if wget --spider "${URL}" 2>/dev/null; then
    echo "OK !"
else
    echo "ERROR ! Online URL ${URL} not found !"
fi
    • 3

  3. 尝试curl --head （HTTP FTP 文件）仅获取标头！

    status=$(curl --head --silent ftp://ftp.somewhere.com/bigfile.gz | head -n 1)

if echo "$status" | grep -q 404
  echo "file does not exist"
else
  echo "file exists"
fi
    • 2 
  4. if curl --output /dev/null --silent --head --fail "ftp://ftp.somewhere.com/bigfile.gz"
then
  echo "This page exists."
 else
  echo "This page does not exist."
fi
    • 1 
  5. echo $(curl --head --silent <url> | head -n 1)
    • -1

相关问题