如何在用于wget缓存的bash中计算字符串(url)的哈希

听起来您需要md5sum系统实用程序。

URLMD5=`/bin/echo $URL | /usr/bin/md5sum | /bin/cut -f1 -d" "`

如果您只想在文件名上创建散列,那么可以使用sed快速获得:

FILENAME=`echo $URL | /bin/sed -e 's#.*/##'`
URLMD5=`/bin/echo $FILENAME | /usr/bin/md5sum | /bin/cut -f1 -d" "`

我没有代表对答案发表评论,但对epsilon prime的答案有一个澄清:默认情况下,echo将在文本结尾处打印新行。如果希望MD5和匹配任何其他工具(如PHP、Java的MD5等)所需的调用,则需要调用

echo -n "$url"

这将禁止换行。

我的Ubuntu(精确)框上的其他选项:

• echo -n $STRING | sha512sum
• echo -n $STRING | sha256sum
• echo -n $STRING | sha224sum
• echo -n $STRING | sha384sum
• echo -n $STRING | sha1sum
• echo -n $STRING | shasum

Mac上的其他选项:

• echo -n $STRING | shasum -a 512
• echo -n $STRING | shasum -a 256
• 等。

的更新版本 Bash 提供关联数组和索引数组。这样的事情可能对你有用:

declare -A myarray
myarray["url1"]="url1_content"
myarray["url2"]=""

if [ ! -z ${myarray["url1"]} ] ; then 
    echo "Cached";
fi

wget通常会将文件重命名为.html.1、.2等文件名,因此您可以使用关联数组来存储已下载文件的列表以及实际文件名。