命令行实现URL编解码

文章目录

命令行实现URL编解码
- 1. 实现
- 2. 原理
- - 2.1 url 的编码规则
  - 2.2 printf
- 附：参考资料

1. 实现

这里的脚本在 GNU bash, version 5.1.4(1)-release (x86_64) 上测试通过。

# 解码
url_decode(){# 加号对应特殊字符空格，单独处理url=${1//+/ }printf "%b\n" "${url//%/\\x}"
}# 编码
url_encode(){# 先无差别编码# 然后对每个字符反解码，如果无需转码，输出原字符，否则输出编码local cfor num in $(echo -n "$1" | xxd -plain | sed -E 's/(..)/\1\n/g' ); doprintf -v c "\x$num"case $c in[a-zA-Z0-9]) ;&[-_.\!\*~]) ;&[\;,/\?:@\&=+$#]) printf "$c" ;;*) printf "%%$num"esacdoneecho ""
}

示例

$ url_encode "https://github.com/chenxizhan1995/lib/tree/master/精通 Spring Boot 42 讲"
https://github.com/chenxizhan1995/lib/tree/master/%e7%b2%be%e9%80%9a%20Spring%20Boot%2042%20%e8%ae%b2
$ url_decode https://github.com/chenxizhan1995/lib/tree/master/%e7%b2%be%e9%80%9a%20Spring%20Boot%2042%20%e8%ae%b2
https://github.com/chenxizhan1995/lib/tree/master/精通 Spring Boot 42 讲

2. 原理

2.1 url 的编码规则

URL元字符： ;,/?:@&=+$#，即：
分号（;），逗号（,），斜杠（/），问号（?），冒号（:），at（@），&，等号（=），加号（+），美元符号（$），井号（#）
语义字符：数字字母和-_.!~*'()，即：
数字字母（a-zA-Z0-9），连词号（-），下划线（_），点（.），感叹号（!），波浪线（~），星号（*），单引号（'），圆括号（()）

对完整的url进行编码处理，是将元字符和语义字符之外的字符都进行转义。
对URL的组件（如路径或参数）进行编码处理，则是将除了语义字符之外的字符进行转义，包括元字符。

编码时，将需要编码的字符以 %hh 的格式表示，其中 hh 是字符的编码对应的两位十六进制数字。
比如空格的ASCII码值为 0X20，则它编码后就是 %20；解码就是反过来，把 %20 替换为空格。

例如 http://example.com/ba r/tmp 含有特殊字符空格，编码后就是 http://example.com/ba%20r/tmp。
另外，空格特别常用，所以直接把空格替换为+，而不是 %20 也是符合规范的，http://example.com/ba+r/tmp。
所以解码的时候后两者都解码为 http://exmaple.com/ba r/tmp。

2.2 printf

printf 是 Linux 的命令，它类似于 C 语言的 printf() 函数，用于格式化输出字符串。
它的格式是 printf 'fmt_str' arg1 arg2 ... argN。
例如
printf "hello %s, my name is %s\n" Jack Tom 会打印 hello Jack, my name is Tom。

该命令支持转义序列

\b \t \n \r \f ’ " \
八进制 \n \nn \mnn
十六进制 \xhh \uhhhh \Uhhhhhhhh

printf 'hello,\x20world\n' 会输出 hello,<SP>world<LF>

附：参考资料

linux shell实现中文UrlEncode编解码_beeworkshop的博客-CSDN博客_shell urlencode

如何在命令行上编码和解码percent-encoded字符串？ - Ubuntu问答

man printf