[转帖] 传参base64时的+号变空格问题

base64,空格,问题 · 浏览次数 : 0

小编点评

**问题原因:** 当数据包含带有 `+` 的字符时,其值在进行 base64编码时会被编码为 `space`,因为 `+` 在 `base64` 字符串中表示空格。 **解决方案:** * 将数据进行 `urlencode` 编码,将 `+` 字符替换为 `%2B`。 * 在发送请求时,使用 `urlencode` 编码数据的值。 * 在服务端进行 `urldecode` 解析数据,将 `%2B` 替换为 `+`。 **示例:** ```java // 进行 base64编码 String base64Str = Base64.getEncoder().encodeToString(data); // 进行 urlencode编码 String requestStr = "data=" + URLEncoder.encode(base64Str, "UTF-8"); // 发送请求 // ... ``` **注意:** * 如果数据中包含多个 `+` 字符,每个 `+` 都会被编码为 `%2B`。 * 在使用 `urlencode` 编码数据之前,请确保数据中没有 `+` 字符。

正文

https://www.cnblogs.com/codelogs/p/17255425.html

 

原创:扣钉日记(微信公众号ID:codelogs),欢迎分享,非公众号转载保留此声明。

问题发生#

上上周,看到一位老哥找我们组同事联调接口,不知道是什么问题,两人坐一起搞了快1个小时,看起来好像有点复杂。

突然,老哥发出一声卧槽,"我传参里的+号,到你这怎么变成了空格!",这个声音很大,我明显的听到了,很快,我就大概Get到了他们的问题点。

我猜测他们遇到的问题大概如下:

  1. 我们的接口协议上,都会将请求数据做一次base64编码,然后放到data参数上。
  2. 然后某些数据做base64编码后有+,如{"notes":"代码"}base64编码为eyJub3RlcyI6IuS7o+eggSJ9Cg==
  3. 然后直接拼到data参数上,即data=eyJub3RlcyI6IuS7o+eggSJ9Cg==,组织成http请求发出。

如果写成等价的curl,就是这样:

$ curl http://localhost:8080/send -d 'data=eyJub3RlcyI6IuS7o+eggSJ9Cg=='

写个测试接口调试下看看,如下:
bug
这就是他们遇到的问题,+会变成空格,这个坑其实蛮容易踩到,我自己刚工作时就踩到过这个坑,也多次看到或听到别人同踩此坑🤣

问题原因#

这个问题和urlencode编码有关,urlencode编码,一般来说,除字母、数字和*.-_这些字节原样输出外,其它字节都会编码为%XX(16进制)的形式。
urlencode

但有一个特例,如下:

String enc = URLEncoder.encode(" ", "UTF-8");
System.out.println(enc);   // 输出+号

String dec = URLDecoder.decode("+", "UTF-8");
System.out.println(dec);   // 输出空格

特例就是空格会被编码为+号,反之,+号会被解码为空格!

注:在新的RFC 2396规范中,空格其实也可以编码成%20,而解码时,+号与%20都会被解码为空格。

回想上面的场景,如果将带有+号的base64字符串,原封不动的封装到data=中,再发送给Tomcat等Web服务器,若Tomcat侧做一次urldecode解码,+是不是就变成空格了😁

而Tomcat确实会做urldecode解码这样的操作,当调用方的Content-Type为application/x-www-form-urlencoded时,这里知道有这种操作即可,想了解细节可看看我写的这篇文章 由x-www-form-urlencoded引发的接口对接失败

解决问题#

解决这种问题,主要有两种方法,如下:

  1. 调用方对参数做urlencode编码。

按规范来看,当Content-Type为application/x-www-form-urlencoded时,调用方是必须对参数名与参数值做urlencode的,java实现如下:

String base64Str = Base64.getEncoder().encodeToString(data);
String requestStr = "data=" + URLEncoder.encode(base64Str, "UTF-8");

这里做了urlencode后,+会被编码为%2B,再由服务端解码,就会变成原样的+号。

注:如果是使用apache的HttpClient,可考虑使用UrlEncodedFormEntity,它会自动做这个事情。

  1. 使用urlsafe版本的base64。

普通的base64不能直接作为参数值,因为它可能包含+/这两个url不安全的字符,所以base64有个变种叫urlBase64,它将+/替换成了url安全的-_,java实现如下:

String urlBase64Str = Base64.getUrlEncoder().encodeToString(data);
String requestStr = "data=" + urlBase64Str;

关于base64、urlencode编码,之前也专门写过一篇文章,感兴趣可进一步阅读 hex,base64,urlencode编码方案对比

作者:打码日记

出处:https://www.cnblogs.com/codelogs/p/17255425.html

版权:本作品采用「署名-非商业性使用-相同方式共享 4.0 国际」许可协议进行许可。

与[转帖] 传参base64时的+号变空格问题相似的内容:

[转帖] 传参base64时的+号变空格问题

https://www.cnblogs.com/codelogs/p/17255425.html 原创:扣钉日记(微信公众号ID:codelogs),欢迎分享,非公众号转载保留此声明。 问题发生# 上上周,看到一位老哥找我们组同事联调接口,不知道是什么问题,两人坐一起搞了快1个小时,看起来好像有点复

[转帖]Jmeter跨线程组传参

https://www.cnblogs.com/a00ium/p/10462576.html 我们知道,同一线程组中可以通过“正则表达式提取器”获取其中一个取样器的响应结果中的参数,直接传给线程组中的其他取样器。但其他线程组中的取样器也想使用同样的参数时,无法直接获取。举个例子: 提取“登录”取样器

[转帖]Shell编程之函数

目录 Shell函数使用Shell函数的优点 Shell 函数定义使用原则函数传参函数变量的作用范围 函数递归阶乘递归目录函数库 Shell函数 将命令序列按格式写在一起可方便重复使用命令序列Shell函数定义 调用函数的方法 使用Shell函数的优点 使用函数可以避免代码重复使用函数可以将大的工程

[转帖]expect 实现 ssh免密登录的脚本

expect 实现 ssh免密登录的脚本 #!/bin/bash #Author:cosann #Version:0.2 #date:2022/7/27 #description:批量部署SSH免密登录脚本 E_ERROR=65 #传参检测 if [ $# -ne 1 ] then echo -e

[转帖]Shell脚本数组(实现冒泡排序,直接选择排序,反转排序)

目录 数组数组定义方法数组包括的数据类型获取数组长度读取某下标赋值 数组遍历数组切片数组替换删除数组追加数组中的元素从函数返回数组加法传参运算乘法传参运算 数组排序算法冒泡排序直接选择排序反转排序 数组 数组中可以存放多个值(bash 只支持一维数组)数组元素的索引从0开始数组在括号内指定数组的值,

[转帖]sqlplus与shell互相传值的几种情况

https://www.cnblogs.com/youngerger/p/9068888.html sqlplus与shell互相传值的几种情况 情况一:在shell中最简单的调用sqlplus $cat test.sh #!/bin/sh sqlplus oracle/oracle@oracle>

[转帖]名言警句

https://www.cnblogs.com/zhoading/p/17128217.html 法不轻传,道不贱卖。师不顺路,医不叩门。香不白烧,经不空念。千金不传无义者,万财不渡忘恩人。医逢信者但可救,道遇无名枉费心。甘露不润无根草,妙法只渡有缘人。

[转帖]《JavaWeb篇》07. HTTP&Tomcat&Servlet看这一篇就够了

https://bbs.huaweicloud.com/blogs/380969 【摘要】 Web是全球广域网,也称为万维网(www),能够通过浏览器访问的网站。 在我们日常的生活中,经常会使用浏览器去访问`百度`、`京东`、`传智官网`等这些网站,这些网站统称为Web网站。 HTTP&Tomcat

[转帖]BPF 拓荒者 —— Brendan Gregg 与 Netflix 的故事

https://www.modb.pro/db/421308 译者写在开头 在我的上一篇文章:Brendan@Intel.com[1] 中,我翻译了他与 Intel 的故事。这次,我们时光倒流一下,说说前传:Brendan Gregg 与 Netflix 的故事。 我写博客的出发点是想把自己所学所思

[转帖]图解:什么是红黑树?

https://zhuanlan.zhihu.com/p/273829162 注:本文比较硬核但是很值得大家花心思看完,看完你一定会有所收获的 红黑树是面试中一个很经典也很有难度的知识点,网传字节跳动面试官最喜欢问这个问题。很多人会觉得这个知识点太难,不想花太多功夫去了解,也有人会认为这个数据结构在