记一次 Mysql Json 格式的查询

本贴最后更新于 2026 天前,其中的信息可能已经时过境迁

近期在工作中有接触到 MySQL5.7 新增的 Json 存储格式。
之前存储这种 1 对多的可扩展对象都是使用 jsonstr 以 varchar 格式保存。在接触到 json 格式之后,本以为是更加方便,结果出现了一个大问题,在国内网上找资料怎么都是找不到原因(可能是我搜索的方式不对)。在这里记录一下这个事件。
背景:
当 json 对象的值以字符串格式存储的时候,会以 json{"id":id,"jsonParam":"jsonParam"}的形式保存。然后这时候在进行取值的时候,如果使用 jsonName ->'$.jsonParam' as jsonParam 或者 JSON_EXTRACT(jsonName,'$.jsonParam') as jsonParam 的时候会返回

id jsonParam
id "jsonParam"
也就是说返回的结果也会附带“"” 这个时候在 Service 层要处理数据就需要先进行相关的转换。
然而 Json 格式的返回值,无论使用 trim() 还是 JSON_UNQUOTE() 都会出现本地或工具运行时可以看到值,而使用程序的 mybaties 赋值给接收的 JSONObject 对象时,debug 发现总是取不到值的问题。
处理:
使用 debug 时,发现返回值都有 key,但是 value 全是空的,而且奇怪的是,value 中是有对象的,而且有时候还会呈现数组的那种形式。
于是使用 log 方式将这个接收的对象以 jsonStr 的方式打印出来,发现里面的值并不是预想的 String 类型。
进行返回值的类型确认,发现这个值的类型属于 byte[] , 黑人问号.gif
网上各种查资料,有的说是数据库 Connection 的版本问题,可是在升级到 5.1.40 之后仍然无法解决这个问题。。。。。。看起来应该是属于其他的问题导致。
迫于项目的紧急性,之后线将程序功能写出来,后面再慢慢探究其缘由。
不过既然知道返回的数据类型了,就可以很好的进行处理了。
目前想到的方案有 2:
1、mysql 不进行“"”的处理,收到返回值后,使用字符串替换掉“"”。
2、继续在 mysql 中进行“"”的处理,返回值再进行 byte[]的处理。
理论上俩个都是可行的,不过方案 2 相当于多进行了一次数据处理。(以我目前的 LV 还不能确定哪个更优。)
注:JSON_UNQUOTE(JSON_EXTRACT(jsonName,'$.jsonParam')) 等价 <![CDATA[jsonName -> '$.jsonParam']]>
不过我选择的还是第二种方案,原因是我“没法确定”json 的属性值中是否含有自带的“"”(不过其实在当前需求进行 mysql 的表结构设计的时候,是不会出现某个 json 属性为另一个 json 对象 即 {id:id,obj:{id:id}}这种结构。但是为了后面新增功能时少修改的东西,还是使用稳妥的方案 2 看起来更加靠谱。
sql:
<!--<![CDATA[  select  AUTHORITY->>'$.flag'   flag ,  AUTHORITY->>'$.ids' ids  ]]> from com_position where ID in <foreach collection="positionIds" open="(" item="positionId" separator="," close=")">#{positionId,jdbcType=VARCHAR}</foreach>>-->
<![CDATA[  select  AUTHORITY->>'$.flag'   flag ,  AUTHORITY->>'$.ids' ids  ]]> from com_position where ID in <foreach collection="positionIds" open="(" item="positionId" separator="," close=")">#{positionId,jdbcType=VARCHAR}</foreach>>

//			    因为json取值多出“"” 使用替换
//                String tmp = authority.getString("ids").replaceAll("\"","");
//                authority.put("ids",tmp);
//                tmp=authority.getString("flag").replaceAll("\"","");
//               authority.put("flag",tmp);
                if(authority.get("ids") instanceof byte[]){
                    byte[] bytes = (byte[])authority.get("ids");
                    try {
                        String tt = new String(bytes,"UTF-8");
                        authority.put("ids",tt);
                    } catch (UnsupportedEncodingException e) {
                        e.printStackTrace();
                    }
                }

同时也希望有大神能留言告诉小弟,为什么这里使用 JSON_UNQUOTE 和 trim 会且都会变成 byte[]的类型

  • MySQL

    MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是最流行的关系型数据库管理系统之一。

    690 引用 • 535 回帖
  • Java

    Java 是一种可以撰写跨平台应用软件的面向对象的程序设计语言,是由 Sun Microsystems 公司于 1995 年 5 月推出的。Java 技术具有卓越的通用性、高效性、平台移植性和安全性。

    3187 引用 • 8213 回帖
1 操作
thinrflbtlm 在 2019-05-06 13:19:02 更新了该帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • 安全

    安全永远都不是一个小问题。

    199 引用 • 816 回帖 • 1 关注
  • Telegram

    Telegram 是一个非盈利性、基于云端的即时消息服务。它提供了支持各大操作系统平台的开源的客户端,也提供了很多强大的 APIs 给开发者创建自己的客户端和机器人。

    5 引用 • 35 回帖 • 1 关注
  • 百度

    百度(Nasdaq:BIDU)是全球最大的中文搜索引擎、最大的中文网站。2000 年 1 月由李彦宏创立于北京中关村,致力于向人们提供“简单,可依赖”的信息获取方式。“百度”二字源于中国宋朝词人辛弃疾的《青玉案·元夕》词句“众里寻他千百度”,象征着百度对中文信息检索技术的执著追求。

    63 引用 • 785 回帖 • 175 关注
  • Git

    Git 是 Linux Torvalds 为了帮助管理 Linux 内核开发而开发的一个开放源码的版本控制软件。

    209 引用 • 358 回帖
  • 大疆创新

    深圳市大疆创新科技有限公司(DJI-Innovations,简称 DJI),成立于 2006 年,是全球领先的无人飞行器控制系统及无人机解决方案的研发和生产商,客户遍布全球 100 多个国家。通过持续的创新,大疆致力于为无人机工业、行业用户以及专业航拍应用提供性能最强、体验最佳的革命性智能飞控产品和解决方案。

    2 引用 • 14 回帖
  • GitLab

    GitLab 是利用 Ruby 一个开源的版本管理系统,实现一个自托管的 Git 项目仓库,可通过 Web 界面操作公开或私有项目。

    46 引用 • 72 回帖
  • Notion

    Notion - The all-in-one workspace for your notes, tasks, wikis, and databases.

    6 引用 • 38 回帖
  • 书籍

    宋真宗赵恒曾经说过:“书中自有黄金屋,书中自有颜如玉。”

    77 引用 • 390 回帖
  • IDEA

    IDEA 全称 IntelliJ IDEA,是一款 Java 语言开发的集成环境,在业界被公认为最好的 Java 开发工具之一。IDEA 是 JetBrains 公司的产品,这家公司总部位于捷克共和国的首都布拉格,开发人员以严谨著称的东欧程序员为主。

    180 引用 • 400 回帖
  • SOHO

    为成为自由职业者在家办公而努力吧!

    7 引用 • 55 回帖 • 19 关注
  • 小说

    小说是以刻画人物形象为中心,通过完整的故事情节和环境描写来反映社会生活的文学体裁。

    28 引用 • 108 回帖 • 1 关注
  • Bug

    Bug 本意是指臭虫、缺陷、损坏、犯贫、窃听器、小虫等。现在人们把在程序中一些缺陷或问题统称为 bug(漏洞)。

    75 引用 • 1737 回帖 • 5 关注
  • Kafka

    Kafka 是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是现代系统中许多功能的基础。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。

    36 引用 • 35 回帖
  • sts
    2 引用 • 2 回帖 • 196 关注
  • OkHttp

    OkHttp 是一款 HTTP & HTTP/2 客户端库,专为 Android 和 Java 应用打造。

    16 引用 • 6 回帖 • 62 关注
  • JetBrains

    JetBrains 是一家捷克的软件开发公司,该公司位于捷克的布拉格,并在俄国的圣彼得堡及美国麻州波士顿都设有办公室,该公司最为人所熟知的产品是 Java 编程语言开发撰写时所用的集成开发环境:IntelliJ IDEA

    18 引用 • 54 回帖
  • GAE

    Google App Engine(GAE)是 Google 管理的数据中心中用于 WEB 应用程序的开发和托管的平台。2008 年 4 月 发布第一个测试版本。目前支持 Python、Java 和 Go 开发部署。全球已有数十万的开发者在其上开发了众多的应用。

    14 引用 • 42 回帖 • 764 关注
  • TensorFlow

    TensorFlow 是一个采用数据流图(data flow graphs),用于数值计算的开源软件库。节点(Nodes)在图中表示数学操作,图中的线(edges)则表示在节点间相互联系的多维数据数组,即张量(tensor)。

    20 引用 • 19 回帖
  • CentOS

    CentOS(Community Enterprise Operating System)是 Linux 发行版之一,它是来自于 Red Hat Enterprise Linux 依照开放源代码规定释出的源代码所编译而成。由于出自同样的源代码,因此有些要求高度稳定的服务器以 CentOS 替代商业版的 Red Hat Enterprise Linux 使用。两者的不同在于 CentOS 并不包含封闭源代码软件。

    238 引用 • 224 回帖
  • RESTful

    一种软件架构设计风格而不是标准,提供了一组设计原则和约束条件,主要用于客户端和服务器交互类的软件。基于这个风格设计的软件可以更简洁,更有层次,更易于实现缓存等机制。

    30 引用 • 114 回帖 • 2 关注
  • 友情链接

    确认过眼神后的灵魂连接,站在链在!

    24 引用 • 373 回帖
  • 负能量

    上帝为你关上了一扇门,然后就去睡觉了....努力不一定能成功,但不努力一定很轻松 (° ー °〃)

    88 引用 • 1235 回帖 • 411 关注
  • WebClipper

    Web Clipper 是一款浏览器剪藏扩展,它可以帮助你把网页内容剪藏到本地。

    3 引用 • 9 回帖
  • IPFS

    IPFS(InterPlanetary File System,星际文件系统)是永久的、去中心化保存和共享文件的方法,这是一种内容可寻址、版本化、点对点超媒体的分布式协议。请浏览 IPFS 入门笔记了解更多细节。

    21 引用 • 245 回帖 • 241 关注
  • JavaScript

    JavaScript 一种动态类型、弱类型、基于原型的直译式脚本语言,内置支持类型。它的解释器被称为 JavaScript 引擎,为浏览器的一部分,广泛用于客户端的脚本语言,最早是在 HTML 网页上使用,用来给 HTML 网页增加动态功能。

    729 引用 • 1327 回帖
  • HTML

    HTML5 是 HTML 下一个的主要修订版本,现在仍处于发展阶段。广义论及 HTML5 时,实际指的是包括 HTML、CSS 和 JavaScript 在内的一套技术组合。

    107 引用 • 295 回帖
  • GraphQL

    GraphQL 是一个用于 API 的查询语言,是一个使用基于类型系统来执行查询的服务端运行时(类型系统由你的数据定义)。GraphQL 并没有和任何特定数据库或者存储引擎绑定,而是依靠你现有的代码和数据支撑。

    4 引用 • 3 回帖 • 9 关注