记一次 Mysql Json 格式的查询

本贴最后更新于 2375 天前,其中的信息可能已经时过境迁

近期在工作中有接触到 MySQL5.7 新增的 Json 存储格式。
之前存储这种 1 对多的可扩展对象都是使用 jsonstr 以 varchar 格式保存。在接触到 json 格式之后,本以为是更加方便,结果出现了一个大问题,在国内网上找资料怎么都是找不到原因(可能是我搜索的方式不对)。在这里记录一下这个事件。
背景:
当 json 对象的值以字符串格式存储的时候,会以 json{"id":id,"jsonParam":"jsonParam"}的形式保存。然后这时候在进行取值的时候,如果使用 jsonName ->'$.jsonParam' as jsonParam 或者 JSON_EXTRACT(jsonName,'$.jsonParam') as jsonParam 的时候会返回

id jsonParam
id "jsonParam"
也就是说返回的结果也会附带“"” 这个时候在 Service 层要处理数据就需要先进行相关的转换。
然而 Json 格式的返回值,无论使用 trim() 还是 JSON_UNQUOTE() 都会出现本地或工具运行时可以看到值,而使用程序的 mybaties 赋值给接收的 JSONObject 对象时,debug 发现总是取不到值的问题。
处理:
使用 debug 时,发现返回值都有 key,但是 value 全是空的,而且奇怪的是,value 中是有对象的,而且有时候还会呈现数组的那种形式。
于是使用 log 方式将这个接收的对象以 jsonStr 的方式打印出来,发现里面的值并不是预想的 String 类型。
进行返回值的类型确认,发现这个值的类型属于 byte[] , 黑人问号.gif
网上各种查资料,有的说是数据库 Connection 的版本问题,可是在升级到 5.1.40 之后仍然无法解决这个问题。。。。。。看起来应该是属于其他的问题导致。
迫于项目的紧急性,之后线将程序功能写出来,后面再慢慢探究其缘由。
不过既然知道返回的数据类型了,就可以很好的进行处理了。
目前想到的方案有 2:
1、mysql 不进行“"”的处理,收到返回值后,使用字符串替换掉“"”。
2、继续在 mysql 中进行“"”的处理,返回值再进行 byte[]的处理。
理论上俩个都是可行的,不过方案 2 相当于多进行了一次数据处理。(以我目前的 LV 还不能确定哪个更优。)
注:JSON_UNQUOTE(JSON_EXTRACT(jsonName,'$.jsonParam')) 等价 <![CDATA[jsonName -> '$.jsonParam']]>
不过我选择的还是第二种方案,原因是我“没法确定”json 的属性值中是否含有自带的“"”(不过其实在当前需求进行 mysql 的表结构设计的时候,是不会出现某个 json 属性为另一个 json 对象 即 {id:id,obj:{id:id}}这种结构。但是为了后面新增功能时少修改的东西,还是使用稳妥的方案 2 看起来更加靠谱。
sql:
<!--<![CDATA[ select AUTHORITY->>'$.flag' flag , AUTHORITY->>'$.ids' ids ]]> from com_position where ID in <foreach collection="positionIds" open="(" item="positionId" separator="," close=")">#{positionId,jdbcType=VARCHAR}</foreach>>--> <![CDATA[ select AUTHORITY->>'$.flag' flag , AUTHORITY->>'$.ids' ids ]]> from com_position where ID in <foreach collection="positionIds" open="(" item="positionId" separator="," close=")">#{positionId,jdbcType=VARCHAR}</foreach>>
// 因为json取值多出“"” 使用替换 // String tmp = authority.getString("ids").replaceAll("\"",""); // authority.put("ids",tmp); // tmp=authority.getString("flag").replaceAll("\"",""); // authority.put("flag",tmp); if(authority.get("ids") instanceof byte[]){ byte[] bytes = (byte[])authority.get("ids"); try { String tt = new String(bytes,"UTF-8"); authority.put("ids",tt); } catch (UnsupportedEncodingException e) { e.printStackTrace(); } }

同时也希望有大神能留言告诉小弟,为什么这里使用 JSON_UNQUOTE 和 trim 会且都会变成 byte[]的类型

  • MySQL

    MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是最流行的关系型数据库管理系统之一。

    695 引用 • 538 回帖
  • Java

    Java 是一种可以撰写跨平台应用软件的面向对象的程序设计语言,是由 Sun Microsystems 公司于 1995 年 5 月推出的。Java 技术具有卓越的通用性、高效性、平台移植性和安全性。

    3206 引用 • 8217 回帖 • 10 关注
1 操作
thinrflbtlm 在 2019-05-06 13:19:02 更新了该帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • 导航

    各种网址链接、内容导航。

    45 引用 • 177 回帖
  • Kotlin

    Kotlin 是一种在 Java 虚拟机上运行的静态类型编程语言,由 JetBrains 设计开发并开源。Kotlin 可以编译成 Java 字节码,也可以编译成 JavaScript,方便在没有 JVM 的设备上运行。在 Google I/O 2017 中,Google 宣布 Kotlin 成为 Android 官方开发语言。

    19 引用 • 33 回帖 • 91 关注
  • V2EX

    V2EX 是创意工作者们的社区。这里目前汇聚了超过 400,000 名主要来自互联网行业、游戏行业和媒体行业的创意工作者。V2EX 希望能够成为创意工作者们的生活和事业的一部分。

    16 引用 • 236 回帖 • 234 关注
  • 架构

    我们平时所说的“架构”主要是指软件架构,这是有关软件整体结构与组件的抽象描述,用于指导软件系统各个方面的设计。另外还有“业务架构”、“网络架构”、“硬件架构”等细分领域。

    145 引用 • 442 回帖
  • OAuth

    OAuth 协议为用户资源的授权提供了一个安全的、开放而又简易的标准。与以往的授权方式不同之处是 oAuth 的授权不会使第三方触及到用户的帐号信息(如用户名与密码),即第三方无需使用用户的用户名与密码就可以申请获得该用户资源的授权,因此 oAuth 是安全的。oAuth 是 Open Authorization 的简写。

    36 引用 • 103 回帖 • 38 关注
  • 资讯

    资讯是用户因为及时地获得它并利用它而能够在相对短的时间内给自己带来价值的信息,资讯有时效性和地域性。

    56 引用 • 85 回帖
  • Windows

    Microsoft Windows 是美国微软公司研发的一套操作系统,它问世于 1985 年,起初仅仅是 Microsoft-DOS 模拟环境,后续的系统版本由于微软不断的更新升级,不但易用,也慢慢的成为家家户户人们最喜爱的操作系统。

    232 引用 • 484 回帖 • 1 关注
  • OneNote
    2 引用 • 5 回帖
  • 开源

    Open Source, Open Mind, Open Sight, Open Future!

    419 引用 • 3604 回帖
  • 游戏

    沉迷游戏伤身,强撸灰飞烟灭。

    188 引用 • 833 回帖 • 1 关注
  • GraphQL

    GraphQL 是一个用于 API 的查询语言,是一个使用基于类型系统来执行查询的服务端运行时(类型系统由你的数据定义)。GraphQL 并没有和任何特定数据库或者存储引擎绑定,而是依靠你现有的代码和数据支撑。

    4 引用 • 3 回帖 • 15 关注
  • 浅吟主题

    Jeffrey Chen 制作的思源笔记主题,项目仓库:https://github.com/TCOTC/Whisper

    2 引用 • 34 回帖
  • H2

    H2 是一个开源的嵌入式数据库引擎,采用 Java 语言编写,不受平台的限制,同时 H2 提供了一个十分方便的 web 控制台用于操作和管理数据库内容。H2 还提供兼容模式,可以兼容一些主流的数据库,因此采用 H2 作为开发期的数据库非常方便。

    11 引用 • 54 回帖 • 691 关注
  • 支付宝

    支付宝是全球领先的独立第三方支付平台,致力于为广大用户提供安全快速的电子支付/网上支付/安全支付/手机支付体验,及转账收款/水电煤缴费/信用卡还款/AA 收款等生活服务应用。

    29 引用 • 347 回帖
  • DevOps

    DevOps(Development 和 Operations 的组合词)是一组过程、方法与系统的统称,用于促进开发(应用程序/软件工程)、技术运营和质量保障(QA)部门之间的沟通、协作与整合。

    59 引用 • 25 回帖 • 2 关注
  • 百度

    百度(Nasdaq:BIDU)是全球最大的中文搜索引擎、最大的中文网站。2000 年 1 月由李彦宏创立于北京中关村,致力于向人们提供“简单,可依赖”的信息获取方式。“百度”二字源于中国宋朝词人辛弃疾的《青玉案·元夕》词句“众里寻他千百度”,象征着百度对中文信息检索技术的执著追求。

    63 引用 • 785 回帖 • 50 关注
  • 链书

    链书(Chainbook)是 B3log 开源社区提供的区块链纸质书交易平台,通过 B3T 实现共享激励与价值链。可将你的闲置书籍上架到链书,我们共同构建这个全新的交易平台,让闲置书籍继续发挥它的价值。

    链书社

    链书目前已经下线,也许以后还有计划重制上线。

    14 引用 • 257 回帖 • 3 关注
  • SQLServer

    SQL Server 是由 [微软] 开发和推广的关系数据库管理系统(DBMS),它最初是由 微软、Sybase 和 Ashton-Tate 三家公司共同开发的,并于 1988 年推出了第一个 OS/2 版本。

    21 引用 • 31 回帖
  • Hibernate

    Hibernate 是一个开放源代码的对象关系映射框架,它对 JDBC 进行了非常轻量级的对象封装,使得 Java 程序员可以随心所欲的使用对象编程思维来操纵数据库。

    39 引用 • 103 回帖 • 731 关注
  • HHKB

    HHKB 是富士通的 Happy Hacking 系列电容键盘。电容键盘即无接点静电电容式键盘(Capacitive Keyboard)。

    5 引用 • 74 回帖 • 535 关注
  • ReactiveX

    ReactiveX 是一个专注于异步编程与控制可观察数据(或者事件)流的 API。它组合了观察者模式,迭代器模式和函数式编程的优秀思想。

    1 引用 • 2 回帖 • 190 关注
  • Linux

    Linux 是一套免费使用和自由传播的类 Unix 操作系统,是一个基于 POSIX 和 Unix 的多用户、多任务、支持多线程和多 CPU 的操作系统。它能运行主要的 Unix 工具软件、应用程序和网络协议,并支持 32 位和 64 位硬件。Linux 继承了 Unix 以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。

    960 引用 • 946 回帖 • 1 关注
  • SQLite

    SQLite 是一个进程内的库,实现了自给自足的、无服务器的、零配置的、事务性的 SQL 数据库引擎。SQLite 是全世界使用最为广泛的数据库引擎。

    4 引用 • 7 回帖
  • Shell

    Shell 脚本与 Windows/Dos 下的批处理相似,也就是用各类命令预先放入到一个文件中,方便一次性执行的一个程序文件,主要是方便管理员进行设置或者管理用的。但是它比 Windows 下的批处理更强大,比用其他编程程序编辑的程序效率更高,因为它使用了 Linux/Unix 下的命令。

    126 引用 • 83 回帖 • 1 关注
  • etcd

    etcd 是一个分布式、高可用的 key-value 数据存储,专门用于在分布式系统中保存关键数据。

    6 引用 • 26 回帖 • 554 关注
  • 安全

    安全永远都不是一个小问题。

    201 引用 • 818 回帖 • 2 关注
  • AngularJS

    AngularJS 诞生于 2009 年,由 Misko Hevery 等人创建,后为 Google 所收购。是一款优秀的前端 JS 框架,已经被用于 Google 的多款产品当中。AngularJS 有着诸多特性,最为核心的是:MVC、模块化、自动化双向数据绑定、语义化标签、依赖注入等。2.0 版本后已经改名为 Angular。

    12 引用 • 50 回帖 • 527 关注