Java常用json序列化工具的部分局限性

elliott_hu 发布于2019-08-19 10:30 / 3365人阅读

摘要：我最终的解决方案是用反序列化，再利用反射工具来对某些数值进行到的转化。速度快，但是对反序列化的类也有一定要求，而且在反序列化复杂的时较多阿里云的很多也由于这个原因并未使用。

Problem

在写Java的Unit Test时，对于Unit Test所期望的值，一般是利用工具从test/resources目录下将expectResult.json读取进来并用json序列化工具进行反序列化来获得Unit Test所期望的结果，并与测试的实际结果进行对比。然而若是反序列化所用的类来源于第三方库（即不能更改任何代码），会遇到很大的问题。以下以本人对阿里云的StreamRecord类进行反序列化时遇到的问题进行描述：

StreamRecord类的定义如下：

</>复制代码 
public class StreamRecord {
    public enum RecordType {
        /**
         * PUT类型
         * 如果对应行已存在，该Record需要覆盖原有数据。
         */
        PUT,
        /**
         * UPDATE类型
         * 如果对应行已存在，该Record是在原有数据上的更新。
         */
        UPDATE,
        /**
         * DELETE类型
         * 表明要删除对应的行。
         */
        DELETE
    }
    /**
     * Record的类型
     */
    private RecordType recordType;
    /**
     * 对应行的主键
     */
    private PrimaryKey primaryKey;
    /**
     * 对应行的时序信息
     */
    private RecordSequenceInfo sequenceInfo;
    /**
     * 该Record包含的属性列，为RecordColumn类型
     */
    private List columns;
    /**
     * 获取Record的类型
     * @return Record的类型
     */
    public RecordType getRecordType() {
        return recordType;
    }
    public void setRecordType(RecordType recordType) {
        this.recordType = recordType;
    }
    /**
     * 获取对应行的主键
     * @return 对应行的主键
     */
    public PrimaryKey getPrimaryKey() {
        return primaryKey;
    }
    public void setPrimaryKey(PrimaryKey primaryKey) {
        this.primaryKey = primaryKey;
    }
    /**
     * 获取该行的时序信息
     * @return 该行的时序信息
     */
    public RecordSequenceInfo getSequenceInfo() {
        return sequenceInfo;
    }
    public void setSequenceInfo(RecordSequenceInfo sequenceInfo) {
        this.sequenceInfo = sequenceInfo;
    }
    /**
     * 获取该Record包含的属性列列表
     * @return 该Record包含的属性列列表
     */
    public List getColumns() {
        if (columns != null) {
            return columns;
        } else {
            return new ArrayList();
        }
    }
    public void setColumns(List columns) {
        this.columns = columns;
    }
    @Override
    public String toString() {
        StringBuilder sb = new StringBuilder();
        sb.append("[RecordType:]");
        sb.append(this.recordType);
        sb.append("
[RecordSequenceInfo:]");
        sb.append(this.sequenceInfo);
        sb.append("
[PrimaryKey:]");
        sb.append(this.primaryKey);
        sb.append("
[Columns:]");
        for (RecordColumn column : this.getColumns()) {
            sb.append("(");
            sb.append(column);
            sb.append(")");
        }
        return sb.toString();
    }
}

本工程原先只用Jackson进行序列化和反序列化，但Jackson的ObjectMapper在对此类进行反序列化时，报了No suitable constructor的错误，经过调查发现Jackson进行反序列化需要默认的构造函数（如果有带参数的构造函数，还要用@JsonCreator修饰构造函数，用@JsonProperty修饰构造函数参数），而上述类没有，即使有我们也不能对阿里云等第三方库进行更改，遂放弃Jackson，转而考虑阿里自己的fastjson。fastjson的确能对该类进行反序列化，但是当我仔细分析反序列化后的对象时，发现有些深层的字段的值为null，又经过一番调查，了解到fastjson虽然对反序列化的类没有构造函数的要求，但对字段有要求，反序列化的private字段要有setter方法才能正常的反序列化（或者有一个带有所有字段参数的构造函数），若是private字段缺少setter方法，则该字段的值为默认值。最后考虑用Google的Gson，Gson没有上述这些问题，但是若反序列化类有Object类型的字段，而该字段的值为数值型，则Gson都会转为Double型，比如你有个字段为

</>复制代码 
private Map map;

json文件：

</>复制代码 
{
  "age": 24,
  "height": 1.81
}

当把上述json文件反序列化为map字段时，直觉上会认为“age”字段的值的类型应该为Integer或Long型，然而Gson这里有点反常，由于map的value为Object类型，并未明确指定具体的数值类型，它会将key为“age”的字段会变为Double类型（并不是我们直觉上所期望的Integer或Long型），给后续编程带来麻烦。关于Gson的这个“特性”，可以参考https://github.com/google/gso... 上面的“debate”，比较有趣的“网友怼作者”。

我最终的解决方案是用Gson反序列化，再利用反射工具ReflectionTestUtils.setField来对某些数值进行Double到Long的转化。

Conclusion

Jackson 功能强大，但对反序列化的类的要求较高（要有默认的constructor）。

Fastjson 速度快，但是对反序列化的类也有一定要求，而且在反序列化复杂的json时bug较多（阿里云的很多sdk也由于这个原因并未使用fastjson）。

Gson 比较全面，对反序列化的类的要求最低，但是对于Object类型的数值字段处理不够友好。

以上实验所用版本：

</>复制代码 
compile group: "com.google.code.gson", name: "gson", version: "2.8.5"
compile group: "com.alibaba", name: "fastjson", version: "1.2.56"

因此，如果没有遇到序列化和反序列化第三方库的model的情况下（即代码无法更改的情况），首选Jackson，否则选Gson。

云服务器 GPU云服务器 java的常用工具类网络营销常用的工具数据分析常用的工具 php常用的开发工具

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/76143.html

数人云工程师手记 | 容器日志管理实践

摘要：容器内文件日志平台支持的文件存储是，避免了许多复杂环境的处理。以上是数人云在实践容器日志系统过程中遇到的问题，更高层次的应用包括容器日志分析等，还有待继续挖掘和填坑，欢迎大家提出建议，一起交流。业务平台每天产生大量日志数据，为了实现数据分析，需要将生产服务器上的所有日志收集后进行大数据分析处理，Docker提供了日志驱动，然而并不能满足不同场景需求，本次将结合实例分享日志采集、存储以...

saucxs 2019-06-28 15:35 评论0 收藏0
百度java学习笔记

摘要：一般在存当前含有当前时间的实体时，只需要配置好数据库的存储字段即可。基本代码部分循环的写法这几天初步了解了百度云的后台架构部分，当然了，自己了解的仅限于后台java相关的部分，先说一下客户端这边使用的技术：1、spring boot ：与前端进行直接交互的服务是用spring来实现的（后台服务还需要调用其他的基础服务，如redis 数据库服务订单服务 cdn服务 openstac...

codeGoogle 2019-08-16 10:51 评论0 收藏0
java常用序列化与反序列化方法

摘要：序列化工具类序列化工具的序列化与反序列化使用实现序列化和反序列化反序列化时，必须要有默认构造函数，否则报错使用序列化缓存此类分别包含序列化序列化序列化三种序列化方式。序列化工具类序列化即将对象序列化为字节数组，反序列化就是将字节数组恢复成对象。主要的目的是方便传输和存储。序列化工具类： public class SerializeUtil { private stati...

zhkai 2019-08-15 11:01 评论0 收藏0
开发NEO智能合约的步骤流程

摘要：在社区开发的一些最新工具集的帮助下，出现了四步流程法，从而进一步加快了开发效率。两步流程法传统上来说，智能合约开发有两步开发流程编码和测试。四步工作流程法开发智能合约对于编辑和调试阶段，我建议使用两种方法和。摘要：开发NEO智能合约的典型开发流程有两个实际阶段：编码（在IDE中编码并将源码编译为.avm文件）以及测试（在测试网上部署、调用、检查结果）。这个工作流需要编译和部署来调试任...

I_Am 2019-08-16 13:39 评论0 收藏0
开发NEO智能合约的步骤流程

摘要：在社区开发的一些最新工具集的帮助下，出现了四步流程法，从而进一步加快了开发效率。两步流程法传统上来说，智能合约开发有两步开发流程编码和测试。四步工作流程法开发智能合约对于编辑和调试阶段，我建议使用两种方法和。摘要：开发NEO智能合约的典型开发流程有两个实际阶段：编码（在IDE中编码并将源码编译为.avm文件）以及测试（在测试网上部署、调用、检查结果）。这个工作流需要编译和部署来调试任...

zhou_you 2019-07-31 11:18 评论0 收藏0