Springboot中redis序列化问题分析_.基于spring-data-redis为什么要替换序列化方式?-程序员宅基地

技术标签: 序列化  Spring  redis  springboot  

研究原因:

springboot中使用redis获取数据后,转换成对象时,
总是提示:“com.alibaba.fastjson.JSONException: syntax error, expect {, actual [, pos 0”,
最后发现是因为redis的序列化方式引起的。所以就对redis序列化的方式做一下分析:

1、springboot中redis存储数据序列化方式,常用的有以下几种:

  • StringRedisSerializer:将数据序列化成字符串
  • Jackson2JsonRedisSerializer:将数据序列化成json
  • GenericJackson2JsonRedisSerializer:将数据序列化成json
  • JdkSerializationRedisSerializer:将数据序列化对象

2、粗略研究一下各个序列化方式的优缺点:

  • 对于StringRedisSerializer,是最基础的,如果所有的数据都是字符串,则优先选用该种序列化方式。springboot提供的StringRedisTemplate默认的就是使用该序列化方式。注意,该种序列化方式只能保存字符串,不能保存对象
  • Jackson2JsonRedisSerializer,能保存对象,将对象序列化为json,但是在初始化的时候需要指定要序列化的类,可以使用Object.class。
  • GenericJackson2JsonRedisSerializer,与Jackson2JsonRedisSerializer功能相同,只是存在性能方面的差别,以及GenericJackson2JsonRedisSerializer在初始化时不用指定要泛化的类
  • JdkSerializationRedisSerializer,将数据序列化成对象,但是要保存的数据对象必须要实现Serializable,否则会提示没有序列化。该种序列化方式再redis中是以二进制的方式存储,所以可读性非常差。springboot中提供的RedisTemplate就默认使用该种序列化方式。如果想有好的可读性,就需要更改它的序列化方式

3、各序列化方式的性能优劣:

网上很多人说优先推荐GenericJackson2JsonRedisSerializer,是因为Jackson2JsonRedisSerializer需要指定要泛化的类,下面对Jackson2JsonRedisSerializer,GenericJackson2JsonRedisSerializer,JdkSerializationRedisSerializer三个序列化方式的序列化和反序列化能力做了一个测试:

@Slf4j
public class main {

    public static void main(String[] args) {
        JdkSerializationRedisSerializer jdkSeri = new JdkSerializationRedisSerializer();
        GenericJackson2JsonRedisSerializer genJsonSeri = new GenericJackson2JsonRedisSerializer();
        Jackson2JsonRedisSerializer jack2Seri = new Jackson2JsonRedisSerializer(Object.class);

        User user = new User("1","tom",20,"boy");
        List<Object> list = new ArrayList<>();
        for(int i = 0; i < 1000; i++){
            list.add(user);
        }

        log.info("jdkSeri序列化开始");
        long jdkSeri_Start = System.currentTimeMillis();
        byte[] serialize = jdkSeri.serialize(list);
        log.info("jdkSeri序列化结束,耗时:{}ms,序列化之后的长度为:{}==============",(System.currentTimeMillis()-jdkSeri_Start),serialize.length);
        log.info("jdkSeri开始反序列化");
        long jdkSeri_Start_again = System.currentTimeMillis();
        jdkSeri.deserialize(serialize);
        log.info("jdkSeri反序列化耗时:{}ms===========",(System.currentTimeMillis()-jdkSeri_Start_again));


        log.info("genJsonSeri序列化开始");
        long genJsonSeri_Start = System.currentTimeMillis();
        byte[] serialize1 = genJsonSeri.serialize(list);
        log.info("genJsonSeri序列化结束,耗时:{}ms,序列化之后的长度为:{}==============",(System.currentTimeMillis()-genJsonSeri_Start),serialize1.length);
        log.info("genJsonSeri开始反序列化");
        long genJsonSeri_Start_again = System.currentTimeMillis();
        genJsonSeri.deserialize(serialize1);
        log.info("genJsonSeri反序列化耗时:{}ms===========",(System.currentTimeMillis()-genJsonSeri_Start_again));


        log.info("jack2Seri序列化开始");
        long jack2Seri_Start = System.currentTimeMillis();
        byte[] serialize2 = jack2Seri.serialize(list);
        log.info("jack2Seri序列化结束,耗时:{}ms,序列化之后的长度为:{}===============",(System.currentTimeMillis()-jack2Seri_Start),serialize2.length);
        log.info("jack2Seri开始反序列化");
        long jack2Seri_Start_again = System.currentTimeMillis();
        jack2Seri.deserialize(serialize2);
        log.info("jack2Seri反序列化耗时:{}ms=============",(System.currentTimeMillis()-jack2Seri_Start_again));
    }
}
16:29:32.710 [main] INFO com.whj.springboot.config.main - jdkSeri序列化开始
16:29:32.790 [main] INFO com.whj.springboot.config.main - jdkSeri序列化结束,耗时:68ms,序列化之后的长度为:5175==============
16:29:32.798 [main] INFO com.whj.springboot.config.main - jdkSeri开始反序列化
16:29:32.977 [main] INFO com.whj.springboot.config.main - jdkSeri反序列化耗时:179ms===========
16:29:32.977 [main] INFO com.whj.springboot.config.main - genJsonSeri序列化开始
16:29:33.237 [main] INFO com.whj.springboot.config.main - genJsonSeri序列化结束,耗时:260ms,序列化之后的长度为:87025==============
16:29:33.237 [main] INFO com.whj.springboot.config.main - genJsonSeri开始反序列化
16:29:33.428 [main] INFO com.whj.springboot.config.main - genJsonSeri反序列化耗时:191ms===========
16:29:33.428 [main] INFO com.whj.springboot.config.main - jack2Seri序列化开始
16:29:33.436 [main] INFO com.whj.springboot.config.main - jack2Seri序列化结束,耗时:7ms,序列化之后的长度为:45001===============
16:29:33.436 [main] INFO com.whj.springboot.config.main - jack2Seri开始反序列化
16:29:33.451 [main] INFO com.whj.springboot.config.main - jack2Seri反序列化耗时:15ms=============

网上很多人分析说推荐使用GenericJackson2JsonRedisSerializer,但是通过上面的测试,我们可以得出结论:
1、就序列化和反序列化性能来说,Jackson2JsonRedisSerializer方式效率是最高的,同时在redis中也有很好的可读性
2、就占用存储空间来说,JdkSerializationRedisSerializer方式序列化之后长度是最小的(因为是用二进制方式存储)
相反,GenericJackson2JsonRedisSerializer方式没发现什么亮眼的特点(也可能我也是一知半解,欢迎讨论)

4、问题回答

回到我初始的问题,因为我的ValueSerializer使用的是StringRedisSerializer,在保存的时候将对象转换成了字符串保存,这样在redis中就是当做了普通的字符串,而不是对象。此时取出数据,使用fastJson转换成对象时,就会报上面的问题,因为它不是对象数据,而是个字符串。

5、JSON转换成对象

1、将json数据转换成对象

1、使用com.alibaba.fastjson
2、User类中不管是普通属性还是对象属性或者集合属性,都能直接转换成对象
JSON.parseObject(str,User.class)

2、 将带有泛型的数据转换成对象,同样使用fastjson

1、使用com.alibaba.fastjson
2、带泛型的都需要使用TypeReference
JSON.parseObject(s,new TypeReference<BaseResult<User>>(){})

6、修改RedisTemplate序列化方式

@Configuration
public class RedisConfig {

    @Bean
    public RedisTemplate<String,Object> redisTemplate(RedisConnectionFactory redisConnectionFactory){
        /**
         * 配置自己的redisTemplate
         * StringRedisTemplate 默认使用使用StringRedisSerializer来序列化
         * RedisTemplate 默认使用JdkSerializationRedisSerializer来序列化
         */
        RedisTemplate<String, Object> redisTemplate = new RedisTemplate<>();
        redisTemplate.setConnectionFactory(redisConnectionFactory);

        //开启默认类型
        ObjectMapper objectMapper = new ObjectMapper();
        objectMapper.setVisibility(PropertyAccessor.ALL, JsonAutoDetect.Visibility.ANY);
        objectMapper.enableDefaultTyping(ObjectMapper.DefaultTyping.NON_FINAL);
        objectMapper.setDateFormat(new SimpleDateFormat("yyyy/MM/dd HH:mm:ss"));
        Jackson2JsonRedisSerializer jackson2JsonRedisSerializer = new Jackson2JsonRedisSerializer(Object.class);
        jackson2JsonRedisSerializer.setObjectMapper(objectMapper);

        redisTemplate.setKeySerializer(new StringRedisSerializer());
        redisTemplate.setValueSerializer(jackson2JsonRedisSerializer);
        redisTemplate.setHashKeySerializer(new StringRedisSerializer());
        redisTemplate.setHashValueSerializer(jackson2JsonRedisSerializer);
        redisTemplate.afterPropertiesSet();
        return redisTemplate;
    }
}
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/u012031408/article/details/89478241

智能推荐

Linux查看登录用户日志_怎么记录linux设备 发声的登录和登出-程序员宅基地

文章浏览阅读8.6k次。一、Linux记录用户登录信息文件1  /var/run/utmp----记录当前正在登录系统的用户信息;2  /var/log/wtmp----记录当前正在登录和历史登录系统的用户信息;3  /var/log/btmp:记录失败的登录尝试信息。二、命令用法1.命令last,lastb---show a listing of la_怎么记录linux设备 发声的登录和登出

第四章笔记:遍历--算法学中的万能钥匙-程序员宅基地

文章浏览阅读167次。摘要:1. 简介 2. 公园迷宫漫步 3. 无线迷宫与最短(不加权)路径问题 4. 强连通分量1. 简介在计算机科学裡,树的遍历(也称为树的搜索)是圖的遍歷的一种,指的是按照某种规则,不重复地访问某种樹的所有节点的过程。具体的访问操作可能是检查节点的值、更新节点的值等。不同的遍历方式,其访问节点的顺序是不一样的。两种著名的基本遍历策略:深度优先搜索(DFS) 和 广度优先搜索(B...

【案例分享】使用ActiveReports报表工具,在.NET MVC模式下动态创建报表_activereports.net 实现查询报表功能-程序员宅基地

文章浏览阅读591次。提起报表,大家会觉得即熟悉又陌生,好像常常在工作中使用,又似乎无法准确描述报表。今天我们来一起了解一下什么是报表,报表的结构、构成元素,以及为什么需要报表。什么是报表简单的说:报表就是通过表格、图表等形式来动态显示数据,并为使用者提供浏览、打印、导出和分析的功能,可以用公式表示为:报表 = 多样的布局 + 动态的数据 + 丰富的输出报表通常包含以下组成部分:报表首页:在报表的开..._activereports.net 实现查询报表功能

Ubuntu18.04 + GNOME xrdp + Docker + GUI_docker xrdp ubuntu-程序员宅基地

文章浏览阅读6.6k次。最近实验室需要用Cadence,这个软件的安装非常麻烦,每一次配置都要几个小时,因此打算把Cadence装进Docker。但是Cadence运行时需要GUI,要对Docker进行一些配置。我们实验室的服务器运行的是Ubuntu18.04,默认桌面GNOME,Cadence装进Centos的Docker。安装Ubuntu18.04服务器上安装Ubuntu18.04的教程非常多,在此不赘述了安装..._docker xrdp ubuntu

iOS AVFoundation实现相机功能_ios avcapturestillimageoutput 兼容性 ios17 崩溃-程序员宅基地

文章浏览阅读1.8k次,点赞2次,收藏2次。首先导入头文件#import 导入头文件后创建几个相机必须实现的对象 /** * AVCaptureSession对象来执行输入设备和输出设备之间的数据传递 */ @property (nonatomic, strong) AVCaptureSession* session; /** * 输入设备 */_ios avcapturestillimageoutput 兼容性 ios17 崩溃

Oracle动态性能视图--v$sysstat_oracle v$sysstat视图-程序员宅基地

文章浏览阅读982次。按照OracleDocument中的描述,v$sysstat存储自数据库实例运行那刻起就开始累计全实例(instance-wide)的资源使用情况。 类似于v$sesstat,该视图存储下列的统计信息:1>.事件发生次数的统计(如:user commits)2>._oracle v$sysstat视图

随便推点

Vue router报错:NavigationDuplicated {_name: "NavigationDuplicated", name: "NavigationDuplicated"}的解决方法_navigationduplicated {_name: 'navigationduplicated-程序员宅基地

文章浏览阅读7.6k次,点赞2次,收藏9次。我最近做SPA项目开发动态树的时候一直遇到以下错误:当我点击文章管理需要跳转路径时一直报NavigationDuplicated {_name: “NavigationDuplicated”, name: “NavigationDuplicated”}这个错误但是当我点击文章管理后,路径跳转却是成功的<template> <div> 文章管理页面 <..._navigationduplicated {_name: 'navigationduplicated', name: 'navigationduplic

Webrtc回声消除模式(Aecm)屏蔽舒适噪音(CNG)_webrtc aecm 杂音-程序员宅基地

文章浏览阅读3.9k次。版本VoiceEngine 4.1.0舒适噪音生成(comfort noise generator,CNG)是一个在通话过程中出现短暂静音时用来为电话通信产生背景噪声的程序。#if defined(WEBRTC_ANDROID) || defined(WEBRTC_IOS)static const EcModes kDefaultEcMode = kEcAecm;#elsestati..._webrtc aecm 杂音

医学成像原理与图像处理一:概论_医学成像与图像处理技术知识点总结-程序员宅基地

文章浏览阅读6.3k次,点赞9次,收藏19次。医学成像原理与图像处理一:概论引言:本系列博客为医学成像原理与图像处理重要笔记,由于是手写,在此通过扫描录入以图片的形式和电子版增补内容将其进行组织和共享。前半部分内容为图像处理基础内容,包括图像的灰度级处理、空间域滤波、频率域滤波、图像增强和分割等;后半部分内容为医学影象技术,包括常规胶片X光机、CR、DR、CT、DSA等X射线摄影技术、超声成像技术、磁共振成像(MRI)技术等。本篇主要内容是概论。_医学成像与图像处理技术知识点总结

notepad++ v8.5.3 安装插件,安装失败怎么处理?下载进度为0怎么处理?_nodepa++-程序员宅基地

文章浏览阅读591次,点赞13次,收藏10次。notepad++ v8.5.3 安装插件,下载进度为0_nodepa++

hive某个字段中包括\n(和换行符冲突)_hive sql \n-程序员宅基地

文章浏览阅读2.1w次。用spark执行SQL保存到Hive中: hiveContext.sql(&quot;insert overwrite table test select * from aaa&quot;)执行完成,没报错,但是核对结果的时候,发现有几笔数据超出指定范围(实际只包含100/200)最终排查到是ret_pay_remark 字段包含换行符,解决方案:执行SQL中把特殊字符替换掉regexp_replace(..._hive sql \n

印象笔记05:如何打造更美的印象笔记超级笔记_好的印象笔记怎么做的-程序员宅基地

文章浏览阅读520次,点赞10次,收藏8次。印象笔记05:如何打造更美的印象笔记超级笔记本文介绍印象笔记的具体使用,如何打造更美更实用的笔记。首先想要笔记更加好看和实用,我认为要使用超级笔记。所谓超级笔记就是具有很多便捷功能的笔记。_好的印象笔记怎么做的

推荐文章

热门文章

相关标签