redis乱码_redis乱码问题

一个高级ja工程师需要具备什么能力和技术

Redis配置

宏观方面

redis乱码_redis乱码问题

redis乱码_redis乱码问题

一、 JAVA。

要想成为JAVA(高级)工程师肯定要学习JAVA。一般的程序员或许只需知道一些JAVA的语法结构就可以应付了。但要成为JAVA(高级)

工程师，您要对JAVA做比较深入的研究。您应该多研究一下JDBC、IO包、Util包、Text包、JMS、EJB、RMI、线程。如果可能，希望您

对JAVA的所有包都浏览一下，知道大概的API，这样您就发现其实您想实现的很多功能，通过JAVA的API都可以实现了，就不必自己费太多的脑经 了。

二、 设计模式。

其实写代码是很容易的事情，我相信您也有同感。但如何写得好就比较难了。这个“好”字包括代码可重用性，可维护性，可扩展性等。如何写出好的代

码往往要借助一些设计模式。当然长期的代码经验积累，只要您用心，会使您形成自己代码风格。相信您的代码也比较符合代码的可重用性，可维护性，可扩展性。

但既然前人已经给我们总结出了经验，我们何不40.分页技术,自己实现过不仅仅是用过要知道原理踩着前人的肩膀前进?

三、 XML。

现在的系统中不使用XML几乎是不可能的。XML的功能非常强大，它可以做数据转换、做系统的配置、甚至可保存您的系统业务数据。因此您必须了解

XML，包括它的语法，结构。您还需要比较熟练的使用解析XML的一些API，比如JDOM，SAX等，因为在我们一般的项目中，XML往往担当系统配置

信息的作用，您需要用这些API解析这些配置信息，开发完美的项目。

四、 精通使用一种或两种框架。

“框架都会有许多可重用的代码，良好的层次关系和业务控制逻辑，基于框架的开

发使你可以省出很多的开发成本”。这里希望您能精通，更多的是希望您能通过框架的使用了解框架的思想。这样您在开发一个项目时思路会开阔一些，比如您

五、 熟悉主流数据库。其实真正比较大的项目都是有人专门做数据库的，但往往很多项目要求作为(高级)工程师的您也参与数据库的设计以及SQL的编写。所以为了

更好的为做贡献，建议您还是多了解一些主流数据库，比如SQLSERVER，ORACLE，多连接SQL和存储过程以及触发器。如果您不是“科班”出

身，您还需要补充一些数据库原理方面的知识。

六、 精通一种或两种WEB。

因为作为JAVA工程师，特别时

想成为高级JAVA工程师的您，您不可避免地要部署您的项目到Web上，而且只有当您精通一种Web，您才可能限度地使用它

的资源，这往往可以节省很多时间和精力。

七、 UML。

您肯定想成为高级工程师，因此您有必要了解或熟练或精通UML，这取决于您有多大决心想成为高级工程师和项目。在比较正规的开发团队

中，UML是讨论项目的交流工具，您要想做一个软件工程师，您至少要能看懂，您要想做高级工程师，您要能通过它来描述您对项目的理解，尽管这不是必须，但

却很重要。

八、 站在高度分析问题：

这不是一个知识点，也不是通过书本就能学得到的。只所以提到这一点，是因为我比您还着急，我希望您更快的成为一个高级的软件工程师，而

不是一个一般的软件工程师。希望您在工作中多向您的系统分析员、需求分析员、系统设计员学习，多站在他们角度上去看您在开发的项目。在在项目之初先在

您的脑海里对项目有个大致的分析、设计，然后和他们进行比较，找找别，想想缺点。

九、 工具。

您在这个阶段可能接触到不同的工具了，尽管您还需要使用JB或者IDEA，但能可能对

ROSE，Toger要多了解一些，因为您要画UML了。不要再对Dreamweer等HTML编辑器情有独钟了，那些JSP页面让初级程序员去写吧

微观方面

1.Core Ja部分

这是最基础的,对于一个ja高级开发/设计人员,你需要对这一部分达到精通的水平,重点内容如下:

a.面向对象编程思想(封装继承多态接口)

c.ja.lang包,ja.util包等常用包

d.ja异常处理

2.Ja高级部分

a.Ja I/O流

b.Ja多线程技术

c.Ja网络编程

d.Ja Swing

后两项可以了解即可,如果项目需要可以深入研究

3.前端基本技能

HTML + CSS网页开发

JaScript

Jquery

浏览器兼容性 CSS hack(了解)

4.熟练使用JSP + Servlet进行开发

5.MVC设计模式,原理,以及相关框架,如Struts

6.SSH框架

7.缓存技术 session & cookie

8.熟练使用一种以上Ja开发工具(Eclipse/MyEclipse/Jbuilder/Jcreator/InliJIEDA/NetBeans)

9.熟练使用XML

JDOM w3c.dom SAX

10.Ja设计模式

工厂模式,单例模式 ==

反射的各种用法

12.了解或熟悉 C, C++, .NET

13.熟悉JDK的配置,环境变量

14.数据库oracle必学,其他了解一种以上(mysql,sql server,access==)

oracle:视图,索引,存储过程,触发器,游标,包,常用函数 ==

15.数据库原理

事务的原理,锁机制,表连接,复杂查询语句(工作经验),性能调优,锁表以及解决方案==

16.JDBC,连接池

17.Ajax,反向Ajax

18.HTTP协议,request 和 response的原理,HTTP status(了解常用的),Https原理

19.熟悉Linux基本命令,使用过Linux/Unix系统,可以编写shell脚本,可以在Linux上部署项目

20.了解windows系统批处理脚本bat

21.了解HTML5,学习过

22.熟悉一种JS框架,如Prototype

23.J2EE原理 熟悉一种以上web容器如Tomcat,JBoss,websphere,weblogic==

25.熟悉一门脚本语言,如python ,ruby

26.了解php/ asp

27.了解ftp协议及原理

28.熟练使用Junit测试,熟悉Mockito等测试工具

29,熟悉jac,jadoc,native,native2ascii等常用命令

30.熟悉常用的排序算法,如冒泡排序,快速排序等,自己研究过一些的算法。

31.了解Flex(不学也没关系)

32.了解敏捷开发模式

33.工作流workflow至少用过一种,如OSworkflow,了解原理

34.使用过VPN了解其原理

35.熟悉jstl表达式和el表达式

36.熟悉webserv,WSDL,SOAP

37.处理,如上传,预览,限制大小等

38.版本控制工具,CVS VSS SVN

39,JSON技术,JSON+AJAX

41.Ja Mail

42.Ja读写txt,excel,JXL技术

43.JVM原理,JVM内存管理,GC,Ja堆栈池

44.熟练使用下面的工具:

off办公软件,word,excel,ppt等

plsql,sqldlop 数据库开发工具

outlook大公司都用

ue编辑器

浏览器控制台,调试

SHH/PUTTY 远程

45.UML建模工具Rational Rose等

46. 使用log4j

47.使用过开放Api如百度，腾讯街景，新浪微博等

48.页面静态化技术(伪静态页面)

49.报表技术，使用过报表制作工具，如水晶易表。

50.定时任务，如Spring batch ,学会自定义batch任务(不适用第三方工具)

51.了解uuid

52.b/s 和 c/s架构

53.正则表达式

54.了解jndi jms

55.ERP

56.UNICODE编码，乱码解决

57.开源网络编辑器，如ckEditor

58.二进制原理

59.使用过，了解过开源框架，如discuzz

60.GWT，Closure框架

61.了解大数据，云计算

62.搜索引擎搜索技术

63.软件工程，项目管理

很多人都说编程语言，只要掌握其中20%的经典技术，就可以在职场上混的游刃有余，作为一名Ja程序员，要想在Ja领域做到游刃有余，这些技术是必须要掌握的。

1. ja 基础

这就不用多说了吧，不用说精通，至少是常用的要熟练，不会说连jdk里面提供的类都没认全的。必须熟悉JDK带的一些常用命令及其常用选项，命令至少需要熟悉：appletviewer、HtmlConverter、jar、 ja、jac、jadoc、jap、jaw、native2ascii、serialver，如果这些命令你没有全部使用过，那么你对ja实际上还很不了解。ja基础这块去看动力的

2. 各种工具的使用

必须至少熟练使用一种IDE的开发工具，例如Eclipse、Netbeans、JBuilder、Jdloper、IDEA、JCreator或者Workshop，包括进行工程管理、常用选项的设置、插件的安装配置以及进行调试

3. j2ee 框架

只要你是用ja来做WEB应用，少不了使用j2ee框架，目前流行的有

4. 数据库基础

数据库一直是程序员需要重点掌握的一部分，当下主流的还是关系型数据库，产品有oracle mysql sqlserver db2,当然nosql型数据库也是未来方向，很多公司也已经在使用，如redis mongodb membase 等等

你需要掌握基本使用，和根据业务逻辑设计表，索引，视图，存储过程，函数等

5.设计模式

你的项目中用到了哪些设计模式，如何使用·知道常用设计模式的优缺点·能画出常用设计模式的UML图这是一个思想的东西，也许写一辈子程序那23个设计模式也不一定全用的上，但是知道并且能够在适当的时候用他来解决问题就够了。

6. 应用

凡是web应用首先都要部署到应用上，常用的产品有tomcat，jboss， apache,resin 等等，还有用来提升性能的反向如nginx等，你需要掌握如何部署项目，基本调试，调优。

7. Linux系统

我们平常的编码通常在windows环境下，可是生产环境却通常是在Linux下，因为微软的东西，你懂得。所以我们需要掌握的是shell脚本，vi ，各种软件的安装，部署，其中shell脚本是最重要的。

8. 数据结构算法

编程=数据结构 + 算法 。虽然感觉平常的工作中用到的不多，但还是觉得这是一个内功的东西，不会这两样也许你也可以完成很多开发工作，但是如果你精通这两样，你的思想境界和思考问题的高度就不是一般人能比的了，如果想要在程序员这条路上继续走下去，不管以后是成为技术专家还是技术性管理人才，都是必须要烂熟于心的。

9. 多线程

在面试中线程是必问的问题，你怎么实现多线程，Thread和Runnable的区别和联系、多次start一个线程会怎么样、线程有哪些状态。另外，线程池也是比较常问的一块，常用的线程池有几种？这几种线程池之间有什么区别和联系？线程池的实现原理是怎么样的？多线程同步、锁这块也是重点。

要想成为一个好的程序员就不要怕学习，有学历能力需要新技术才能跟得上技术发展的速度，会学习的人永远不会被淘汰。

的人总是让人羡慕，但如何才能让自己成为的人对我们来说更重要，本文分享的是如何才能成为ja高级程序员，你和ja高级程序员只这一篇鸡汤！干了这碗鸡汤，未来不可！

1、离开舒适区，提高个人代码能力

不安于现状，高级程序员一般都具有丰富的项目经验，经验是能力的试金石，即使在碰到未知的问题，丰富的项目经验也不会让你觉得就束手无策。程序员是一个技术跨度很大的工种，对某种既定环境语言的依赖性太强，知识和技能都无法很好的迁移。

2、将复杂的问题简单化处理

3、自我总结，提升学习和解决问题能力

代码能力、工作状态只是一个高级程序员区别于普通程序员的外在表现，王者和青铜的核心区别在于思考方式和解决问题能力的区别。高级程序员可能每天会花半个小时总结当天的项目经历，反思自己的不足，思考问题解决或优化的方案。区别于初级程序员，高级程序员总结问题的往往能从本质出发，不会只停留在表面，弄清问题内在联系，抓住问题关键。这也就解释了为什么拿到一个项目需求，很多高级程序员不会首先去想代码实现，而是去想需求与架构的行为。

总结：如何才能成为高级程序员，关键还是思想，学习的思想、总结的思想、创新的思想！

精通ja基础，ja高级编程，及常用ja设计模式

说到能力和技术，那是要求很高的，要是达不到，建议你到动力学习然后在去深入了解高级ja工程师的要求，听说它们在深圳开办新校区，想做ja程序的可以考虑的

spring+jedis保存数据到redis的key乱码问题

b.字符串24.熟悉ant或men处理

spring-data-redis 中的核心作类是 RedisTemplate 可以看出 key 和 value 都是泛型的，这就涉及到将类型进行序列化的问题了 所就在 RedisTemplate 中还有几个 RedisSerializer~ 1)redisConnectionFactory()配置了如何连接Redsi

从零开始设计环保监测物联网系统(二)

会想到把SQL语句与您的JAVA代码分开，再比如您会考虑把您的业务逻辑配置到XML或者数据库中，这样整个项目就很容易扩张了。

IOT，接收sensor数据的总入口，主要是日志，安全防护，流控，协议转换等功能，

4、心和需求理解能力

图1 IOT

之前有提到IOT是基于python的twisted框架实现的，初期的时候该IOT主要实现的功能是 数据接收和转换功能 和 安全防护 。

数据接收和转换功能 ，这里很简单，拟定好数据交互格式后，IOT按照约定好的格式进行解析，然后转发给后端服务进行进一步的处理

安全防护 ，设备的区分主要是依靠烧录到硬件的SN号来实现，SN号包含的信息比较多，如生产批次，设备型号等，受制于厂商我安全防护不能做的非常完善，同时sensor与IOT的交互不能非常复杂。安全防护这一块理论上是设备接入要一型一密或者一机一密，协议上还应该启用tls/ssl安全通信协议。

图2 鉴权

安全防护要做ssl这类的安全通信协议的话，要考虑设备厂商实现通信模块能力，设备功耗，设备性能（低端设备cpu性能可能比较，可考虑对称加密形式），IOT也需要引入相应模块。

另外认证从性能方面考虑，后期在设备比较多的情况下，可以加入redis等内存型key-value数据库，缓存设备信息，提高鉴权模块性能。

实践中，我们的sensor基本都是依靠电池供电，因此我们的IOT基本是面向短链接（后期我们有监测设备，依靠外部电源直接供电，为长连接），因此在每次发起连接我们都要进行一次鉴权，鉴权通过后，设备方可上传传感器监测数据和设备自身状态。

图3 数据交互流程

这一块的调试工作长达半年左右，才基本稳定下来，主要集中在设备商处除了硬件稳定性，还有在调试中发现传输的字符串乱码（c语言处理问题），沾包（厂商开发人员tcp协议不熟），优化传输效率，关闭cork或者 Nagle 算法（传输包很小）。

因为IOT不能主动断连接，理论作中，IOT应该和sensor有心跳协议，保证连接的有效性。设备商在数据流程交互完成后，竟然没有close 连接，直接休眠，导致所在的连接的文件描述符一直没有正常释放，后面为了预防这种现象，我开启了作系统层面的keepalve定时器，回收失效连接（系统默认时间是2小时左右，我缩短了失效时间），理论上来说应该是应用层面去实现心跳协议。

整个IOT的设计，是无状态，可伸缩的，单在普通型ecs上可轻松达到数百tps。

数组放到redis后顺序乱了

import org.springframework.context.annotation.Configuration;

虽然这些乱码可能并不影响Ja程序的正常运行，但是使用RDM查看时red}}更多Redis相关技术文章，请访问Redis数据库使用入门教程栏目进行学习！is数据时会很影响查看。

我前段时间通过IO流读取一行数据存入byte数组，然后byte数组转String字符串并作为主键存入redis出现乱码问题，我当时明明设置了序列化，但是依旧乱码，网上找遍也没有找到解决方法，后来通过断点调试发现了问题所在。

一般我们作IO流读取数据会创建一个1024容量大小的byte1024字节数组用于接收读取出来的数据。然而我们读取出来的数据可能无法填满1024个字节，这样就导致在转化成String类型的时候，空出的位置将会自动被填充为u0000。

这就是导致存入redis出现x00乱码的罪魁祸首，并不是没有设置序列化引起的乱码。解决很简单，只要在转化成String过后u0000全部替换空即可。

php如何解决redis的存取乱码问题

objectMapper.setVisibility(PropertyAccessor.ALL, JsonAutoDetect.Visibility.ANY);

php文件的编码格式：

高级程序员对自己的要求不仅限制于完成项目、解决问题本身，往往还会去思考并权衡需求涉及的一切，比如如何去支持设计模式、库、框架、重构和流程等，从内核到外层界面，既重视功能需求，还会注意到拓展性能、稳定性等需求，甚至还需要评估设计模块对整个项目中的影响及潜在的威胁。

header("charset=utf-8");

在存储前，先把存储的字符串转码。

$string = iconv('UTF-8','GBK',$string);

这时候存储在redis中的中文就是GBK字符集的，读取的时候不是乱码了。

原理是window大部分系统上支持GBK字符集。

redis为什么要序列化

1）struts 2）spring 3） hibernate 4）ibatis 5）spirngMvc 等等的其他一些相似的框架，还有项目架构中经常会用到的缓存框架例如memcached ，ehcache，oscache等Ja缓存框架，需要掌握基本使用，部署，性能调优，配置

序列化最终的目的是为了对象可以跨平台存储，和进行网络传输。而我们进行跨平台存储和网络传输的方式就是IO，而我们的IO支持的数据格式就是字节数组。 （学习：Redis视频教程）

通过上面我想你已经知道了凡是需要进行“跨平台存储”和”网络传输”的数据，都需要进行序列化。

本质上存储和网络传输 都需要经过 把一个对象状态保存成一种跨平台识别的字节格式，然后其他的平台才可以通过字节信息解析还原对象信息。

redis序列化方式对比：

redis的默认方式是JdkSerializationRedisSerializer

JdkSerializationRedisSerializer: 使用JDK提供的序列化功能。

优点是反序列化时不需要提供类型信息(class)，但缺点是需要实现Serializable接口，还有序列化后的结果非常庞大，是JSON格式的5倍左右，这样就会消耗redis的大量内存。

Jackson2JsonRedisSerializer： 使用Jackson库将对象序列化为JSON字符串。

优点是速度快，序列化后的字符串短小精悍，不需要实现Serializable接口。

但缺点也非常致命，那就是此类的构造函数中有一个类型参数，必须提供要序列化对象的类型信息(.c乔布斯曾经说过，简单便能移动一座大山。一个高级程序员之所以让人觉得，不仅仅能用写出优雅简洁的代码，更重要的是他们还能将这种化复杂为简单、化繁为简的功力内化至各项工作，不管是面对多复杂的项目、多棘手的 bug 都能面不改色、心不跳，步步拆解问题，逐一各个击破。lass对象)。 通过查看源代码，发现其只在反序列化过程中用到了类型信息。

问题：使用默认的JDK序列化方式，在RDM工具中查看k-v值时会出现“乱码”，不方便查看。

解决：自定义系列化方式，使用Jackson2JsonRedisSerializer

import com.fasterxml.jackson.annotation.JsonAutoDetect;

import com.fasterxml.jackson.annotation.PropertyAccessor;

import com.fasterxml.jackson.databind.ObjectMapper;

import org.springframework.context.annotation.Bean;

import org.springframework.data.redis.core.RedisTemplate;

import org.springframework.data.redis.serializer.Jackson2JsonRedisSerializer;

import org.springframework.data.redis.serializer.StringRedisSerializer;

/

@author LinJie

/

@Configuration

public class RedisConfig {

/

Redis reitory redis reitory.

@param redisTemplate the redis template

@return the redis reitory

/

@Bean

public RedisReitory redisReitory(RedisTemplate redisTemplate) {

// 使用Jackson2JsonRedisSerialize 替换默认序列化

Jackson2JsonRedisSerializer jackson2JsonRedisSerializer = new Jackson2JsonRedisSerializer(Object.class);

ObjectMapper objectMapper = new ObjectMapper();

objectMapper.enableDefaultTyping(ObjectMapper.DefaultTyping.NON_FINAL);

StringRedisSerializer stringRedisSerializer = new StringRedisSerializer();

// key采用String的序列化方式

redisTemplate.setKeySerializer(stringRedisSerializer);

// hash的key也采用String的序列化方式

redisTemplate.setHashKeySerializer(stringRedisSerializer);

// value序列化方式采用jackson

redisTemplate.setValueSerializer(jackson2JsonRedisSerializer);

// hash的value序列化方式采用jackson

redisTemplate.setHashValueSerializer(jackson2JsonRedisSerializer);

redisTemplate.afterPropertiesSet();

return new RedisReitory(redisTemplate);

linux上 redis 乱码怎么办

11.Ja反射机制

本地虚拟机linux环境

我在Redis中存储的value值是中文“马拉斯加”

Shell下get获取后展示的结果为：jackson2JsonRedisSerializer.setObjectMapper(objectMapper);xc2xedxc0xadxcbxb9xbcxd3