随心笔记_知识技术

IntelliJ IDEA 2020 JRebel破解

IDEA 安装好最新版的JRebel之后。点击激活页面选择在线服务器授权激活。输入服务器授权URL地址 URL地址为：https://jrebel.qekang.com/ [https://jrebel.qekang.com/5d45985a-26e1-4172-95ad-e75e551605a2]{GUID} 其中的GUID需要生成（生成地址）： Generate GUIDs onlineGuidGen - webbased tool for generating GUIDs. [https://www.guidgen.com/]进入网站后生成GUID之后填写入URL地址中。勾选同意协议，点击激活。至此JRebel破解成功。

MySQL 事物死锁解析

在使用mysql数据库中，随着我们业务与功能模块的增加、数据库的事物数量会随之上升。在开发业务功能的场景中我们会经常开启事物操作数据，或者开启分布式全局事物操作数据时、事物过多，在并发进行的场景中往往会有几率产生事物死锁问题。那么我们来分析一下事物死锁产生的原因：两个 session 连接：一个session持有T1事物，另外一个session持有T2事物。 1.T1事物修改rows1 2.T2事物修改rows2 3.T2事物修改rows1 4.T2等待T1释放rows1的x锁 5.T1事物修改Rows2 6.T1等待T2释放rows2的x锁 7.相互等待死锁死锁在没有外力的干扰下，程序本身无力解决此问题。必须借助人为或者另外的守护线程来解决此死锁问题。解决死锁的方法也很简单：释放其中一个事物，让其回滚即可。但回滚有一个问题，回滚哪个事物更合理，mysql采用的是根据undo log 中谁的条数更多，谁的权重越大，则舍弃权重更小的事物进行回滚，可以更好解决事物死锁。让其回滚的数据量尽量减少，以减少服务的性能牺牲。系统中任何一个事务发生死锁的概率

开发IDEA插件记录

之前一直在使用一款插件叫 mybatis log plugin，它里面的 sql log 参数补全这个功能我比较喜欢，之前低版本好像并没有进行收费，但高版本之后它开始收费了。于是我打算自己开发一个类似的功能插件，取名叫 mybatis log analysis , 1.0.0版本的话首先会完成sql log 解析并自动参数补全，sql美化等简单功能。之后待时间充裕之后将会把其他的使用功能也开发出来，如xml java 链接跳转，一键生成 controller，service，entity，mapper，xml等功能点。目前已经开发完成1.0.0版本并提交到了 IDEA PLUGIN 库中。在开发插件的时候，简单的功能实现起来很简单，但想要实现比较复杂的功能就必须要对IDEA 提供的API 等方法有个比较深层次的了解，可是我在官方插件文档上并没有找到比较完善的API 文档。只有一些官方给出的demo代码。这样的话就不得不花点时间去看demo代码并阅读理解才行。感觉会将是一个不太友好的学习曲线。贴上已经开发出来的插件地址：https:

分布式锁与 Spring 事物管理顺序问题

这个是网上的网友提问，我给他推理并解决了他的问题。故此记录一下。他在使用zookeeper的临时顺序节点分布式锁来修改mysql中的数据值，此功能类似于售票机制，高并发下，要求售票数量保持一致。不可以数量多或少。使用zookeeper的临时顺序节点分布式锁的时候，他锁住service层时，执行完整个service方法时，锁释放，但此时方式上标注的spring 管理的声明式事物却还未提交。这样的场景在并发情况下会导致数据问题。理所当然他的数据库中数据会出现异常情况。100个线程同时执行1次一次拿1张，100张票应该为剩余0，而他的结果却并不是0，没有达到预期值。原理是：第一个线程执行update方法结束之后，但由于事物还未提交完成。分布式锁却已经先一步释放，下一个线程执行此方法时 select 获取的还是update之前的脏读数据。导致数据出现问题。因为spring声明式事物@Transactional(rollbackFor = Exception.class) 是基于aop，方法执行完成之后的再执行的环绕通知，但环绕通知提交事务时，zookeeper的锁却已经释放

Java后台架构理解

最近自己搭建了一些架构，就此写一下对于后台架构的理解。在平时工作中，总是在考虑什么样的项目结构是最合理，最实用的呢？有人觉得能让开发人员大大降低工作重复度，使用简单，设计优美，健壮，可扩展的架构，就应当是很不错的架构，但此架构只是项目级别的。项目一开始从单机项目转变为集群并扩展到微服务，分布式。监控中心，注册中心，配置中心，网关，熔断，降级，分库，分表，容灾，各种中间件的加入与合理搭配，部署配置docker k8s ，逐渐形成一个庞大的架构体系，保证服务高可用的同时服务器的数量也从一台两台上升至几十台上百台，这样的项目会慢慢成长为庞大的系统体系。架构设计大到整个系统架构的宏观，架构设计又小到每行代码的微观。 dto 的 aop自动参数校验，result 对象封装，代码自动生成，service，mapper，controller，serviceImpl 的合理生成，各个jar包之间的引用，在线文档生成，又到每个数据库字段类型，字段大小，统一表前缀，字段前缀，分布式锁，乐观锁，

Java远程桌面实现

突发奇想，使用java是否可以实现远程共享桌面的功能呢？当然可以了，都是跑代码，但是java效率比较低，为啥，也不是因为java代码执行效率低下，而是因为出于Java自带的屏幕截屏工具效率过低，java提供了robot类来实现桌面截屏，2k屏幕一张jpg大小在200kb左右，一张截图我使用的rx2700x cpu 一张截图竟然需要30毫秒距离1秒30帧率还是差距有的，更别提1秒60帧率。就算如果1秒60帧率如何使用 java 高效的传输到各个远程端呢 ? 有人会说使用多线程截图，来提高帧率，这样的做法，我个人觉得不太科学，为啥？因为占用太高cpu资源，应该寻找高效并占用cpu资源较少的方法。并且图片传输不可取，因为一张图片太大，200kb，1s 30张就是 6000kb 严重占用带宽。最好的方式使用视频流，使用开源的h.264视频格式，还有更好的h.265 但是我并没有找到对应的开源jar。h.265技术还处于收费阶段。h.264视频格式为根据每一帧中的像素点变化来记录其数据。而不需要记录整个图片中绝大部分像素信息。所以h.264格式的视频体积远远小于图片传输的数

MySQL 百万级数据导出excel文档

公司系统需要给用户提供列表数据导出 excel 文档的功能。但有的公司的列表数据如财务流水已经高达百万级别，对于这样的数据导出，我们需要提出一个解决方案。不然在月底几百家公司进行导出excel，将会导致mysql QPS急剧上升，服务器cpu，ram，瞬间到达报警阀门。严重大批量导出可能会导致服务器不可用，或面临宕机问题（对于财务等敏感数据，需要做文件加密或者临时文件授权下载操作）。最终我的方案是部署一个数据库从库，再单独部署一个服务器或集群服务器跑上Springboot项目作为MQ的消费者集群，所有的导出请求均落盘至MQ队列中，Springboot会采用拉模式主动拉取MQ队列中的导出Excel导出消息进行执行，合理的使用了MQ的削峰以及异步功能。消费者这边通过分页分批量查询mysql列表数据，使用ali easy excel api进行硬盘输出，完成输出后上传oss，删除本地硬盘文件。这样的设计让导出功能模块完全脱离主业务，导出功能直接为一个新的功能模块，部署服务器也分单独的节点。这样就算导出项目因为大量突如其来的导出请求，导致宕机（一般也不会MQ可以很好的避免此问

MySQL 千万级数据分页

随着公司业务增大，数据量也是随之剧增。MySQL作为一款社区免费开源数据库。想要用它做几百万的数据分页。光靠limit是不靠谱的。当然不是诋毁mysql，mysql作为开源插拔式存储引擎数据库，已经是可以满足绝大部分的应用场景需求。使用mysql管理1000tb也不是问题。但是使用方式却是一个问题。 limit接受一个或两个数字参数。参数必须是一个整数常量。如果给定两个参数，第一个参数指定第一个返回记录行的偏移量，第二个参数指定返回记录行的最大数目。 limit在偏移量小于10w时性能还勉强可以接受，但随着偏移量越来越大，性能急剧下降。公司单表账务数据已经到达230w ，做分页limt 来查询最后一页的数据，怕是没有个20秒是查询不出来的。当然具体的时间也要根据是否有索引，字段数量，数据内容而定，查询条件而定。为了解决分页效率问题，我采用方案是： select id from table limit 100000,20 （带上where条件作为子查询）由于主键id原本就是主键索引，所以limit的速度效率很高。并把条件字段加入复合索引，效率才会有质量的提升。

浅谈logo设计

在企业没有声望的时候，建立一个logo，给予人们一定的标识性认知，一但企业知名度高了，就可以很好的把图形映射到人们的记忆中，加强企业知名度，可谓是锦上添花。让人们通过图形记忆来记住公司形象品牌。但记住一定要注册商标、著作权，不然会有侵权的情况，而注册商标也是为了更好的保护公司企业形象。那么为了设计出人们比较容易记住的图形logo，这里面涉及到的东西可就比较多了。毕竟还有专业的视觉设计师职位，而logo为了让人的眼球看过去色彩更舒适，更亲近人，看着会有一种放松的感觉，显示出公司特色，容易记忆，这样的logo往往光是设计的费用就高达几十万元。 logo的设计要从公司的企业文化，企业提供的服务角度出发，简单易懂点就是，公司是干嘛的，公司需要的是复古还是年轻充满活力的？对于一家科技企业，互联网企业来讲，年轻充满活力是必不可少的，颜色可以选择多样化一点，但总体颜色不能太多，略显花哨，适量控制颜色种类，颜色应该略淡，色彩饱满度不可太高，饱满度太高，会让人看着不够放松，越看心情越急躁。图形形状，这个就得根据公司做的是什么业务和公司想要的是字体图形，还是比较抽象一点的图形。但互

关于使用ELK的记录

最近因为公司系统项目统计压力大。mysql集群查询进入瓶颈，索引优化也不能快速响应统计结果，于是接入 Elasticsearch、Logstash、Kibana 三大开源套餐。 https://www.elastic.co/cn/ 关于 Logstash 其实还可以使用ali DataX 也是可以的功能比 Logstash 还要更上一层楼。我采用的还是Logstash，因为ali DataX 我是后面才知道的，所以就没有去替换掉了。通过 Logstash抓取过滤mysql统计数据，增量同步到Elasticsearch中。再通过项目java api 调用 Elasticsearch查询； Kibana 可以web可视化集群，索引具体情况。 Elasticsearch查询语句挺简单，但是感觉官网的例子不是很多，很多比较复杂的聚合需要自己摸索。整个学习难度不是很高。入手很快 java api jar 使用的是 elasticsearch-rest-high-level-client 之后再根据业务场景自己封装了一下工厂，抽象了几层代码给开发人员使用。 api