技术 生活 原创

问题

对于一些需要在多方部署，代码大部分相同，但是只有部分逻辑或者业务不同的系统(比如一些管理系统需要根据当地法规或者标书中的要求去做一些改动适配)，在以往实践中，基本会有两种管理方式
1.创建多个项目，其中会有冗余代码
2.在单个项目中，编写多个核心逻辑，部署时，在配置文件选择走哪个逻辑
对于这两种方案来说，都会产生冗余的代码，可扩展性和管理性都会受限，牵一发可能会动全身

思路

目前基于spring提供的可扩展接口来说，有一种实现方式可以比较好的来规避这些问题
核心的思路是只有一个框架服务，而核心代码从中

在分布式服务中追踪一次请求的日志是一件非常重要的事，本文提供一种利用logBack + log4j的方案来解决这个问题
最终要实现的目的是通过一个traceId，然后再ELK中找到这个traceId对应请求所有打印的日志
来，一步一步看

1.设计思路

多个系统服务同时需要依赖一套生成和读取traceId的方案，所以，我们首先需要搞一套依赖，用来管理traceId
不同服务引用后，当一个请求进入服务中，服务首先检测他有没有携带traceId，没有的话将traceId补上，并放入MDC中，该请求进入下一个服务时，将traceId携带
各个服务间打印日志使用统一的工具类进行打印，打印中从MDC中取出traceId并打印，然后由ELK搜集整理

2.生成和读取traceId的方案

生成traceId可以使用UUID来做全局唯一标识
生成的traceId放入MDC中，用来给所有打印日志的地方使用

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16

/**
 * 获取traceId
 */
public static String getTraceId() {
    //获取
    String traceId = MDC.get(TRACE_ID);
    //如果traceId为空，则返回默认值
    return StringUtils.isBlank(traceId) ? DEFAULT_TRACE_ID : traceId;
}

/**
 * 生成traceId
 */
public static String gentraceId() {
    return UUID.randomUUID().toString().replaceAll("-","");
}

前言

MAC系统的Time Machine功能曾经拯救过我电脑几次，对于我这种爱折腾的人来说十分有用
但是麻烦的点在于每次需要手动备份，需要插上移动硬盘来进行备份，就很不方便，有时会忘掉
其实MAC是可以在合适的网络硬盘上进行备份的，比如部分NAS，群辉等，但是都太贵了，于是我自己买了一套路由器大小的微型服务器，配置了一块2T硬盘，配置比较一般，但是作为服务器来说够用了，
之后就可以安装centos系统并且安装netatalk和avahi来让mac备份到这台服务器上

1.下载centos7的镜像，将该镜像刻录至U盘

1
2
3
4
5
6
7
8
9
10

#命令确定U盘的路径
diskutil list 
#卸载U盘（这里/dev/disk2是查到的U盘路径，一定要确认对）
diskutil unmountDisk /dev/disk2 
#安装pv工具
brew install pv
#可视化刻录进度并刻录镜像
pv -cN source < 镜像路径 | sudo dd of=/dev/rdisk2 bs=4m
## 显示下面进度
source:  5.2GiB 5:11:41 [ 503KiB/s] [=====================>       ] 71% ETA 2:01:56

2.安装centos7

3.连接网络

可以选择网线直连或者wifi连接，我这里使用的是wifi连接
因为我的无线网卡为高通QCA9377，似乎属于旧版网卡，所以进入系统后打开终端，输入

1
2
3

cd lib/firmware/ath10k/QCA9377/hw1.0/
sudo mv firmware-6.bin ~
sudo mv notice_ath10k_firmware-6.txt ~

前言

公司项目中使用到了camunda引擎，这个技术框架在国内的文章还是比较少，于是自己在使用中先做一部分总结

首先上官网doc地址，目前已经更新到了7.13版本 https://docs.camunda.org/manual/7.13/
如果学习使用可以搭配camunda modeler这个官方的应用，用来可视化的打开和编辑流程模型文件

一般来讲，流程引擎可以使用在像流程审批，请假，以及一些需要过程性的任务上，他可以提供一种可复用，简便以及易更改的特点，所以在有上述业务需求的场景下，可以考虑使用camunda

本文选用bpmn模型

概念

camunda的起源是来自于activity，在activity开发中团队内出现了分歧，所以一部分人转移到一个新的项目中，就是camunda

在camunda中，我们首先需要定义一个流程模型，有开始节点和结束节点，中间可以增加用户任务（userTask），门（gateway）和监听器（listener）等等
这个流程模型就叫做processDefinition（流程模型定义）

写在前面

公司内arthas已经打在了每个容器中，推荐切换到启动java程序的用户之后使用 java -jar arthas-boot.jar 命令启动

如果启动有问题，可以尝试如下命令现场下载jar包启动

curl -O https://alibaba.github.io/arthas/arthas-boot.jar

java -jar arthas-boot.jar

更多使用方法详见arthas官方文档 https://alibaba.github.io/arthas/

推荐一篇入门级的比较通俗的博文：https://www.cnblogs.com/theRhyme/p/10659265.html

里头是最基础常用的命令，如sc、sm命令等

用法

从spring context里获取任意bean并调用其方法或查看成员变量
启动arthas并attach到进程后，执行tt命令来记录RequestMappingHandlerAdapter#invokeHandlerMethod的请求

公司最近需要搭建一套区块链项目进行数据存储，于是研究了下HyperLedger Fabric这个IBM开发的重量级区块链框架，这个著名的项目采用了可插拔式的模块，提供联盟链和私链的区块链解决方案

一.安装环境

安装docker和docker-compose

首先安装go语言环境，其次配置GOPATH环境变量，例如配置到/Users/admin/go

cd $GOPATH
然后创建目录src/github.com/hyperledger/，注意必须是创建这样的目录
然后从github上clone一下fabric的源码，切换到1.4.6分支
进入scripts目录，运行bootstrap.sh，拉取所需镜像
这样基本的环境变量就搭好了

进入到fabric目录下，使用
make configtxgen
make cryptogen
生成之后可能需要的工具configtxgen、cryptogen，会生成到/build/bin下

公司业务系统中有一个功能是某个系统客户端要定时加载目标jar包到系统中实现功能的热扩展，线上出了一个很奇怪的异常，是jar包提供端出现了connect reset by peer，隔一段时间就会报异常
并且业务功能并没有受到影响，但是毕竟是生产环境，一点错误都有可能造成损失，问题还是要看的啊

首先定位问题，该异常由jar包提供端抛出，jar删除后便不再抛出，由此基本可以缩小范围至客户端加载jar包代码，但是光看代码似乎并没有什么大的问题
所以我需要看看服务端抛异常的时候究竟在干什么，这里就用到了tcpdump，用这个工具将服务端的tcp日志打印出来

服务端部署在docker容器中，首先使用nsenter将命名空间锁定到容器的pid

1
2
3
4
5
6

//获取容器id/name
docker ps | grep xxx
//获取PID
docker inspect --format "{{.State.Pid}}" container_id/name
使用nsenter切换网络命名空间
nsenter -n -t pid

之后查找客户端所在的ip地址，也就是tcpdump中要用到的host信息，我们要锁定查找范围为服务端到客户端之间的所有连接

使用命令
tcpdump host 你的host -w tcphistory.pcap

网上各路大佬都写了好多，看的我云里雾里，不过还是有些感触的

三次握手

对于举例最频繁的就是

1
2
3

A ->    在不   -> B
A <- 在，你在不 <- B
A ->    在     -> B

补充一下A为客户端，B为服务端，或者说这里说客户端服务端不太合适，应该叫主动发起端和被动接收端，两个服务之间都有向对方传输的能力，所以在TCP中，两个服务在建立连接的时候主动要求建立的叫客户端
虽然看上去通俗易懂，但是其实省略了关键细节
TCP为什么称之为可靠的传输协议，因为双方都在做一些检查，其中最重要的检查莫过于对双方序列号的校验
第一步握手，A主动发送同步请求SYN，B端处于listen状态，A在发送SYN请求的时候是会携带一个A生成序号ISN（identity serial number）
第二步握手，B在收到请求后记录A的ISN，然后会向A发送确认请求ACK，并且向A发送自己的同步请求SYN和序号ISN
第三步握手，A在收到B的同步请求记录B的ISN,然后向B发送已收到ACK

为什么不是两次或四次

两次的话只有B能确认A的序号，A在本该确认B的序号的第三步被省略了，所以肯定是不行的
四次的话其实已经没必要了，三次已经将足够需要确认的数据传输完毕，没有必要传输第四次了

为什么ACK数据包不要确认

ACK数据包本身就是一个确认另一端请求的数据包，试想一下，假如ACK需要确认，接收端收到ACK后向发送端确认ACK，发送端收到ACK后又向接收端确认ACK，是不是就无限循环下去了呢

方案

业务中某张表存储的数据量较大，导致磁盘飞速增长
于是需要找到一种方案来减小线上数据库的占用量

业务使用的数据库为mysql数据库，InnoDB引擎
故可以考虑使用InnoDB引擎自带的压缩方案

教程

1.查询表原来所占的空间

1
2
3

select concat(round(sum(data_length/1024/1024),2),'MB') as data 
from information_schema.tables 
where table_schema='数据库名' AND table_name = '表名';

前言

optaplanner为一个开源的整数规划求解器，不仅可以计算N皇后等经典算法问题，还可以解决目前很多现实问题，例如：

其有着相对较快的求解速度以及多种约束编写方式。

软件更新速度相对较快并且文档丰富特别的perfect。

模型及约束基本设计流程

1.基本流程

设计一个结果载体及各种决策变量，开始计算前，我们先初始化所有决策变量及结果变量，计算时由解法器解法器根据规则具体决定填充到哪个将决策变量田中到结果中的哪个位置，例如在一个课表编排中，决策变量可以是时间，结果变量是一个课程，课程上边有空着的时间槽，用来填充时间，当计算完成时，时间也就被填充到了课表变量上，那么，我们就得到了一个课程具体上课的时间。