执子之手

在Jenkins Maven Plugin中指定不同的JDK版本

Fri, 10 May 2024 00:00:00 +0000

1. 问题

新版本的Jenkins中的Maven插件对JDK版本的要求提高了，如下：

Jenkins >= 1.520 requires Java 6 thus Maven jobs must be launched with Java >= 6.

Jenkins >= 1.612 requires Java 7 thus Maven jobs must be launched with Java >= 7.

Jenkins >= 2.54 requires Java 8 thus Maven jobs must be launched with Java >= 8.

Jenkins >= 2.357 requires Java 11 thus Maven jobs must be launched with Java >= 11.

但是有些项目必须要求JDK 1.8编译才能够成功（例如有些第三方依赖库只支持JDK8）。正常情况下在命令行下使用Maven编译可以通过export JAVA_HOME的方式来解决。但是在Jenkins Maven Plugin中没有办法指定JDK版本。如果强制指定在Jenkins任务中（Maven类型项目）指定JDK8，则编译的时候会报如下信息，然后强制选择新版本的JDK：

无损扩容Linux磁盘分区容量

Thu, 01 Dec 2022 00:00:00 +0000

1. 背景

公司有台虚拟机，当初安装的时候给的磁盘容量偏小（80G），最近频繁报磁盘空间不足。因为上面跑了比较重要的服务，没有办法重装，只好考虑如何扩容。物理机上面的空闲空间还比较多，通过虚拟机管理软件修改了虚拟机的配置，很容易的把虚拟磁盘容量调大了，调整到了215G。

虚拟磁盘调整后，就需要在Linux系统中进行扩容操作。扩容主要有两步工作要做：

调整分区大小：将新增的空间添加到分区内容；需要用到工具parted；
调整文件系统大小：分区容量扩大后，使用resize2fs命令将文件系统扩容到整个磁盘容量。

备注：当时分区的时候没有选择LVM管理，如果使用LVM管理可以通过lvextend命令进行分区的扩容，具体方法参考附录中的链接。

奇怪现象：两个Consumer消费同一个分区（Partition）

Fri, 27 May 2022 00:00:00 +0000

最近生产上碰到一个奇怪的问题，现场人员反馈Kafka工作不正常。经过开发人员检查，发现一个奇怪的现象：线上两台服务器竟然在同时消费一个Kafka Topic中的一个分区（Partition）。

1. 背景

我们的程序要实现的功能是这样的：系统会定时扫描库存表，根据库存情况决定是否要执行出库操作。之前是采用定时任务处理，执行策略是1分钟一次，为了防止多台服务器并发执行，使用Quartz集群模式确保定时任务只在一台服务器上执行。最近客户提出需求，某些时候客户希望响应更及时一些，譬如某项请求到达的时候，就要立即检查库存并决定是否需要出库。因此，开发人员对系统进行了调整，改为使用Kafka Consumer来触发扫描库存动作；定时任务和接口处同时负责发送触发库存扫描的消息。

Flex布局添加滚动条需要注意的规则

Wed, 02 Mar 2022 00:00:00 +0000

好久不写前端代码了，有些生疏了。最近用Electron写了一个客户端程序，碰到了Flex布局添加滚动条的问题，耗费了不少时间，所以总结一下要点：

根据滚动条的方向，确定好父元素的flex-flow方向： 如果要设置水平滚动条，那么父元素的flex-flow要设置为row；如果要设置纵向滚动条，那么父元素的flex-flow要设置为column。
元素本身flex设置为1；
滚动方向的大小（宽度或者高度）设置为0，非滚动方向大小设置为100%或者一个你喜欢的宽度；
如果元素本身还有子元素，需要特别注意子元素的高度需要设置为100%。如果没有设置，则会导致子元素本身的高度不受限制，从而撑爆了元素本身。

特别需要注意的就是第4点：布局的时候经常使用到el-row/el-col，其最后生成的html代码就会出现嵌套的div组合，是一个典型的父子结构。这时就要注意在el-col上设置相应的高度为100%，否则就会出现撑爆了的结果。

下面是最终的代码，相关要点添加了注释：

RSA证书格式

Fri, 26 Nov 2021 00:00:00 +0000

1. TL;DR

# -----BEGIN CERTIFICATE----- 开头的是证书。
# -----BEGIN RSA PRIVATE KEY----- 开头是遵循的PKCS#1规范，其内容只是一个RSA私钥。它本质上只是来自PKCS#8的关键对象，但前面没有版本或算法标识符。
# -----BEGIN PRIVATE KEY----- 开头遵循的是PKCS#8规范，并指示密钥类型包含在密钥数据本身中。

Jenkins工作空间页面崩溃问题解决

Fri, 22 Oct 2021 00:00:00 +0000

1. 问题

最近发现一个问题：在 Jenkins 中打开某些项目的工作空间（WorkSpace）的时候，页面会崩溃，显示如下的错误信息：

查看 Jenkins 日志发现如下错误信息，提示的是路径无效错误（InvalidPathException），该目录应该是中文名字，猜测是编码转换出了错误。

2. 解决

由于是使用 Docker 运行的 Jenkins，登录进 Jenkins 容器内部，查看对应的目录：

发现在容器内部看到的目录就是乱码了。而在外部环境可以正常显示目录：

Vue进行条件编译发布

Fri, 24 Sep 2021 00:00:00 +0000

最近碰到一个问题：公司新申请了一个公众号，这个新公众号的功能与之前一个公众号功能基本一致，只是两个公众号的用户协议有些区别，所以就会公用一份代码。现在需要解决发布的问题，需要确保发布到两个不同公众号的页面是正确的，不同公众号的用户看到正确的用户协议。

经过上网查找方案，发现 Vue 脚手架中提供的 vue-cli-service 内置了类似的功能，可以用来实现类似功能，这里简单说一下其涉及到的改动要点，更多细节可以参考vue-cli的文档模式和环境变量。

MySQL如何保存emoji字符

Thu, 22 Jul 2021 00:00:00 +0000

1. 问题

1.1 发现问题

最近生产环境日志中报了一个异常：

 12021-07-11 20:54:41.632 ERROR 26289 --- [XNIO-1 task-11] c.e.t.s.t.mp.WxMpMessageRouterService    :
 2### Error updating database.  Cause: java.sql.SQLException: Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1
 3### The error may exist in com/eveus/tap/account/mapper/AccountMapper.java (best guess)
 4### The error may involve com.eveus.tap.account.mapper.AccountMapper.insert-Inline
 5### The error occurred while setting parameters
 6### SQL: INSERT INTO tap_account  ( open_id, avatar, nick_name, country, province, city, gender, secret,         status, IS_DISABLED,     is_subscribe, create_time, update_time )  VALUES
 7  ( ?, ?, ?, ?, ?, ?, ?, ?,         ?, ?,     ?, ?, ? )
 8### Cause: java.sql.SQLException: Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1
 9; uncategorized SQLException; SQL state [HY000]; error code [1366]; Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1; nested exception is java.sql.SQLException:
10 Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1
11
12org.springframework.jdbc.UncategorizedSQLException:
13### Error updating database.  Cause: java.sql.SQLException: Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1
14### The error may exist in com/eveus/tap/account/mapper/AccountMapper.java (best guess)
15### The error may involve com.eveus.tap.account.mapper.AccountMapper.insert-Inline
16### The error occurred while setting parameters
17### SQL: INSERT INTO tap_account  ( open_id, avatar, nick_name, country, province, city, gender, secret,         status, IS_DISABLED,     is_subscribe, create_time, update_time )  VALUES
18  ( ?, ?, ?, ?, ?, ?, ?, ?,         ?, ?,     ?, ?, ? )
19### Cause: java.sql.SQLException: Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1
20; uncategorized SQLException; SQL state [HY000]; error code [1366]; Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1; nested exception is java.sql.SQLException:
21 Incorrect string value: '\xF0\x9F\xA6\x84' for column 'NICK_NAME' at row 1
22        at org.springframework.jdbc.support.AbstractFallbackSQLExceptionTranslator.translate(AbstractFallbackSQLExceptionTranslator.java:89)
23        at org.springframework.jdbc.support.AbstractFallbackSQLExceptionTranslator.translate(AbstractFallbackSQLExceptionTranslator.java:81)
24        at org.springframework.jdbc.support.AbstractFallbackSQLExceptionTranslator.translate(AbstractFallbackSQLExceptionTranslator.java:81)
25        at org.mybatis.spring.MyBatisExceptionTranslator.translateExceptionIfPossible(MyBatisExceptionTranslator.java:88)
26        at org.mybatis.spring.SqlSessionTemplate$SqlSessionInterceptor.invoke(SqlSessionTemplate.java:440)
27        at com.sun.proxy.$Proxy134.insert(Unknown Source)
28        at org.mybatis.spring.SqlSessionTemplate.insert(SqlSessionTemplate.java:271)
29        at com.baomidou.mybatisplus.core.override.MybatisMapperMethod.execute(MybatisMapperMethod.java:60)
30        at com.baomidou.mybatisplus.core.override.MybatisMapperProxy.invoke(MybatisMapperProxy.java:96)
31        at com.sun.proxy.$Proxy186.insert(Unknown Source)
32        at com.baomidou.mybatisplus.extension.service.IService.save(IService.java:59)
33        at com.eveus.tap.account.service.impl.AccountServiceImpl.addAccount(AccountServiceImpl.java:151)
34        at com.eveus.tap.account.service.impl.AccountServiceImpl.ensureLoad(AccountServiceImpl.java:226)
35        at com.eveus.tap.account.service.impl.AccountServiceImpl$$FastClassBySpringCGLIB$$34fe95c8.invoke(<generated>)
36        at org.springframework.cglib.proxy.MethodProxy.invoke(MethodProxy.java:218)
37        at org.springframework.aop.framework.CglibAopProxy$CglibMethodInvocation.invokeJoinpoint(CglibAopProxy.java:769)
38        at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:163)
39        at org.springframework.aop.framework.CglibAopProxy$CglibMethodInvocation.proceed(CglibAopProxy.java:747)
40        at org.springframework.aop.interceptor.ExposeInvocationInterceptor.invoke(ExposeInvocationInterceptor.java:95)
41        at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:186)
42        at org.springframework.aop.framework.CglibAopProxy$CglibMethodInvocation.proceed(CglibAopProxy.java:747)
43        at org.springframework.aop.framework.CglibAopProxy$DynamicAdvisedInterceptor.intercept(CglibAopProxy.java:689)
44        at com.eveus.tap.account.service.impl.AccountServiceImpl$$EnhancerBySpringCGLIB$$cbb1e26b.ensureLoad(<generated>)
45        at com.eveus.tap.server.taxer.mp.handler.SubscribeHandler.handle(SubscribeHandler.java:54)
46        at me.chanjar.weixin.mp.api.WxMpMessageRouterRule.service(WxMpMessageRouterRule.java:226)
47        at me.chanjar.weixin.mp.api.WxMpMessageRouter.route(WxMpMessageRouter.java:203)
48        at me.chanjar.weixin.mp.api.WxMpMessageRouter.route(WxMpMessageRouter.java:154)
49        at me.chanjar.weixin.mp.api.WxMpMessageRouter.route(WxMpMessageRouter.java:233)

看错误信息是因为 MySQL 字符编码不正确导致无法保存特殊字符导致的。把字符还原一下，发现 \xF0\x9F\xA6\x84 代表的字符内容是：🦄，是一个 Emoji 字符。

当使用对 utf8 编码的时候，和一般汉字占用3个字节不同，Emoji 字符的编码会比较特殊一点，占用4个字节。而由于历史的原因，MySQL 使用的 utf8 编码最长支持3个字节，如果要保存4个字节的 unicode，则需要使用 utf8mb4 编码。上述错误应该是因此而出。

MyBatis Plus中主键生成方式ASSIGN_ID的算法分析

Fri, 02 Jul 2021 00:00:00 +0000

MyBatis Plus 中提供了 ASSIGN_ID 这种方式生成主键，使用起来非常方便，只要在PO上定义一下就可以了，例如：

1public class Order extends Model<Order> {
2
3    @TableId(value = "id", type = IdType.ASSIGN_ID)
4    private Long id;
5
6    //...
7}

这样在保存的时候，MyBatis Plus会负责生成主键值，自动设置到字段id中。一直好奇这个主键是怎么生成的，抽时间查看了一下源码，特意记录一下。

Linux常用命令介绍 05 - unzip

Fri, 26 Feb 2021 00:00:00 +0000

unzip命令可以用来解压zip文件。用法比较简单，但是有些不太常用的命令需要记录一下。

1. 查看文件列表

1unzip -l ShadowHunters.epub
2# 查看更详细信息，包括压缩率等
3unzip -lv ShadowHunters.epub

2. 解压文件

1unzip -d ./temp ShadowHunters.epub

3. 解压一个文件

使用-p命令，将文件内容输出到标准输出，然后使用重定向创建文件：

1unzip -p ShadowHunters.epub ops/xhtml/cover.html > cover.html

4. 更新文件

1zip -u ShadowHunters.epub ops/xhtml/cover.html

如何在Ubuntu上静态编译Golang+GoCV程序

Fri, 18 Dec 2020 00:00:00 +0000

最近做了一个图像增强程序，用到了OpenCV。为了方便发布，我将代码使用Golang+GoCV重写，但是编译的时候发现比较麻烦，特别记录一下，以备后查。本文对应版本如下：

Ubuntu 18.04.5 LTS
Golang 1.15.6
OpenCV 4.5.0
GoCV 0.2.5

1. Golang环境准备

1.1 安装Golang

下载对应的包，然后解压，设置PATH路径即可，不多说了。

1.2 设置GOPATH

使用go get下载的包将下载到$GOPATH目录中。这里设置成/home/ubuntu/.go。不设置的话将自动设置成~/go目录。

1cd /home/ubuntu/.go
2export GOPATH=/home/ubuntu/.go

1.3 下载GoCV源码

1# 设置代理翻墙，要不然下载不了
2git config --global http.proxy=http://127.0.0.1:12346
3git config --global https.proxy=http://127.0.0.1:12346
4export http_proxy=http://127.0.0.1:12346
5export https_proxy=http://127.0.0.1:12346
6go get -v -u -d gocv.io/x/gocv

删除启动台Launchpad上无效的图标

Fri, 04 Dec 2020 00:00:00 +0000

今天删除软件的时候碰到一个问题，软件虽然被删除了，但是图标依然在启动台上。怎么也删不掉。上网搜了搜，找到一个办法可以解决。特此记录一下。

 1# 切换到目录 /private/var/folders
 2cd /private/var/folders
 3# 寻找 com.apple.dock.launchpad 目录，图标信息存在该目录中的一个sqlite3数据库中
 4sudo find . | grep com.apple.dock.launchpad
 5# 确定好目录，然后使用cd转入对应的目录。目录名不同机器上不一样
 6# 使用sqlite3工具查询一下
 7sqlite3 db "select * from apps where title like 'eclipse%';"
 8# 确认之后可以使用delete语句删除
 9sqlite3 db "delete from apps where title like 'eclipse%';"
10# 然后杀掉Dock进程，就好了
11killall Dock

禁用CleanMyMacX HealthMonitor

Fri, 27 Nov 2020 00:00:00 +0000

CleanMyMacX 是Mac平台上优秀的卸载工具。虽然Mac上的应用安装卸载比Windows上简单很多，AppStore上的软件采用的是沙盒模型，删除的时候会把相关的数据一并删除；但是大量的非AppStore软件在删除对应的app之后不会同时删除对应的数据。 CleanMyMacX 这种类型的软件会扫描这些相关的数据并一起删除。

最近发现 CleanMyMacX 会附带一个后台服务：CleanMyMacX HealthMonitor，即使软件本身退出这个后台服务还一直运行。这就有点360的味道了，让人不爽。最主要的是这个进程对资源的占用还是有的，没有到那种可以完全忽略的地步。因此想办法禁用它。

使用MyBatis ResultHandler解决巨大结果集导出Excel引发的OOM

Fri, 04 Sep 2020 00:00:00 +0000

当一次要导出非常多数据的时候，例如100w条，如果使用MyBatis将全部结果都查询到list中，经常会导致内存溢出。这个时候，我们可以使用MyBatis的ResultHandler来使用游标方式访问数据，从而避免OOM。

ResultHandler是MyBatis提供的一个接口，通过该接口可以让MyBatis以流式的方式处理结果集，而不必等待整个结果集全部准备完毕，在准备好一条记录后就调用该接口中的handleResult方法：

1void handleResult(ResultContext<? extends T> resultContext);

要使用ResultHandler需要在Mapper层声明的时候做一定的处理。这里简单描述一下。

使用Python写一个Alfred Workflow

Fri, 21 Aug 2020 00:00:00 +0000

1. `Alfred` 和 `Workflows` 介绍

Alfred 号称是 Mac 上最强大的效率工具，一直在 Mac 平台的工具类中排名榜首。它在Spotlight （ Mac 自带的搜索和快速启动引擎）基础上优化了快速启动与搜索的功能，还引入了 Workflows 等强大的扩展功能，使之成为了一个拥有无限自动化潜力的「工具平台」软件，可以用它来实现近乎一切有关自动化的想法。

Worflows 是 Alfred 的高端应用方式，它以流的方式来进行工作，从输入 -> 动作 -> 输出，将各种工具串联在一起进行工作，非常开放，用来将各种功能串联起来执行，可以定制完成各种想要实现的功能，潜力无限。

虽然网上已经有很多别人写好的 Workflow，但总是不够用，毕竟各自的偷懒点不同，因此有必要学会 Workflow 的编写，可以更好的满足自己的要求。

2. 开始写一个`Workflows`

今天想写一个生成随机字符串的Workflow，可选接收一个长度参数，生成指定长度的字符串，这个字符串可以由数字、字符、数字+字符等构成。下面说一下整个创建过程。

Mac休眠模式调整

Tue, 11 Aug 2020 00:00:00 +0000

手头的Mac已经用了三年了，之前合盖睡眠的时候感觉掉电还不明显，最近几次系统升级后感觉掉电的情况明显了，一个晚上会掉5%左右，虽然不多，但是还是不爽。经过搜索，发现可以通过修改休眠模式，来解决这个问题，特此记录一下。

1. pmset及参数介绍

pmset是Mac的一个系统命令，可以用来修改和电源管理相关的参数。看man中的帮助：

pmset can modify the values of any of the power management settings defined below. You may specify one or more setting & value pairs on the command-line invocation of pmset. The -a, -b, -c, -u flags determine whether the settings apply to battery ( -b ), charger (wall power) ( -c ), UPS ( -u ) or all ( -a ).

简单来说就是可以通过pmset -b或pmset -c,pmset -a等命令修改电源配置参数。当然也可以通过pmset -g命令查询当前的配置参数或日志等。例如以下命令可以查看当前系统的电源相关配置：

使用KeepAlived配置Nginx高可用

Mon, 20 Jul 2020 00:00:00 +0000

1. 背景

最近为一个传统行业的客户开发了一个生产调度系统。但是他的生产环境是自己搭建的，不是购买的云服务，因此碰到了一些问题。

客户购买了多台高性能的物理机，在上面自行搭建虚拟机。但是只有虚拟机，没有提供类似负载均衡、数据库等基础服务。为了解决负载均衡问题，我们自行安装了 Nginx 。为了保证系统健壮和性能，安装 Nginx 的两台虚拟机（Ubuntu 18.04.3 LTS，172.16.45.22，172.16.45.26）分别部署在两台不同的物理机上（172.16.45.11， 172.168.45.12）。然后 DNS 解析到两台 Nginx 主机上。

现在的问题是：客户的要求是任何一台物理机出现问题都要能够保证系统可用，验证的方式是测试的时候会直接断开物理机的网线，这将导致通过 DNS 解析出来的 Nginx 主机必然有一台是无法使用的。访问显然会出问题。

经过考虑，最后选定解决办法是：使用 KeepAlived 做高可用，两台 Nginx 共同维护一个虚拟IP（172.16.45.50），DNS 解析到这个虚拟IP上。

这里简单记录一下安装 KeepAlived 的过程以及碰到的一些问题及解决方案。

如何修改Ubuntu服务器上的DNS设置

Fri, 10 Jul 2020 00:00:00 +0000

公司的几台服务器安装的时候设置了联通的DNS服务器，由于公司网络切换到了电信，最近经常出现解析服务器IP失败的情况。所以想着要更换一下DNS服务器，以提高网络访问速度。

因为历史原因，服务器操作系统主要有 Ubuntu 16.04 LTS 和 Ubuntu 18.04 LTS 两种。实际修改中发现，他们的配置方法是不一样的，特此记录一下。

1. Ubuntu 16.04 LTS

16.04 LTS上主要修改两个文件。

2.1 更新resolv.conf

首先修改文件：/etc/resolvconf/resolv.conf.d/base文件，内容如下：

1nameserver 114.114.114.114
2nameserver 223.5.5.5

然后执行：resolvconf -u命令就可以更新dns服务器了。

在Mac上编译RedisDesktopManager（1）国际化处理

Wed, 01 Jul 2020 00:00:00 +0000

1. 概述

Redis Desktop Manager（RedisDesktopManager，RDM）是一个快速、简单、支持跨平台的 Redis 桌面管理工具，基于 Qt 5 开发，支持通过 SSH Tunnel 连接。

– 开源中国上面对项目的介绍

RedisDesktopManager 是一款优秀的 Redis 客户端。最初是作为开源项目发布的，官方也会发布编译好的版本。后来，作者做了一些商业化处理，上架了App Store，从此不再发布编译后的版本，也在开源版本中阉割掉了 SSH Tunnel 功能。有鉴于此，网上有很多人写教程来说明如何从源码构建一个发行版本，但是目前见到的教程多多少少都有一些问题。最近花了一些时间尝试完善整个编译过程，目前进展不错。以后会陆续说明编译过程中碰到的问题以及对应的解决办法。

今天首先来说一下国际化的问题。

目前网上流行的 RedisDesktopManager 编译方法都没有对国际化文件进行处理，所以编译后的版本没有国际化功能，界面只显示英文，语言切换功能无效。经过对相关源码的分析，终于找到了正确的编译处理方法，现在可以完美切换语言。效果如图：

如何在Mac上编译vcmi（续）-cpack打包后异常退出

Fri, 26 Jun 2020 00:00:00 +0000

1. 现象

VCMI编译之后可以使用cpack命令（cmake的一个功能）打包成dmg文件，以便于分发。打包过程中会把需要的依赖文件都打包到最后的.app文件中，这样就可以保证在其他机器上也可以正常运行编译后的VCMI。按照之前的文档，编译之后直接执行没有问题，但是使用cpack打包之后运行缺会异常退出。经过观察基本上发生在第一次战斗中，玩家操作完毕，电脑AI获得控制权的时候就会崩溃退出。

2. 分析

最初怀疑是新版本代码有问题，所以切换到之前版本的代码编译，发现还是有同样的问题。后来经过分析退出的时间点，怀疑是vcmi的AI代码有问题，因为对代码部分不是很熟悉，所以很长时间没有进展。后来经过查看cpack的工作原理，怀疑是AI库对应的依赖文件没有正确打包导致的。

使用otool -L分析动态库依赖，发现AI目录下的文件没有进行依赖库的处理。还是指向/usr/local/...下面的dylib文件。而vcmiclient/vcmiserver已经进行了处理。因此怀疑是因为引入了两份动态库导致的问题，vcmiclient已经加载了一份动态库，但是当执行到AI库的时候又要从其他位置加载另一份同名的动态库，可能是因为这个原因导致了崩溃。

如何在Mac上编译vcmi（续）-解决无法播放MP3的问题

Sun, 21 Jun 2020 00:00:00 +0000

1. 问题

按照上一篇文档的步骤编译之后，发现mp3格式的背景音乐无法播放。通过直接执行vcmiclient可以看到在控制台中输出如下信息：

1Warning: Cannot open Music/MainMenu: Unrecognized audio format
2Unable to play music (music parameter was NULL)

原因是我本地环境使用的sdl2_mixer是通过brew安装的，当时无法按照官方文档介绍通过brew install sdl2_mixer --with-smpeg2进行安装。因为发现无法播放mp3音乐，所以我对这个库进行了一些了解，发现brew官方的版本屏蔽了mp3格式的支持。查看brew官方的源码可以看到：

 1def install
 2    inreplace "SDL2_mixer.pc.in", "@prefix@", HOMEBREW_PREFIX
 3
 4    args = %W[
 5      --prefix=#{prefix}
 6      --disable-dependency-tracking
 7      --disable-music-flac
 8      --disable-music-flac-shared
 9      --disable-music-midi-fluidsynth
10      --disable-music-midi-fluidsynth-shared
11      --disable-music-mod-mikmod-shared
12      --disable-music-mod-modplug-shared
13      --disable-music-mp3-mpg123
14      --disable-music-mp3-mpg123-shared
15      --disable-music-mp3-smpeg
16      --disable-music-ogg-shared
17      --enable-music-mod-mikmod
18      --enable-music-mod-modplug
19      --enable-music-ogg
20    ]
21
22    system "./configure", *args
23    system "make", "install"
24  end

可以看到有关mp3的选项都被disabled掉了。

如何在Mac上编译vcmi

Sat, 09 May 2020 00:00:00 +0000

vcmi是英雄无敌三的开源引擎。与fheroes2类似，它依托于英雄无敌3的游戏数据，使用完全重写、开源的引擎，实现了原版游戏的绝大多数功能。相比于原版游戏，对高清分辨率的支持也更好，譬如增加了宽屏分辨率的支持。vcmi使用c++语言编写，依赖库主要包括：boost，ffmpeg；图形库使用的是SDL2。另外，图形启动工具依赖于QT5。vcmi支持平台包括Windows，MacOS，Android和Linux，算是全平台支持了。

不过官方的发布系统好像有点问题，MacOS版本最新到2019年9月，后面的版本没有构建成功。

英雄无敌3，全称《魔法门之英雄无敌Ⅲ》，是1999年由New World Computing在Windows平台上开发的回合制策略魔幻游戏，其出版商是3DO。在PC版发布之后，3DO和Loki Software分别推出了可在苹果机和Linux系统上运行的版本。

该作是魔法门之英雄无敌系列的第三代。游戏情节参照第一次贯穿了《魔法门VI：天堂之令》，并且部分作为了《魔法门VII：血统与荣耀》的前传。玩家可以选择六个战役之中的一个来进行情节模式，也可以选择场景来进行与电脑或其他玩家的对抗。之后，又陆续发布了《末日之刃》、《死亡阴影》两个资料片，后来又发布了《英雄无敌历代记》共计8个战役。

英雄无敌3历来被称为英雄无敌系列的经典之作，可以说是这个系列游戏的巅峰之作。

vcmi的官网有编译方法的说明，但是有些小的地方有些小问题。特此记录一下，以备后查。本次编译使用cmake在命令行下面完成。需要确保已经安装了xcode及brew。

如何在Mac上编译fheroes2

Fri, 08 May 2020 00:00:00 +0000

fheroes2是英雄无敌2的开源引擎，它基于英雄无敌2的游戏数据，采用完全重写的引擎实现了绝大多数原版游戏的功能。使用的图形引擎是SDL。

Free implementation of Heroes of the Might and Magic II engine. SDL is used.

fheroes2最初是在SourceForge上面开源的，不过最近两年基本停止更新了。最近在Github上偶然发现了有人在继续开发了，并且对图形引擎进行了更新，同时支持SDL2。

使用HttpServletRequestWrapper解决无法多次获取request Body的问题

Thu, 30 Apr 2020 00:00:00 +0000

在使用AOP编程的时候，经常碰到需要多次获取整个请求的body的情况。例如：典型场景下我们要在AOP切面中做日志记录或权限校验，此时需要调用request.getInputStream获取输入流，从而读取整个请求的消息体。但是这通常会触发一个异常：java.lang.IllegalStateException: getInputStream() can't be called after getReader()。

出现这个问题的原因是默认的HttpServletRequest对象中的getInputStream,getReader函数式只允许调用一次。在一次请求中，除了我们在切面中调用getInputStream之外，Spring MVC框架在进行参数转换的时候还需要调用getInputStream方法读取整个请求的消息体，然后转回为请求参数，这违背了只调用一次的原则，从而触发了以异常，

为了解决这个问题，我们可以引入HttpServletRequestWrapper这个对象。这个类封装了HttpServletRequest的行为，我们可以继承这个类，从而使用一个新类模拟原始HttpServletRequest的行为。然后使用过滤器（filter）将原始的HttpServletRequest对象替换为HttpServletRequestWrapper对象。

最近在项目中有需求为API请求增加参数签名校验，使用了AOP切面功能，因此碰到了上面的问题：参数校验切面中需要在读取整个请求报文，然后对报文进行hmac算法从而计算签名值。下面说一下具体的解决办法，以代码为主。

Linux常用命令介绍 04 - journalctl

Mon, 20 Apr 2020 00:00:00 +0000

journalctl命令是Systemd日志系统的一个命令，主要用途是用来查看通过Systemd日志系统记录的日志。在Systemd出现之前，Linux系统及各应用的日志都是分别管理的，Systemd开始统一管理了所有Unit的启动日志，这样带来的好处就是可以只用一个 journalctl命令，查看所有内核和应用的日志。

1. 基础用法

1.1 查看所有日志

不用添加任何任何参数运行可以查看本次启动以来的所有日志。

1# 显示本次启动以来的全部日志
2journalctl

1.2 查看内核日志

使用-k参数可以查看内核日志。

1# 显示内核日志
2journalctl -k

Linux常用命令介绍 03 - tree

Tue, 07 Apr 2020 00:00:00 +0000

tree命令的作用是以树状图的形式列出目录的内容。通常在写文档时需要列一下文件目录结构，这个时候tree命令就非常有用了

1. 安装&使用

我用的Ubuntu上默认没有安装tree命令。可以通过：sudo apt install tree命令安装。其他的发行版参考对应的命令。

直接使用tree命令或者tree [directory]命令即可列出目录中的内容。

2. 只列出目录

默认情况下，tree命令会同时列出目录中的文件。例如：

1# 列出全部内容
2tree .
3.
4├── Cargo.lock
5├── Cargo.toml
6└── src
7    └── main.rs
8
91 directory, 3 files

如果不想显示文件，则可以使用-d参数，只列出文件夹：

1# 只列出目录
2tree -d .
3.
4└── src
5
61 directory

Linux常用命令介绍 02 - ssh

Sun, 29 Mar 2020 00:00:00 +0000

SSH在Linux中占有重要的地位。通常我们远程登录服务器都是通过ssh协议，但是ssh命令（或者SSH协议）能够实现的功能还有很多。我日常用到一些，但是肯定还有各种各样的用法，有兴趣的朋友可以自行搜索更多资料。

1. 防止掉线

使用SSH连接服务器时候，通常第一个要修改的选项就是防止掉线。总体上来说有两类方法来防止服务器掉线：

客户端/客户端工具发送心跳包；
服务器端发送心跳包。如果有服务器的控制权，可以修改ssh的配置选项，推荐使用第二种方案，通常更有保障一些。如果没有服务器的控制权，那就只能用第一种了。

Mac上面的文件比较功能

Fri, 20 Mar 2020 00:00:00 +0000

以前在Windows上一直使用TotalCmd，它的比较功能非常棒。不论是目录还是文件，只要按下F10，就能够比较，还能够同步，非常方便。切换到Mac也有好几年了，一直没有找到完全匹配上的替代品。现在用的是ForkLift，常用功能还可以，但是比较功能差距很大。目前正在想办法自己写一些脚本增强一下功能。

目前实现了一个脚本，通过ForkLift调用，可以满足基本的比较功能：

使用file判断文件类型，对文本类型调用FileMerge进行源码比较；
如果不是，则只用cmp功能比较内容是否相等；
后期考虑增加对目录类型的支持，引入目录比较工具。

Linux常用命令介绍 01 - curl

Fri, 13 Mar 2020 00:00:00 +0000

很久没有更新博客了。之前一直用hexo，配置起来稍显复杂，单个的时间一长有些忘了，搞不起来了，于是荒废了很长时间。最近下定决心迁移到了Hugo上。总体感觉Hugo速度确实快，这一点非常喜欢。以后有时间可以介绍一下这次迁移的过程。

这几年一直不间断的与Linux打交道，但是Linux的命令一直没有深入研究过，所以碰到问题的时候还是要各种搜索，挺麻烦的。这次想整理一个常用命令的介绍系列，把平常用到的命令简单介绍一下。不会是详尽的帮助类介绍，更多的是基于场景的介绍：譬如要实现什么功能用什么参数之类的。作为以后的备查吧，就不用再到处搜索了。：）

第一个命令介绍curl。

iOS证书及推送相关概念

Tue, 04 Sep 2018 00:00:00 +0000

1.i OS开发中碰到的概念

1.1 开发者账号

苹果对开发者账号分为如下几类：

个人 Individual （$99/year，可以上架Apple Store，最大UUID数目100）
组织 Organizations。又可以写分为两类：
- 组织 Organization （普通账号，$99/year，能够上传Apple Store，最大UUID数目100）
- 企业账号 Enterprise Program （企业账号，$299/year，能够进行企业发布，不能够发布到Apple Store，不限制UUID数目）
教育机构（Educational Institutions）

迁移到SpringBoot 08 - 日志

Fri, 13 Jul 2018 00:00:00 +0000

SpringBoot默认的日志配置通常来说足够满足要求：日志记录到控制台，也能够配置日志的级别，样式等等。但是其也有些不足：没有了之前logback提供的热更新日志配置的功能。

logback有个非常好用的配置是“scan”，当“scan=true”的时候默认一分钟刷新一次配置。这样可以自动更新系统的日志级别。对于在线系统可以方便修改日志级别获取更加详细的日志，方便定位错误。这样可以保证服务不中断的情况下调整日志级别获取更多日志信息。但是默认的SpringBoot配置中不支持这种选项。

迁移到SpringBoot 07 - Redis发布订阅机制

Mon, 09 Jul 2018 00:00:00 +0000

Redis中的发布订阅机制（Pub/Sub）是基于channel这一概念的，这有些类似于Kafka中的基于topic的消息机制，只是不支持持久化。如果publish的消息，没有任何client处于"subscribe"状态，消息将会被丢弃。如果client在subcribe时，链接断开后重连，那么此期间的消息也将丢失。Redis server将会"尽力"将消息发送给处于subscribe状态的client，但是仍不会保证每条消息都能被正确接收。

为了解耦发布者(publisher)和订阅者(subscriber)之间的关系，Redis 使用了 channel (频道)作为两者的中介：发布者将信息直接发布给 channel ，而 channel 负责将信息发送给适当的订阅者，发布者和订阅者之间没有相互关系，也不知道对方的存在。

Spring Data Redis组件对Pub/Sub机制进行了抽象，提供了类似JMS的编程模式。Spring Data Redis使用了一个Container（RedisMessageListenerContainer）来解决发布订阅机制。这个Container使用一个Redis链接解决了多个topic订阅的问题。它把其他的订阅、发布者隔离成基本的POJO对象，而不用与Redis对象打交道。这简化了整个编程模型。

迁移到SpringBoot 06 - Swagger

Fri, 06 Jul 2018 00:00:00 +0000

随着技术的发展，现在的Web系统架构基本都由原来的后端渲染（例如JSP），变成了：前端渲染、前后端分离的形态。前端和后端的唯一联系，变成了API接口。API文档变成了前后端开发人员联系的纽带，变得越来越重要，swagger就是一款让你更好的书写API文档的框架。没有API文档工具之前，大家都是手写API文档的，在什么地方书写的都有，有在Wiki上写的，有在Word里面写的，也有在对应的项目目录下readme.md上写的，每个公司都有每个公司的玩法，无所谓好坏。另外还有专门针对API文档开发的应用，例如showdoc之类的。

书写API文档的工具有很多，但是能称之为“框架”的，估计也只有swagger了。使用Swagger有个好处就是文档与代码结合紧密，更新代码的同时也会更新文档，不用担心同步的问题。而且在Java中使用Swagger也比较方便。

云认证平台提供的Restful接口是基于CXF实现的。网上现有的关于Swagger的文档多数是基于Spring MVC的，并不适用于CXF。下面我将针对CXF+SpringBoot的组合如何使用Swagger进行介绍。

SpringBoot中使用Jackson导致Long型数据精度丢失问题

Fri, 22 Jun 2018 00:00:00 +0000

数据库中有一个bigint类型数据，对应java后台类型为Long型，在某个查询页面中碰到了问题：页面上显示的数据和数据库中的数据不一致。例如数据库中存储的是：1475797674679549851，显示出来却成了1475797674679550000，后面几位全变成了0，精度丢失了。

Spring使用POI导出Excel内存溢出问题的解决（续）

Fri, 15 Jun 2018 00:00:00 +0000

上篇文章介绍了一个方法，解决了导出Excel过程中内存溢出的问题。但是有些问题还没有搞明白，那就是为什么要这样打开数据库游标？为什么fetchSize必须为：-2147483648？这里面涉及到数据库游标的更多信息，这一篇文章将深入介绍这方面内容。

在数据库中，游标是一个十分重要的概念。游标提供了一种对从表中检索出的数据进行操作的灵活手段，就本质而言，游标实际上是一种能从包括多条数据记录的结果集中每次提取一条记录的机制。游标总是与一条SQL 选择语句相关联因为游标由结果集（可以是零条、一条或由相关的选择语句检索出的多条记录）和结果集中指向特定记录的游标位置组成。

MySQL数据库游标通常有两种形式：Client Side Cursor（客户端游标）和Server Side Cursor（服务器端游标）。默认情况下，客户端游标会把整个结果集获取到客户端内存中，如果结果集太大，就会引发Out Of Memory错误；而服务器端游标会将结果集缓存在服务器端，客户端从服务器端分批获得结果集。

MySQL默认是使用客户端游标的，因为通常情况下，程序处理的结果集不会特别大，对小结果集使用客户端游标效率更高：结果集一次性传输到客户端，客户端可以自行处理，服务器端也可以为其他客户端提供服务。但是针对大结果集，默认的客户端游标处理方式满足不了要求，针对这种情况，MySQL的Java客户端做了一个特殊的处理。下面参照官方帮助看一下。

Spring使用POI导出Excel内存溢出问题的解决

Mon, 11 Jun 2018 00:00:00 +0000

云认证平台提供将认证记录导出为Excel的功能。但是当业务量慢慢发展起来以后，就碰到一个比较棘手的问题：需要导出的认证记录太多，导出Excel的时候经常碰到服务器内存溢出问题。例如当要导出30w条记录的时候，服务端内存占用会超过2G，继续增加Heap空间不是一个非常合适的方案，因为无法预知一共需要多少内存。

因此，这两天特意找了一下解决方案，终于有了解决方案。最终方案导出256w条记录的时候，服务器内战占用1.6G，不再继续增加。

迁移到SpringBoot 05 - 事务管理

Fri, 01 Jun 2018 00:00:00 +0000

Spring项目中使用数据库的方式多种多样，注入MyBatis、JDBC、Hibernate等等都是支持的。之前的系统是基于MyBatis的。

关于如何Spring Boot和MyBatis网上有很多文章，可以参考。有时间我也会专门写一篇介绍集成的过程。本文讲的就是MyBatis移植到Spring Boot方面碰到的一些问题，主要是事务控制方面的。

迁移到SpringBoot 04 - Redis

Thu, 24 May 2018 00:00:00 +0000

相比于Spring来说，在SpringBoot中使用Redis大幅简化了。通过使用spring-boot-starter-data-redis，使用Redis变得非常简单。

基本步骤如下：

添加依赖

1<dependency>
2    <groupId>org.springframework.boot</groupId>
3    <artifactId>spring-boot-starter-data-redis</artifactId>
4</dependency>

配置application.properties/yaml

1spring:
2  redis:
3    host: 192.168.2.230
4    port: 6379
5    password: xxxxxx
6    database: 1
7    timeout: 3000ms

注入RedisTemplate使用

1    @Autowired
2    StringRedisTemplate stringRedisTemplate;

就是这么简单。

迁移到SpringBoot 03 - Servlet和Filter

Fri, 18 May 2018 00:00:00 +0000

原先云认证中有几个特殊加载的组件：

checkingServlet：一个Servlet，用于检查系统的状态，主要用于负载均衡LB检测服务是否正常使用。该Servlet定义了了一组URL，可以用来检查系统的状态，例如：/checking/database（检查数据库是否可以访问），/checking/version（返回系统版本号），/checking（总体检查系统状态）等。这些功能理论上不适用Servlet也能够实现，但是由于历史原因采用了Servlet，这次一直也不考虑重新编写。
ClientCertificateFromProxyFilter：一个Filter，用于检查负载均衡转发过来的客户端证书，配合Spring Security完成双向SSL的认证工作。

迁移到SpringBoot 02 - 异常处理

Tue, 15 May 2018 00:00:00 +0000

首先说一下背景信息。云认证平台是一个传统的Spring项目，从上到下可以分为：API层（对应Spring Controller）、Service层、DAO层（MyBatis）几层。为了方便处理，从开发规范上我们要求了Service层的异常在Service层自行处理。

为了实现这一点，在接口定义上，从API层调用Service层的请求会有统一的返回基类：CommonResult。其定义如下：

 1public class CommonResult implements Serializable {
 2    private static final long serialVersionUID = 1L;
 3
 4    /**
 5     * success 请求成功与否的标志。
 6     */
 7    protected boolean success = Boolean.FALSE;
 8    /**
 9     * resultCode 返回码。
10     */
11    protected String resultCode = "";
12    /**
13     * message 详细信息。
14     */
15    protected String message = "";
16    ...
17}

所有需要从API层调用到的Service层的返回值都是该类或者该类的子类。如果是Service层之间互相调用，则不受此限制。

本章的内容主要与AOP有关。

迁移到SpringBoot 01 - 插件加载

Wed, 09 May 2018 00:00:00 +0000

首先简单说一下云平台的业务功能：云平台上提供了多种多样的服务，这些服务可能来源于不同的供应商。也就是说对于某一种服务来说，可能会有多个供应商提供相同的服务；而对于某一个供应商来说，它可能提供多种服务。

之前的云平台中有一个插件机制，使用插件机制解决了供应商与系统的耦合度问题。系统抽象了服务层，服务层在合适的时机加载插件以调用供应商的服务。

加载相关的代码大概类似这样：

 1...
 2ClassLoader localClassLoader = Thread.currentThread().getContextClassLoader();
 3for (String str : providerClassNames) {
 4    try {
 5        Class<?> localClass = localClassLoader.loadClass(str);
 6        XXXServiceProvider localProvider = (XXXServiceProvider) localClass.newInstance();
 7        localProvider.initial();// 初始化插件
 8    } catch (Exception e) {
 9		...
10    }
11}
12...

providerClassNames是一个数组，其中并所有插件的主类名字。通过获取到的ClassLoader，对插件主类进行加载，从而获得插件对象。

迁移到SpringBoot 00 - 背景介绍

Tue, 08 May 2018 00:00:00 +0000

最近因为发布方面的原因，需要对项目进行一次改造，趁着这次机会，对云平台项目进行了彻底的重构，迁移到了Spring Boot上。改造过程中，从传统的Spring项目迁移到Spring Boot上，还是碰到了一些问题的，也因此留下了这个系列的笔记。其中的内容，应该对希望把传统的Spring项目迁移到Spring Boot的人会有所帮助。

Apache HttpClient 使用（上）

Mon, 23 Apr 2018 00:00:00 +0000

HttpClient是Apache Jakarta Common下的子项目，用来提供高效的、最新的、功能丰富的支持HTTP协议的客户端编程工具包，并且它支持HTTP协议最新的版本和建议。HttpClient已经应用在很多的项目中，比如Apache Jakarta上很著名的另外两个开源项目Cactus和HTMLUnit都使用了HttpClient。

目前最新的版本是4.5，支持HTTP 1.0/HTTP 1.1协议。正在开发中的5.0版本（还在Beta阶段）支持HTTP/2协议。

1. 特性

基于标准、纯净的java语言。实现了Http1.0和Http1.1
以可扩展的面向对象的结构实现了Http全部的方法（GET, POST, PUT, DELETE, HEAD, OPTIONS, and TRACE）。
支持HTTPS协议。
通过Http代理建立透明的连接。
利用CONNECT方法通过Http代理建立隧道的https连接。
Basic, Digest, NTLMv1, NTLMv2, NTLM2 Session, SNPNEGO/Kerberos认证方案。
插件式的自定义认证方案。
便携可靠的套接字工厂使它更容易的使用第三方解决方案。
连接管理器支持多线程应用。支持设置最大连接数，同时支持设置每个主机的最大连接数，发现并关闭过期的连接。
自动处理Set-Cookie中的Cookie。
插件式的自定义Cookie策略。
Request的输出流可以避免流中内容直接缓冲到socket服务器。
Response的输入流可以有效的从socket服务器直接读取相应内容。
在http1.0和http1.1中利用KeepAlive保持持久连接。
直接获取服务器发送的response code和 headers。
设置连接超时的能力。
实验性的支持http1.1 response caching。
源代码基于Apache License 可免费获取。

Apache HttpClient 使用（下）

Mon, 23 Apr 2018 00:00:00 +0000

4. 链接池

通常我们可以使用PoolingHttpClientConnectionManager来创建一个链接池。

4.1 对于链接池的管理

 1PoolingHttpClientConnectionManager cm = new PoolingHttpClientConnectionManager();  
 2// 设置最大连接数  
 3cm.setMaxTotal(200);  
 4// 设置每个主机地址的并发数  
 5cm.setDefaultMaxPerRoute(20);  
 6// 通过PoolingHttpClientConnectionManager，来获取CloseableHttpClient  
 7CloseableHttpClient httpClient = HttpClients.custom().setConnectionManager(cm).build();
 8
 9// 创建http GET请求  
10HttpGet httpGet = new HttpGet("http://www.baidu.com/");    
11// 执行请求  
12response = httpClient.execute(httpGet);

在线API列表

Sat, 27 Jan 2018 09:17:30 +0000

经常需要去网上找各种开源项目的帮助，在此特意列一个列表，方便以后查找。随时更新。 1. Java 1.1 Spring SpringBoot Reference Spring Framework 4.x Reference Spring Framework 5.x Reference Spring data redis documentation Springfox Reference documentation 1.2 MyBatis MyBatis Introduction MyBatis Generator Documentation 2. Golang

Spring应用因Session Timeout设置引起的GC问题

Tue, 29 Aug 2017 00:00:00 +0000

最近在客户的要求下，对系统进行了压测。自己压测的时候一切指标都挺正常。但是客户却反馈说压测的时候有时候会碰到性能衰减很厉害，不稳定。于是有了下面这次的排查过程。客户反馈说问题是发生在多次连续压测之后碰到的，所以进行了一系列的测试。

先说一下测试环境的一些信息：测试主机是阿里云的ECS，配置是2C + 16G。为了方便，数据库采用的是Docker搭建的，版本是5.6.X。另外，这台机器上还安装了Zookeeper 3.4.X 和Kafka 1.0。系统本身是一个标准的Spring + CXF的应用，提供给客户使用的服务是标准的Restful接口。

1. 重现问题

因为客户反馈是多次压测之后碰到的，因此首先尝试连续压测多次看看能不能重现问题。为了可能存在的数据库性能问题，临时申请了RDS作为数据库；另外为了尽快发现问题，将程序占用内存缩小到1G。这次测试测出了客户所说的问题，通过jconsole监控也发现了问题原因，应该是因为GC导致的。

看图表可以发现，压测5~6分钟之后，Java的GC占用了大量的CPU时间（左上图中的蓝色线），而且内存占用一直居高不下（右上图）。

使用Docker运行Jenkins（二）

Sun, 20 Aug 2017 00:00:00 +0000

Gitea 是一款极易搭建的自助 Git 服务，最初是fork子Gogs项目（Gogs 的目标是打造一个最简单、最快速和最轻松的方式搭建自助 Git 服务）。Gitea使用 Go 语言开发。使用 Go 语言开发使得 Gitea 能够通过独立的二进制分发，并且支持 Go 语言支持的所有平台，包括 Linux、Mac OS X、Windows 以及 ARM 平台。

Gitea占用资源小，比起Gitlab这种庞然大物来说简直是精致得要命。但是作为小团队的项目管理用来替代Gitlab还是基本能够满足需求的。而且Gitea（包括Gogs）社区还是挺活跃的，新功能也在逐渐增加中，个人很看好它的前景。

使用Docker运行Jenkins服务（一）

Sun, 13 Aug 2017 00:00:00 +0000

1. Jenkins是什么？

某百科的解释是：

Jenkins是一个开源软件项目，是基于Java开发的一种持续集成工具，用于监控持续重复的工作，旨在提供一个开放易用的软件平台，使软件的持续集成变成可能。

这个解释大体上是靠谱的，Jenkins的核心作用就是一个CI（持续集成）工具。CI的概念是：持续集成指的是，频繁地（一天多次）将代码集成到主干。持续集成的目的，就是让产品可以快速迭代，同时还能保持高质量。它的核心措施是，代码集成到主干之前，必须通过自动化测试。只要有一个测试用例失败，就不能集成。而Jenkins能够完成这些自动化构建、测试的大部分工作。

Jenkins的前身是Hudson。这其中的渊源涉及到Oracle收购Java引起的版权纷争。有兴趣的可以看附录里面的相关链接。

Shell脚本中的一些特殊变量

Sat, 05 Aug 2017 00:00:00 +0000

Shell脚本的一些参数总是感觉记不住，特此记录一下，以备后查。

1. 参数说明

参数	说明
$0	当前脚本的文件名
—	—
$n	传递给脚本或函数的参数。n 是一个数字，表示第几个参数。例如，第一个参数是$1，第二个参数是$2。
$#	传递给脚本或函数的参数个数。
$*	传递给脚本或函数的所有参数。
$@	传递给脚本或函数的所有参数。被双引号(" “)包含时，与 $* 稍有不同，下面将会讲到。
$?	上个命令的退出状态，或函数的返回值。
$$	当前Shell进程ID。对于 Shell 脚本，就是这些脚本所在的进程ID。

xargs使用复杂参数

Sun, 30 Jul 2017 00:00:00 +0000

一般情况下xargs只处理一个参数，因此可以这样使用，最后的rm会自动补齐一个参数：

1find . | grep hello | xargs rm

但是有时候需要多个参数才能够正常运行，这时候怎么办呢？可以这样：

1ls -1 2016*.log | xargs -I % -t tar czvf %.tar.gz % --remove-files

上述命令的意思是将当前目录中所有2016*.log文件使用tar打包成tar.gz文件，并删除源文件。其中：

如何无密码登录SSH

Sun, 23 Jul 2017 00:00:00 +0000

我们在用Jenkins做发布工具的时候，经常用到的功能是通过SSH通道完成各种功能。例如使用scp命令拷贝安装包到服务器上，通过ssh -t命令执行服务器上的脚本等。

这时就需要配置无密码登录，否则无法做到自动执行命令。如果每次都手动输入密码，想想都不现实。要实现无密码登录，需要配置好SSH允许证书登录。

其原理是使用了公钥体系，假设有服务器Server，用户在服务器Client上，用户在服务器Client上有私钥Private Key，在服务器Server上有对应的公钥Public Key。这样访问的时候Server就能够通过公钥体系进行验证：要求用户使用其私钥进行签名，从而确保用户拥有私钥，以此验证用户身份。如下图：

在alias命令中使用单引号

Sun, 16 Jul 2017 00:00:00 +0000

Linux中的alias命令可以将一条复杂的命令缩短为一个简单的指令，实际工作中经常会用到。使用alias的时候命令本身需要使用单引号包括起来。但是如果命令本身中包含单引号怎么办呢？

例如，下面这条命令：

1ps -ef | grep shadowsocks/server.py | grep -v grep | awk '{print $2}'

其作用是获取任务的pid。其中用到的awk的参数需要用到单引号。alias也可以使用双引号，但是如果用双引号，其中的内容会被转义解释成具体获得的值。而不是命令本身。

如何在Mac上添加一个虚拟IP

Sun, 09 Jul 2017 00:00:00 +0000

最近忙着系统重构，因为经常处于移动办公的状态，访问公司的服务器不是很方便，所以一些基础服务都是搭建在本机上。但是使用的时候碰到了一些问题，最大的问题是网络地址切换导致的：IP地址总是不固定。有些服务（例如FastDFS）需要有明确的IP地址来绑定服务。不固定的IP地址会给这些服务带来麻烦，需要修改配置重启服务。这种情况下，最好的解决办法是能够给Mac分配一个固定的IP，不管怎么切换网络一直存在。幸好这个是可以解决的，而且并不复杂。方法如下：

1ifconfig lo0 alias 192.168.255.199

其原理是给网络设备loopback增加一个alias。loopback设备一直存在，而且与en0设备独立，可以一直存在。

Let's Encrypt免费证书的使用

Sun, 02 Jul 2017 00:00:00 +0000

1. 背景

因为云认证服务的商户认证体系是基于双向SSL的，如果服务器端没有启用SSL证书，则整个认证体系必须重构。目前的现状是申请SSL证书费用比较高（一年2-3w），而且周期比较长，赶不上目前的测试进度。所以只能使用免费证书来支撑一下了。

免费证书服务提供商据我所知有几个：Let's Encrypt, StartSSL, StarCom。但是StartSSL, StarCom前一阵子被Chrome、Firefox等设置为不可信（签名流程不规范，不符合安全监管要求之类的原因），因此目前可选的只有let's encrypt。

Let's Encrypt是国外一个公共的免费 SSL 项目，由 Linux 基金会托管，它的来头不小，由Mozilla、思科、Akamai、IdenTrust和EFF等组织发起，目的就是向网站自动签发和管理免费证书，以便加速互联网由 HTTP 过渡到 HTTPS。

Kafka介绍与使用

Sun, 25 Jun 2017 00:00:00 +0000

Apache Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一种快速、可扩展的、设计内在就是分布式的，分区的和可复制的提交日志服务。 Apache Kafka与传统消息系统相比，有以下不同：

它被设计为一个分布式系统，易于向外扩展；
它同时为发布和订阅提供高吞吐量；
它支持多订阅者，当失败时能自动平衡消费者；
它将消息持久化到磁盘，因此可用于批量消费，例如ETL，以及实时应用程序。

在Ubuntu 16.04 LTS上设置DOCKER_OPTS

Thu, 22 Jun 2017 00:00:00 +0000

之前一直使用Ubuntu 14.04来跑Docker。今天在16.04 LTS上跑Docker的时候发现设置DOCKER_OPTS的时候有些区别，特此记录一下。

在Mac上运行SOAPUI 5.3.0

Wed, 21 Jun 2017 00:00:00 +0000

0. 前言

Mac上找不到特别好的SOAP Webservice测试工具。以前用过SOAP UI，感觉很好。但是SOAP UI在Mac上安装有些问题。特此记录一下安装过程。

SoapUI目前最新的版本是5.3.0，目前已经开源。SmartBear在SOAP UI之后发布了新版本更名为SOAPUI NG。SOAPUI NG体积大了很多，而且功能更加繁琐，个人感觉还不如以前的版本好用。SoapUI以前收费，到了5.2.1以后版本就开源并且免费了。

SoapUI在Mac会出现无响应的现象：界面能够打开，但是画面卡住，鼠标显示成旋转彩球，无法操作。要正常使用需要修改一下才行。

在Mac上如何安装FastDFS

Sun, 18 Jun 2017 00:00:00 +0000

项目中用到了FastDFS来做文件存储。最近重构的时候，因为经常处于移动办公的状态，所以访问公司的服务器不是很方便，所以感觉有必要在本机上搭建一套FastDFS的测试环境。

FastDFS是什么？

FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。 FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 FastDFS里面有两种角色：Tracker、Storage。Tracker主要做调度工作，在访问上起负载均衡的作用。Storage存储节点存储文件，完成文件管理的所有功能：存储、同步和提供存取接口，FastDFS同时对文件的meta data进行管理。所谓文件的meta data就是文件的相关属性，以键值对（key value pair）方式表示，如：width=1024，其中的key为width，value为1024。文件meta data是文件属性列表，可以包含多个键值对。

Nginx配置导致的SSL证书认证失败

Sat, 03 Jun 2017 00:00:00 +0000

注：这是在之前博客上发过的文章，在实际使用中经常会有人碰到，特意转贴过来。

1. 背景

目前公司对外开放了一个云服务平台，提供一些功能供商户接入使用。整个项目的架构是基于Spring + MyBatis的。另外，商户端的服务接口是基于SOAP WebService的，这部分使用CXF实现。安全方面采用了Spring Security，可以对商户提供证书认证或密码认证。但是出于安全考虑，目前只开放了证书认证。为了使用证书认证商户，我们创建了一个自签名的CA，用来生成商户使用的客户端证书。在验证上，使用Nginx验证客户端证书是否是指定CA产生的。另外，为了防止被作废的证书（例如给商户颁发了新证书后，原证书应该作废，但是原证书也是由指定CA产生的）再次使用，在代码层面对证书进行了进一步的验证（这一点是通过Nginx将客户端证书作为Header传递到Java后台实现的，有时间以后再讲）。

DelegatingFilterProxy源码分析

Fri, 02 Jun 2017 00:00:00 +0000

1. 背景

1<filter>
2	<filter-name>springSecurityFilterChain</filter-name>
3	<filter-class>org.springframework.web.filter.DelegatingFilterProxy</filter-class>
4</filter>
5
6<filter-mapping>
7	<filter-name>springSecurityFilterChain</filter-name>
8	<url-pattern>/documentation/*</url-pattern>
9</filter-mapping>

用过Spring Security的人都会熟悉以上代码，一般教程上都会说明，使用Spring Security就需要在web.xml中指定以上代码。从这个配置中，可能会给我们造成一个错觉，以为DelegatingFilterProxy类就是springSecurity的入口，但其实这个类位于spring-web这个jar下面，说明这个类本身是和springSecurity无关。

使用Docker+Apache2+WebSVN搭建SVN服务器

Fri, 26 May 2017 00:00:00 +0000

1. 背景

虽然现在的SVN已经用的越来越少，很多人都切换到了Git上。但是以前的一些历史项目还是需要SVN支持的。之前的SVN服务器是直接搭建在一台Ubuntu服务器上的。当时一起搭建了WebSVN。也曾经研究过怎么搭建WebSVN，但是现在也不能够工作了，时间长久了也忘了怎么搭建了。所以想研究一下怎么使用Docker来完成一样的工作。

在Tomcat中使用ThreadLocal以及Session

Thu, 04 May 2017 00:00:00 +0000

最近运营同事在管理平台（生产环境）上碰到一个问题：登录之后会莫名其妙地变成未登录状态，被踢回登录页面。

管理平台使用的Spring MVC框架实现的后台接口，React实现的前台页面。之前引入React的时候已经做过前后端分离。但是当时考虑到技术栈的原因，没有对登录体系进行彻底改造，没有引入AccessToken来维护登录状态，依然保留了Java的Session机制。考虑到管理平台属于内部使用，访问量不大，因此直接在Nginx层使用iphash进行了Session粘滞，确保同一个用户的请求总是被同一个的后台Tomcat处理，这样就可以使用传统的session机制保持用户登录状态。

Java SSL握手记录分析

Fri, 28 Apr 2017 00:00:00 +0000

公司项目当中经常使用CXF库连接WebService服务，而且我们自己提供的服务也是基于CXF的SOAP服务，经常需要指导客户怎么连接我们的服务。CXF库整个体系架构比较庞大，相关的类、知识点都比较多。尤其是连接SSL双向认证服务的时候，经常碰到问题。

使用双向SSL认证的时候，在Spring中配置起来非常简单，但是一旦出错就比较难找问题。经过多次尝试，最后发现还是分析SSL握手记录比较靠谱，比较容易找出真正的问题所在。特此记录一下自己的一些心得，以作备忘并希望能够帮到其他人。

通过Zabbix监控业务数据（续）

Thu, 20 Apr 2017 00:00:00 +0000

昨天配置好报警条件之后，今天早上检查发现昨天晚上发出了报警。但是看上去像是误报。在凌晨2:44:02触发了警报，然后在2:44:32警报解除，持续时间30秒。如下两图：

从感觉上像是误报。

通过Zabbix监控业务数据

Wed, 19 Apr 2017 00:00:00 +0000

为了事后分析服务质量，我们的云认证系统将商户访问记录保存到了数据库中（MySQL）。在日志中我们记录了商户每次访问的返回结果，耗费时间等信息。通过这些信息我们可以分析发现服务什么时候性能比较低，什么时候处理效果比较差。

之前通过写脚本，每小时对这些信息进行一次统计，并根据情况（如错误比例过高等）发送邮件通知给相关人员。但是这存在两个问题：

响应不及时：因为一小时才统计一次，所以滞后效应太明显，经常问题已经发生很久报警才发送出来；
报警条件更新不方便：报警条件只能通过脚本编写人员实现，修改起来不方便。

鉴于此，一直想对这个报警体系进行改造，最后选择通过Zabbix实现这个功能。

在Linode节点上开启BBR算法

Mon, 17 Apr 2017 00:00:00 +0000

BBR是Google开源的TCP拥堵控制算法，与2016年9月开源。BBR的目的是要尽量跑满带宽, 并且尽量不要有排队的情况, 其使用效果并不比速锐差。

Linux kernel 4.9+ 已支持 tcp_bbr。我在Linode安装了4.10.10内核，可以开启BBR。但是Linode自带的4.9无法开启。

在VSCode中为Vue.js开发启用静态类型检查Flow

Tue, 11 Apr 2017 00:00:00 +0000

众所周知，Javascript是一种弱类型（或者称为动态类型）语言，即变量的类型是不确定的。例如，下面代码中的temp一开始是字符串，后来又变成了数字：

1temp = 'hello';
2temp = 5;

弱类型语言变量类型完全由当时的值决定，所以称为“弱类型”。这样设计有其好处，可以写出非常简洁的代码。但是在构建大型项目的时候，无法在编译期发现问题会导致很难发现问题，反而会为程序员带来非常大的负担。这实际上限制了JS项目的规模，无法开发过于复杂的项目。

Node.js 使用Redis发布订阅模式

Thu, 30 Mar 2017 00:00:00 +0000

1. 背景

最近在用Node.js做一个管理系统的时候碰到了一个场景：为了访问性能，系统在内存中（不是Redis）缓存了一些常用数据，例如系统菜单树之类的。但是什么时候刷新这些缓存就成了问题。当然在单服务器模式下也不是大问题，只要在更新数据的时候删除内存中的缓存数据即可。但是这一方法在分布式服务中就无效了：同时会有多个这种系统在跑，但是只有一台服务器接到了处理请求，其他服务器根本没有办法刷新内存中的数据。当然有人会说将缓存放到Redis中不就解决问题了？但是如果数据量稍大一些，而且访问频繁、更新却不频繁，放到Redis中每次访问都会对Redis带来不小的压力，显得很没有必要。这种情况下，自然就可以使用Redis的发布订阅机制来解决问题了：当数据更新之后，只要发布一个消息到Redis，所有服务器都可以收到消息，执行刷新缓存的操作了。

Docker for Mac磁盘性能低下的解决办法

Wed, 29 Mar 2017 00:00:00 +0000

最近备份恢复Gogs的时候，发现同样的配置参数在Mac上访问Gogs的用户首页特别慢，大概耗时8秒，而在Linux上面运行的时候不到1秒钟。后来就上网搜索，加上自己试验，最后找到了原因应该是Gogs镜像本身的问题（可能是采用了alpine这一内核，但是具体原因不详，有待进一步实验）。

这个过程中曾经怀疑是Docker运行MySQL过慢的原因，虽然最终发现不是，但是搜索过程中发现了Docker for Mac确实有性能问题，那就是对大量磁盘IO的操作性能会非常差，大概会差10倍。

Electron开发使用Vue Devtools

Wed, 29 Mar 2017 00:00:00 +0000

最近在用Electron + Vue.js 2.0写一个桌面工具。使用下来感觉Electron用起来还是挺爽的。之前为了开发跨平台的桌面应用，我曾经用过Python+wxPython，Swing，SWT等各种技术，但是都有这样那样的问题（例如打包比较麻烦、界面各平台不太一致等）。而Electron基于目前成熟的前端技术，通过内嵌的浏览器内核实现了统一的表现形式，这一点用于做跨平台开发真是太方便了。

在Ubuntu 14.04上安装Docker 17.03.0-ce

Tue, 28 Mar 2017 00:00:00 +0000

0. 概述

Docker在1.13.x版本之后更新了版本号规则，区分了社区版和企业版。这导致了安装方式有所变化。所以特意参考官方的帮助重新整理了一下安装步骤。

适应范围：Ubuntu 14.04。安装版本：17.03.0-ce（社区版）。

Node.js从入门到放弃（一）-基础知识

Mon, 27 Feb 2017 00:00:00 +0000

最近一周比较忙，一直忙着搭建开发平台。之前不就刚用Golang搭建了一个服务端开发平台。完成之后，就需要针对Golang开发的服务开发一个管理平台，用Golang也能做，但是感觉还是麻烦，最后决定使用Node.js。

这次搭建的平台倾向于使用比较新的一些Node.js特性，例如ES6、async/await解决回调地狱等。之前用过Node.js，但是属于浅尝辄止，这次准备充分了解一下。因此有了这些学习笔记。

安装Go语言调试工具dlv

Wed, 15 Feb 2017 00:00:00 +0000

Dlv，也成为Delve，是Go语言的源码调试工具。由derekparker开发，开源与Github。在Mac上配置Go语言开发环境的时候，经常碰到的问题就是Dlv调用总是不成功，无法启动应用，无法调试等等。大部分的问题都与Mac的安全机制有关。Mac上使用codesign对应用进行签名，没有签名的程序会受到一些限制，例如无法作为调试程序。

当然如果为了方便，你可以通过Homebrew安装Homebrew编译好的Dlv。下面描述的是如何从源码构建这一工具。Delve作者专门写了一篇文档（请看附录的链接），描述如何对Dlv进行自签名。方法是生成一个自签名的证书，然后从源码编译安装Dlv。

Hexo博客提交搜索引擎

Tue, 14 Feb 2017 00:00:00 +0000

新博客上线多天之后，通过百度和Google仍然搜索不到我写的内容。忽然意识到这应该是网站没有被搜索引擎索引。经过搜索，发现还真是这么回事。直接搜索：site:orchidflower.oschina.io和site:orchidflower.github.io，发现真的没有找到相关的记录。

经过上网查找原因，找到了一些资料，原来Hexo已经有这方面的解决方案了。

根据网上搜索到的资料，要解决这个问题总体上可以分为两步：

在搜索引擎注册网站；
提交链接信息或者站点地图给搜索引擎。

下面简单描述一下过程。

从一台没有外网连接的阿里云主机上访问微信API

Sun, 12 Feb 2017 00:00:00 +0000

1. 背景

公司的生产环境是部署在阿里云上的。Zabbix最初装在一台没有外网连接的ECS上，通过Nginx进行访问。但是后来发现如果需要报警，需要从Zabbix这台主机访问微信公众号服务器（qyapi.weixin.qq.com）。运维的兄弟最初选择了固定带宽的网络，但是考虑到费用问题，后期想切换到按量付费的网络，但是阿里云居然不支持这种切换（这里吐槽一下阿里的设计）。

由于该主机是按照包月包年方式购买的，退掉重新申请主机安装Zabbix显然不划算。在主机到期之前，必须想办法实现在没有外网的情况下访问微信服务器（考虑到费用问题，原先固定带宽已经被修改成了0M，也就没有费用了）。

在Mac上启用Docker的Bash Completion

Sun, 12 Feb 2017 00:00:00 +0000

1. 背景

在Ubuntu上使用Docker的时候，使用tab键自动完成docker命令感觉非常方便，例如：只需要输入image或者container ID的前几位就可以使用Tab键补齐整个命令行。但是在Mac上却没有办法实现相同的操作。

经过搜索终于找到了原因：原来是因为没有启用Bash completion功能导致的。而实际上Docker安装包内已经提供了针对Docker的Bash Completion脚本，只需要启用即可。

使用Hexo搭建个人博客

Tue, 24 Jan 2017 00:00:00 +0000

0. 什么是Hexo

Hexo 是高效的静态站点生成框架，它基于 Node.js。通过 Hexo 你可以轻松地使用 Markdown 编写文章，除了 Markdown 本身的语法之外，还可以使用 Hexo 提供的标签插件来快速的插入特定形式的内容。网上关于Hexo介绍的文章已经很多，这里不写一般的安装部署步骤，只写一些不常提到的地方。

关于

Sun, 22 Jan 2017 16:47:06 +0000

我 Orchidflower，常用马甲还有 Orchid，千面怪等。 1975 年 5 月出生，金牛座。山东青岛人，毕业于南开，现工作于上海。兴趣不广，偏好计

安个新家

Sun, 22 Jan 2017 00:00:00 +0000

一直找不到合适的博客供应商，之前用过CSDN，体验一直不好。最近在研究Node.js，所以发现了Hexo Hexo，感觉还是不错的，挺有兴趣尝

执子之手

在Jenkins Maven Plugin中指定不同的JDK版本

1. 问题

无损扩容Linux磁盘分区容量

1. 背景

奇怪现象：两个Consumer消费同一个分区（Partition）

1. 背景

Flex布局添加滚动条需要注意的规则

RSA证书格式

1. TL;DR

Jenkins工作空间页面崩溃问题解决

1. 问题

2. 解决

Vue进行条件编译发布

MySQL如何保存emoji字符

1. 问题

1.1 发现问题

MyBatis Plus中主键生成方式ASSIGN_ID的算法分析

Linux常用命令介绍 05 - unzip

1. 查看文件列表

2. 解压文件

3. 解压一个文件

4. 更新文件

如何在Ubuntu上静态编译Golang+GoCV程序

1. Golang环境准备

1.1 安装Golang

1.2 设置GOPATH

1.3 下载GoCV源码

删除启动台Launchpad上无效的图标

禁用CleanMyMacX HealthMonitor

使用MyBatis ResultHandler解决巨大结果集导出Excel引发的OOM

使用Python写一个Alfred Workflow

1. Alfred 和 Workflows 介绍

2. 开始写一个Workflows

Mac休眠模式调整

1. pmset及参数介绍

使用KeepAlived配置Nginx高可用

1. 背景

如何修改Ubuntu服务器上的DNS设置

1. Ubuntu 16.04 LTS

2.1 更新resolv.conf

在Mac上编译RedisDesktopManager（1）国际化处理

1. 概述

如何在Mac上编译vcmi（续）-cpack打包后异常退出

1. 现象

2. 分析

如何在Mac上编译vcmi（续）-解决无法播放MP3的问题

1. 问题

如何在Mac上编译vcmi

如何在Mac上编译fheroes2

使用HttpServletRequestWrapper解决无法多次获取request Body的问题

Linux常用命令介绍 04 - journalctl

1. 基础用法

1.1 查看所有日志

1.2 查看内核日志

Linux常用命令介绍 03 - tree

1. 安装&使用

2. 只列出目录

Linux常用命令介绍 02 - ssh

1. 防止掉线

Mac上面的文件比较功能

Linux常用命令介绍 01 - curl

iOS证书及推送相关概念

1.i OS开发中碰到的概念

1.1 开发者账号

迁移到SpringBoot 08 - 日志

迁移到SpringBoot 07 - Redis发布订阅机制

迁移到SpringBoot 06 - Swagger

SpringBoot中使用Jackson导致Long型数据精度丢失问题

Spring使用POI导出Excel内存溢出问题的解决（续）

Spring使用POI导出Excel内存溢出问题的解决

迁移到SpringBoot 05 - 事务管理

迁移到SpringBoot 04 - Redis

迁移到SpringBoot 03 - Servlet和Filter

迁移到SpringBoot 02 - 异常处理

迁移到SpringBoot 01 - 插件加载

迁移到SpringBoot 00 - 背景介绍

Apache HttpClient 使用（上）

1. 特性

Apache HttpClient 使用（下）

1. `Alfred` 和 `Workflows` 介绍

2. 开始写一个`Workflows`