BlogJava-eagle-随笔分类-java

jenkins 自动化发布实践整理

月下孤城 — Thu, 08 Nov 2018 03:53:00 GMT

最近实践Jenkins的自动化发布，即实现指定项目的编译-打包-上传-发布的持续集成发版过程。中途遇到不少问题，整理如下以备后忘。

1.Jenkins安装

Jenkins是开源软件，直接到官网下载最新版本安装。具体过程不再累述，网上资料很多。本文安装版本jenkins-2.138.2。

2.Jenkins全局设置

打开Jenkins-全局工具配置配置编译打包的工具，我使用的是maven，按具体环境配置好相应信息。若项目工程使用其他工具，如gradle在对应项配置信息即可。

3.publish over ssh
Jenkins - 插件管理可选插件tab页下安装publish over ssh插件。用于Jenkins服务器ssh传输文件到Linux服务器。
安装好publish over ssh插件后，到Jenkins - 配置中 publish over ssh项设置相关上传Linux服务器信息。

Passphrase - 默认上传服务器密码
Path to key - Jenkins服务器ssh key目录
key - Jenkins服务器ssh key内容，一般为~/.ssh目录下id_rsa.pub内容
SSH Servers - 上传服务器的配置

Jenkins ssh key的生成网上有很多资料，不再过多介绍。我是使用的Passphrase, 登录验证key或者passphrase方式可以二选一，可根据具体情况选择。

ssh server设置：
统一配置发布文件的Linux服务器，如下图。

其中 remote directory 表示发布文件到服务器的默认目录。若为空默认为当前登录用户目录。

4.项目发布
本文以svn的订单order项目为例，通过Jenkins工具，经过编译-打包-上传-发布过程，动态的将java jar发布到两台服务器。
4.1 新建任务
Jenkins - 新建任务，创建order发布的一个任务。由于项目是基于maven的，所以选择'构建一个maven项目'进入配置页面。

配置svn代码库信息：

build配置：对应项目输入项目构建命令。

post steps：配置发布服务器的信息。如下图。

由于order订单服务是集群部署，分别设置了2台 ssh server。
source files 是指上传到服务器的发布文件。Jenkins默认编译后文件在workspace目录下，这里输入target/{发布jar文件}. 上传到发布服务器后，不需要target目录，所以 remove prefix中填target/。
Remote directory可以为空，由于我们在第3步中已经设置了全局默认ssh server的remote directory ，所以这里可以不填，如这里设置将覆盖之前的全局配置目录。
exec command是文件上传到发布服务器后，需要执行的shell脚本指令，用于发布order jar包的启动备份命令。图中app-deploy.sh为应用jar文件的启动备份shell脚本文件，需放到发布服务器指定目录下。其中BUILD_ID=DONTKILLME是为了kill 老的运行jar时避免当前执行进程不被误杀。

app-deploy.sh文件：

#!/bin/sh
## java env
## service name
SERVICE_NAME=$1
SERVICE_DIR=/usr/service/
JAR_NAME=$SERVICE_NAME\.jar
PID=$SERVICE_NAME\.pid

#function start
start(){
   cd $SERVICE_DIR
   source /etc/profile
   ## nohup java -Xms256m -Xmx512m -jar $JAR_NAME >log/$SERVICE_NAME.out 2>&1 &
   nohup java -jar -Xms256m -Xmx256m $JAR_NAME >/dev/null 2>&1 &
   echo $! > $SERVICE_DIR/$PID
   echo "#### start $SERVICE_NAME"
}

# function stop
stop(){
        cd $SERVICE_DIR
        if [ -f "$SERVICE_DIR/$PID" ]; then
                kill `cat $SERVICE_DIR/$PID`
                rm -rf $SERVICE_DIR/$PID
        fi
        echo "#### stop $SERVICE_NAME"

    sleep 3

    PROCESS=`ps -ef|grep $JAR_NAME |grep -v grep|grep -v PPID|awk '{ print $2}'`
    for i in $PROCESS
    do
      echo "Kill the $SERVICE_NAME process [ $i ]"
      kill -9 $i
    done
}

# function clean
clean(){
        echo "---start do do clean phase."
    cd $SERVICE_DIR
        if [ ! -d "lastDeploy" ]; then
           mkdir lastDeploy
        fi
        if [ -f "$JAR_NAME" ]; then
           echo "backup $JAR_NAME"
           mv $JAR_NAME lastDeploy/$JAR_NAME\_`date "+%Y%m%d%H%M%S"`
        fi

        if [ -d "tmp" ]; then
       mv -f tmp/$JAR_NAME ./
    fi
}

case "$2" in

    start)
        start
        ;;

    stop)
        stop
        ;;

    restart)
        stop
        sleep 2
        start
        echo "#### restart $SERVICE_NAME"
        ;;

    clean)
        stop
            sleep 2
        clean
        echo "#### clean $SERVICE_NAME"
        ;;

    deploy)
        stop
        clean
        start
        echo "#### deploy $SERVICE_NAME"
        ;;

esac
exit 0

以上脚本发布逻辑如下：
1.先stop老的jar应用程序。先从记录的pid文件中找kill的进程，找不到通过ps指令查找当前运行jar文件，再kill -9 杀掉。
2.将老的jar程序移动到lastDeploy目录备份，并加上时间戳后缀。将待发布的新jar文件从tmp目录移动到发布目录。
3.启动新的jar程序文件。

月下孤城 2018-11-08 11:53 发表评论

java加密算法实现（RSA,AES,DES,Hmac,MD5,Base64）

月下孤城 — Sun, 28 May 2017 09:16:00 GMT

摘要: KeyAlgorithmEnuKeyAlgorithmEnuCode highlighting produced by Actipro CodeHighlighter (freeware)http://www.CodeHighlighter.com/--> 1 /** 2 * 系统支持的加密算法 3 */... 阅读全文

月下孤城 2017-05-28 17:16 发表评论

java可执行jar读取外部属性文件的方法

月下孤城 — Fri, 18 Mar 2016 02:10:00 GMT

有一个可执行的exl2xsd.jar文件，在exl2xsd.jar中需要读取配置文件的config.properties信息。如下截图。

读取jar包外的方法逻辑:通过获取类文件所在code source的路径来定位jar包路径。然后由"jar包路径+配置文件名"的方式取得对应属性文件。

1 /**
2      * 取类对应source源目录路径
3      * @param clazz
4      * @author qiang.dai
5      * @return
6      */
7     public static String getCodeSourcePath(Class clazz) {
8         URL url = clazz.getProtectionDomain().getCodeSource().getLocation();
9         String path = url.getPath();
10         try {
11             if (path.toUpperCase().endsWith(".JAR")) {
12                 int index = path.lastIndexOf("/");
13                 path = path.substring(0, index);
14             }
15             return java.net.URLDecoder.decode(path, "UTF-8");
16         } catch (UnsupportedEncodingException e) {
17             e.printStackTrace();
18             return "";
19         }
20     }

读取配置文件:

1 public ConfigManager() {
2         try {
3             String classPath = URLUtil.getCodeSourcePath(ConfigManager.class);
4             Properties prop = new Properties();
5 //            System.out.println("path="+classPath+File.separator+CONFIG_FILE_NAME);
6             prop.load(new FileReader(new File(new File(classPath),CONFIG_FILE_NAME)));
7             initConfigs(prop);
8         } catch (Exception e) {
9             System.out.println(String.format("******初始化配置文件失败,请检查文件[%s]在当前目录下存在******", CONFIG_FILE_NAME));
10             e.printStackTrace();
11             throw new RuntimeException(e);
12         }
13     }

月下孤城 2016-03-18 10:10 发表评论

poi解析excel列子

月下孤城 — Fri, 18 Mar 2016 01:51:00 GMT

工作中有时会用java程序分析excel文件内容。本文介绍使用poi解析excel 2007及以上版本的方法，以备参考。

1 /**
2      * poi解析excel    sample
3      * 针对2007及以上版本使用XSSF解析
4      * @throws EncryptedDocumentException
5      * @throws InvalidFormatException
6      * @throws IOException
7      */
8     public void parseExcel() throws EncryptedDocumentException, InvalidFormatException, IOException{
9         InputStream is = new FileInputStream("e:\\excel.xlsx");
10         Workbook workbook = WorkbookFactory.create(is);
11         Sheet sheet = null;
12         for (int i = 0; i < workbook.getNumberOfSheets(); i++) {// 获取每个Sheet表
13             sheet = workbook.getSheetAt(i);
14             String sheetName = sheet.getSheetName();
15             if(workbook.isSheetHidden(i)){
16                 //判断sheet页是否被隐藏
17                 System.out.println("sheet="+sheetName+", is hidden.");
18                 continue;
19             }
20             for (int j = 0; j < sheet.getPhysicalNumberOfRows(); j++) {// 获取每行
21                 if(j==0)    //第一行title，不处理
22                     continue;
23                 Row row = sheet.getRow(j);
24                 if(row == null)
25                     continue;
26                 //处理每行数据
27                 try {
28                     if(row.getZeroHeight()){
29                         //行是否被隐藏
30                         System.out.println("---Sheet表["+sheetName+"],第" + j + "行被隐藏，不处理---");
31                         continue;
32                     }
33                     int columns = row.getPhysicalNumberOfCells();
34                     for(int c=0;c35                         Cell cell = row.getCell(c);
36                         //TODO: busyness process
37                     }
38                 } catch (Exception e) {
39                     System.out.println("---Sheet表["+sheetName+"],第" + j + "行处理出错.---");
40                     e.printStackTrace();
41                     throw new RuntimeException(e);
42                 }
43
44                 System.out.println("---Sheet表["+sheetName+"],第" + j + "行处理完毕---");
45             }
46         }
47     }

月下孤城 2016-03-18 09:51 发表评论