语源科技BlogJava-java学习

docker 笔记

杨军威 — Wed, 22 Sep 2021 09:02:00 GMT

下载的docker镜像默认存储路径是/var/lib/docker .具体的镜像文件就在containers文件夹中

docker save -o d:/docker/zen.tar easysoft/zentao:15.5

docker run -d -p 80:80 \

-e ADMINER_USER="admin" -e ADMINER_PASSWD="qqzj126" -e MYSQL_ROOT_PASSWORD=qqzj126 \

-e BIND_ADDRESS="false" \

-v /opt/data/zbox/:/opt/zbox/ \

-v /opt/mysqldata:/var/lib/mysql \

--name zentao-server \

easysoft/zentao:15.5

docker logs -f

杨军威 2021-09-22 17:02 发表评论

后台运行jar包并输出日志

杨军威 — Tue, 01 Jun 2021 05:56:00 GMT

运行命令（注意路径）

java -jar /web/share-book.jar > /web/log.txt &
该命令的意思是：执行share-book.jar这个文件，并且输出到log.txt文件，&表示后台运行

解决更新项目带来的频繁重启操作，创建2个脚本

start.sh

#! /bin/bash
#注意：必须有&让其后台执行，否则没有pid生成 jar包路径为绝对路径
java -jar /web/share-book.jar > /web/log.txt &

# 将jar包启动对应的pid写入文件中，为停止时提供pid
echo $! > /web/pid.txt
stop.sh

#! /bin/bash
PID=$(cat /web/pid.txt)
kill -9 $PID

启动项目：./start.sh

停止项目：./stop.sh

杨军威 2021-06-01 13:56 发表评论

HADOOP_HOME and hadoop.home.dir are unset

杨军威 — Mon, 19 Apr 2021 01:45:00 GMT

一.问题描述：windows本地调试Hadoop程序时报错
错误信息：

其原因是需要在windows本地搭建Hadoop环境，下载winutils文件，并将hadoop-2.8.4包内的bin文件替换，将下载文件中hadoop.dll放到C：\Windows\System32下
二.解决过程如下：
1.下载hadoop，去官网下载对应的hadoop版本，我在linux集群搭建的是hadoop-2.8.4，因此将hadoop-2.8.4下载到windows本地

https://www.jianshu.com/p/a65a95108620

杨军威 2021-04-19 09:45 发表评论

从git仓库中删除.idea文件夹

杨军威 — Thu, 14 Jan 2021 07:15:00 GMT

如果不配置.gitignore的文件，带push代码的时候就会把一写不必要的文件push到远程仓库，如.idea文件。如果不小心出现此文件在远程仓库可以通过一下步骤delete此文件：

1.配置.gitignore文件(新建/编辑）

echo '.idea' >> .gitignore

2.将.gitignore文件上传到远程仓库

git pull git add .gitignore git commit -m 'edit .gitignore' git push origin master

3.删除git的.idea文件

git rm --cached -r .idea

4.同步到远程仓库

git commit -m 'delete .idea' git push origin master

完成之后就可以发现git仓库中的.idea文件已经被删除，而且之后push代码也不会再把.idea文件上传。

PS：我在使用PyCharm编写python代码，一般是通过new -> .ignore file -> .gitignore file 自动生成.gitignore文件。
下面是我自己比较常用的.gitignore文件简短配置：

.project .settings/ .prefs .pydevproject .idea/ .idea .DS_Store .cache *.pyc *.html *.xlm

杨军威 2021-01-14 15:15 发表评论

GC overhead limit exceeded和java heap space

杨军威 — Tue, 01 Dec 2020 02:19:00 GMT

1、java heap space 一次申请太大的内存空间
2、GC overhead limit exceeded 创建太多的对象，gc收集不完

杨军威 2020-12-01 10:19 发表评论

缓存一致性和缓存雪崩

杨军威 — Thu, 19 Nov 2020 06:12:00 GMT

摘要: 阅读全文

杨军威 2020-11-19 14:12 发表评论

linux Tomcat 开机启动配置

杨军威 — Tue, 17 Nov 2020 02:40:00 GMT

1、 vim /etc/rc.d/rc.local

2、添加内容

export JAVA_HOME=/usr/java/jdk1.8.0_111

/app/tomcat/bin/startup.sh start

3、

chmod 777 /etc/rc.d/rc.local

杨军威 2020-11-17 10:40 发表评论

java synchronized 锁对象

杨军威 — Fri, 30 Oct 2020 08:37:00 GMT

/**

* synchronized 放在普通方法上，内置锁就是当前类的实例

* @return

public synchronized int getNext() {

return value ++;

}

/**

* 修饰静态方法，内置锁是当前的Class字节码对象

* Sequence.class

* @return

public static synchronized int getPrevious() {

// return value --;

return 0;

}

杨军威 2020-10-30 16:37 发表评论

canal简单安装使用

杨军威 — Mon, 31 Aug 2020 02:55:00 GMT

1、数据库配置

首先使用canal需要修改数据库配置

[mysqld] 
log-bin=mysql-bin # 开启
 binlog binlog-format=ROW # 选择 ROW 模式 
server_id=1 # 配置 MySQL replaction 需要定义，不要和 canal 的 slaveId 重复

创建canal数据库用户

CREATE USER canal IDENTIFIED BY 'canal';  
 GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
 FLUSH PRIVILEGES;

2、安装canal

下载：https://github.com/alibaba/canal/releases

解压（修改版本号）：tar zxvf canal.deployer-1.1.4.tar.gz -C ./canal

配置开放服务器端口：11110、11111、11112

修改canal配置文件（这里设置了两个instance，即两个数据库）：

vi canal/conf/canal.properties 
canal.destinations = example1,example2

配置instance：

cp -R canal/conf/example conf/example1
 mv conf/example conf/example2

第一个数据库配置

vi canal/conf/example1/instance.properties
 canal.instance.master.address=32.1.2.140:3306

第二个数据库配置

vi canal/conf/example2/instance.properties
 canal.instance.master.address=32.1.2.140:3307

#如果需要新增一个instance，只需要修改canal.properties文件，并新增一个instance配置即可，无需重启canal。

运行：

sh canal/bin/startup.sh # 查看日志
 cat canal/logs/canal/canal

3、Java使用样例

引入pom依赖，需要与安装的canal版本一致

              com.alibaba.otter         canal.client         1.1.4

示例代码（异步打印两个数据库的修改内容）：

package cn.spicybar.dblog;  import com.alibaba.otter.canal.client.CanalConnector; import com.alibaba.otter.canal.client.CanalConnectors; import com.alibaba.otter.canal.protocol.CanalEntry.Entry; import com.alibaba.otter.canal.protocol.CanalEntry.EntryType; import com.alibaba.otter.canal.protocol.CanalEntry.RowChange; import com.alibaba.otter.canal.protocol.Message;  import java.net.InetSocketAddress; import java.util.List;  public class CanalClient {      public static void main(String[] args) {         new Thread(() -> initConnector("example1")).start();         new Thread(() -> initConnector("example2")).start();     }      private static void initConnector(String destination) {         CanalConnector connector = CanalConnectors.newSingleConnector(new InetSocketAddress("32.1.0.237", 11111), destination, "", "");         try {             connector.connect();             connector.subscribe(".*\\..*");             connector.rollback();             while (true) {                 Message message = connector.getWithoutAck(1000);                 if (message.getId() != -1 && message.getEntries().size() > 0) {                     printEntry(message.getEntries());                 }                 connector.ack(message.getId());             }         } finally {             connector.disconnect();         }     }      private static void printEntry(List entries) {         for (Entry entry : entries) {             if (entry.getEntryType() == EntryType.TRANSACTIONBEGIN || entry.getEntryType() == EntryType.TRANSACTIONEND) {                 continue;             }             try {                 RowChange rowChange = RowChange.parseFrom(entry.getStoreValue());                 System.out.println(rowChange.getSql());             } catch (Exception e) {                 throw new RuntimeException("ERROR ## parser error, data:" + entry.toString(), e);             }         }     }

杨军威 2020-08-31 10:55 发表评论

java 二分法查询数据

杨军威 — Fri, 07 Aug 2020 03:00:00 GMT

public int binarySearch(long value) {
   int middle = 0;
   int low = 0;
   int pow = arr.length;
   
   while(true) {
      middle = (pow + low) / 2;
      if(arr[middle] == value) {
         return middle;
 } else if(low > pow) {
         return -1;
 } else {
         if(arr[middle] > value) {
            pow = middle - 1;
 } else {
            low = middle + 1;
 }
      }
   }
}

杨军威 2020-08-07 11:00 发表评论