随笔-198  评论-90  文章-8  trackbacks-0
  2020年4月20日
#!/bin/bash

for f in "$@"do
    if [ -f "$f" ]; then
        iconv -s -c -f UTF8 -t GBK "$f" > /tmp/$f.tmp
        mv /tmp/$f.tmp "$f"
    fi
done
posted @ 2020-04-20 10:03 一凡 阅读(30) | 评论 (0)编辑 收藏
  2020年2月29日
# -*- coding: utf-8 -*-
#
!/usr/bin/python

import re
import io
import sys

# obj = re.compile(r'(?P<ip>.*?)- - \[(?P<time>.*?)\] "(?P<request>.*?)" (?P<status>.*?) (?P<bytes>.*?) "(?P<referer>.*?)" "(?P<ua>.*?)"')
#
 example:xxxx"id":2640914,"orderId":144115188137125591xxxx"state":10xxxxx"
# 日志整行都需要匹配,需要用的用具体正则匹配,如(\d{7}),不需要的用(.*)匹配,总之所有需要或不需要部分都用()括起来
obj = re.compile(r'(.*"id":)(\d{7})(.*"orderId":)(\d{18})(.*"state":)(\d{2})(.*)')

def load_log(path):
# 读取文件
    with io.open(path, mode="r", encoding="utf-8") as f:
        for line in f:
            line = line.strip()
            parse(line)

def stdin():
# 读取管道输入
    for line in sys.stdin:
        parse(line)

def parse(line):
# 解析单行nginx日志
    try:
        result = obj.match(line)
        print(result.group(2,4,6))
    except:
        pass

if __name__ == '__main__':
    # load_log("/tmp/227.log")
    stdin()
posted @ 2020-02-29 02:10 一凡 阅读(29) | 评论 (0)编辑 收藏
  2019年12月26日
  1. 新增中间件cors
  2. func Cors() gin.HandlerFunc {
    return func(c *gin.Context) {
    method := c.Request.Method

    c.Header("Access-Control-Allow-Origin", "*") //必选
         c.Header("Access-Control-Allow-Headers", "*") //可选 如果request有header, 必选
         //c.Header("Access-Control-Allow-Credentials", "true") //可选
    //c.Header("Access-Control-Allow-Methods", "*") //可选
    //c.Header("Access-Control-Expose-Headers", "*") //可选

    //放行所有OPTIONS方法
    if method == "OPTIONS" {
    c.AbortWithStatus(http.StatusOK)
    }
    // 处理请求
    c.Next()
    }
    }
  3. 在router里增加cors,必须在group之前,全局设置
    r.Use(gin.Logger(), gin.Recovery(), cors.Cors())
  4. 测试代码,header设置不能多于cors设置
    <!DOCTYPE html>
    <html lang="en">
    <head>
    <meta charset="UTF-8">
    <title>Title</title>
    </head>
    <link type="test/css" href="css/style.css" rel="stylesheet">
    <script type="text/javascript" src="https://code.jquery.com/jquery-3.2.1.min.js"></script>
    <script type="text/javascript">
    $(function(){
    $("#cors").click(
    function(){
    $.ajax({
    headers:{
    "Content-Type":"application/json;charset=UTF-8",
    "Access":"adsad",
    "Access-Token":"eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJ1c2VybmFtZSI6InRlc3QiLCJwYXNzd29yZCI6InRlc3QxMjM0NTYiLCJleHAiOjE1NzczMzY3MTIsImlzcyI6Imdpbi1ibG9nIn0.wMlQXqZO2V0LR-FIgDh45LWI0OYMYi6an_NvRmF0Nug"
    },
    url:"http://127.0.0.1:8000/api/v1/articles",
    success:function(data){
    console.log("start");
    console.log(data);
    }
    })
    });
    });
    </script>
    <body>
    <input type="button" id="cors" value="core跨域测试">
    </body>
    </html>
  5. 请求的headers数量、名称与cors里的设置需要严格对应,不然报错如下
    Access to XMLHttpRequest at 'http://127.0.0.1:8000/api/v1/articles' from origin 'http://localhost:9999' has been blocked by CORS policy: Request header field access is not allowed by Access-Control-Allow-Headers in preflight response.
posted @ 2019-12-26 11:17 一凡 阅读(93) | 评论 (0)编辑 收藏
  2019年12月23日
1、在main函数中增加全局配置,其中@name就是你确定的鉴权参数名,我的是token,    @in header 说明参数放在header,你的鉴权代码需要从header中获取

// @title gin-blog API
// @version 0.0.1
// @description This is a gin blog example
// @securityDefinitions.apikey ApiKeyAuth
// @in header
// @name token
// @BasePath /

2、在具体的handler里添加如下注释,此处的ApiKeyAuth和main中的apike对应,切记不要修改
// @Security ApiKeyAuth

3、swagger页面如下:


4、添加token后,后续所有有鉴权接口的header里自动携带token
posted @ 2019-12-23 16:08 一凡 阅读(218) | 评论 (0)编辑 收藏
  2019年9月20日
 处理1W条复杂json数据性能对比

  1. golang

    ./go_extract_json  0.95s user 0.12s system 99% cpu 1.081 total    
  2. shell
    bash segment.sh  0.64s user 0.07s system 101% cpu 0.695 total
  3. perl
    perl extract.pl  39.57s user 0.54s system 98% cpu 40.579 total
posted @ 2019-09-20 18:13 一凡 阅读(24) | 评论 (0)编辑 收藏
  2019年4月3日
  1.  Invalid bound statement (not found)
    在接口名称及方法名称对应OK的情况下,在application.properties中添加:
mybatis.mapperLocations=classpath:mapper/*Mapper.xml   
mybatis.typeAliasesPackage=com.willpower.entity
posted @ 2019-04-03 21:41 一凡 阅读(28) | 评论 (0)编辑 收藏
  2017年5月8日
推荐:
https://github.com/wming3/.vimToIDE
posted @ 2017-05-08 16:33 一凡 阅读(125) | 评论 (0)编辑 收藏
  2017年3月2日

http://www.iteye.com/news/32170

Guice OKHttp Retrofit 
posted @ 2017-03-02 17:36 一凡 阅读(66) | 评论 (0)编辑 收藏
  2017年2月10日
http://www.iteye.com/news/32119
posted @ 2017-02-10 18:57 一凡 阅读(41) | 评论 (0)编辑 收藏
仅列出标题  下一页