Airflow 在 python operator 下如何使用execution_date变量呢？不复杂，但是要跳出宏变量的圈，不要老想着用下面这种宏实现就行了 thedate = '{{(execution_date - macros.timedelta(days=1...

在用 nginx 配置 superset 反向代理，并且使用 map 通过 cookie 分流的时候，遇到十分诡异的问题，访问主页的时候总是被重定向到 upstream 同名的域名 upstream release { server 127.0.0.1:...

最近用 sort.Slice 方法对 slice 做排序功能的时候遇到了一个小坑 先看一段代码 package main import ( "fmt" "sort" ) func main() { people := []struct { Name string Age int }{ {"Alice...

最近在用 spark 通过 jdbc 写入 clickhouse 的时候，遇到一些坑，这里分享下，造福人民群众。 一个 WARN WARN JdbcUtils: Requested isolation level 1, but transactions are unsupported 这...

在使用 Go 的 Gin Web 框架的时候，发现一个有趣的问题，curl 一个 router 是正常的，但是加上 -I 参数就 404 了，就像下面这样 package main import "github.com/gin-gonic/gin" func main...

现在很多团队都在使用 jumpserver（http://www.jumpserver.org/ ）作为跳板机，管理服务器权限，一些对安全要求比较高的团队还会加上 Google authenticator （Google 身份验证器）。 但是安全...

在使用其他语言的打印日志的时候，经常能看到打印日志时带上文件地址和代码行数，对于调试和查找问题非常方便，但是 php 日志库里则很少见到这个功能，但这个功能还是可以实现的。 关键点就是...

go 这种强类型语言，在 decode json 的时候，一般需要定义一套数据结构用于映射，常用的就是 struct，在没有发现这个工具以前，我都是手写，遇到一些比较大的 json 时候，第一写起来比较恶心...

之前同事问了我一个有趣的问题，说为什么这个 json 字符串从缓存里读出来可以解析，但是作为一个 php 变量却解析错误呢？ 先看一个我已经简化了的例子 $str = "\"; $j = json_encode($str); ...

先看常用的校验请求合法性的一个方式 function createToken($params) { $secretKey = 'secretKey'; ksort($params); $query = http_build_query($params); $token = md5($query . $secretKey...

现在项目中大多都会使用MQ（消息队列）用来解耦和提升服务稳定性，然后都会面临一个问题，就是消息积压，解决这个问题除了提升处理消息的速度以外，另外就是多开些消费者进程，并发的消费数据...

如果有仔细看过 swoole task 的文档的话，应该都会注意到这句话 task 操作的次数必须小于onTask处理速度，如果投递容量超过处理能力，task会塞满缓存区，导致worker进程发生阻塞。worker进程...

Golang 使用 hprose 调用 php 接口，各种类型不确定，用了好多interface，然后发现了 json.Marshal 在处理map类型的时候，key 不能是 interface，否则就会报错 package main import ( "encod...

在使用 json 格式存储配置的时候，总是需要在管理后台写一堆代码，去校验参数是否合法，防止用户乱写。 最近发现了一个超级好用的工具，可以把开发人员从这个繁琐的工作中解脱出来。 那就是 ...

上线了一个基于 swoole http server 的服务以后，发现这个服务的请求耗时监控毛刺十分严重，接口耗时波动比较大，经过一段时间的分析，发现这个服务 response 包十分大，有些 response 包高达...