InteliJ IDEA插件(Markdown Image Paste)正式发布

不知道各位有没有使用 Github Pages 来搭建博客的习惯,我之前也喜欢在第三方平台上面书写博客,但是感觉自由度不高,后来使用 Jekyll 搭建一个自己的博客。 前不久买了一个域名,但是现在国内要使用域名都需要备案,如果你的七牛云想 … 继续阅读 InteliJ IDEA插件(Markdown Image Paste)正式发布

最新 Zookeeper + Flume + Kafka 简易整合教程

在大数据领域有很多耳熟能详的框架,今天要介绍的就是 zookeeper、flume、kafka。因为平时是做数据接入的,所以对这些实时的数据处理系统不是很熟悉。通过官网的简要介绍,搭建了一套简要的平台,主要实现的功能是消费 kafka 中从 … 继续阅读 最新 Zookeeper + Flume + Kafka 简易整合教程

关于项目架构与包结构的一些思考

到目前为止做过了很多项目,也写了很多代码,但是对项目的分包一直都是脚踩西瓜皮,滑到哪是哪。网上也有一些总结,但都是经验之谈,业界也没有一个标准供我们参考,在此我也来总结一下自己的经验,对自己来说也有一个划分的标准。 项目分包的意义 科班出生 … 继续阅读 关于项目架构与包结构的一些思考

使用 fdb-sql-parser 替换 SQL 语句中的表名

因为项目中要做跨数据源的数据分析功能,所以使用Presto这个开源框架。但是使用Presto的时候需要指定当前表所在的数据库类型和数据库名,所以需要对SQL语句中的表名进行捕获和替换。 探索过程 首先使用的是HiveParse这个工具,修改 … 继续阅读 使用 fdb-sql-parser 替换 SQL 语句中的表名