个人空间 - OSCHINA - 中文开源技术交流社区

专长领域： 其它领域, 服务器端开发, CTO/CEO/CXO

开发平台： Java EE, Java SE, Python, Linux/Unix

连击天

fork: star:

加载中

缘起：公司08年以前的老项目，跟着迭代了一个版本，架构太老自己干着也受气。于是提议升级为SpringBoot 这种新的能好受一点。但是老接口太多，老接口是通过自定义实现的Servlet，按照扫描Bea...

swagger springboot bean debug servlet springapplicationcontext swaggerdoc restapi

工作日志

2020/09/10 11:15

Presto 连接器 hive-hadoop2 Hive 支持从 1.2.2 升级到2.3.6 Presto Plugins 中默认的 hive-hadoop2 组件版本为 1.2.2，而我的hive MetaStore 已经升级到 2.3.6，因此需要对 hive plugin 做一...

hive presto plugins class common-storage-api-prestodb apache 操作系统 jdbc accumulo jarhive

Presto

2020/04/23 14:56

1.1K

Hive从1.2.2升级到2.3.6 很久没有关注Hive了，竟然最新版本都 3.x，看看自己笔记本上的还是1.2.2。准备到2.x的最新版本。首先在apache网站下载 hive-2.3.6 解压，把原有的 hive 配置文件 co...

hive mysql scripts metadata home apache 操作系统其他 upgrade metastore hivesql script 7hadoop

Hadoop

2020/04/07 21:27

3.6K

Quartz 是常用的Java多线程调度框架。我们在使用 Quartz 配置任务时，在quartz.properties 会配置如下内容： org.quartz.jobStore.dataSource:myQuartzDB org.quartz.jobStore.isClustered ...

quartz class java reviewquartz provider sharddsconnectionprovider properties

Java

2020/04/07 15:44

2.6K

写文档一直是程序员非常讨厌的工作, 甚至和改需求一样令人厌烦. 在程序员眼里比写程序还难, 即便强制执行下来文档质量也很难让人满意.

word pandoc html docbook markdown maven 文档工具程序员 plugins blog brew github epub

管理工具

2015/05/17 16:42

2.1K

Storm 提供很多有用的数据分组实现，但是有时又不完全适应我们，Storm支持自定义分组实现，那么如何编写一个自己的实现。？本篇Blog将为读者从源发分析Storm的数据分组实现，并和Hadoop Part...

storm reduce hadoop tasks aslist values jackson task customstreamgrouping partitioner numreducetasks

Storm

2014/04/17 09:45

2.2K

复杂的消息流处理往往需要很多步骤，从而也就需要经过很多Bolts。经过多个Blot之间Storm会用不同的方式分组数据，下面的文章分别解释不同的分组策略和重点介绍的fieldsGrouping。...

bolt storm tuple jackson twitter-storm twitterstorm blot fieldsgrouping field task grouping spout

Storm

2014/04/14 09:21

6.8K

本篇Blog是一个简单的Storm入门例子，提供一个简答Storm运行例子，目的让读者明白Storm是怎样的运行机制，适合做什么。

storm bolt zookeeper hadoop jackson 大数据 twitterstorm distributed debug blog defaultstringbolt

Storm

2014/04/13 13:08

2.8K

##开始 Avro是Apache的Hadoop家族的项目之一。具有性能高、基本代码少和产出数据量精简等特点。不过这是他们宣传广告，我最近也分别研究了Avro和Protobuf。基本的测试代码，不吐不快。 ##安装...

avro python java json bean https hadoop maven protobuf apache docs server spec responder jetty next

RPC

2013/08/07 20:48

1.3W

前面两篇介绍了Pig的工作以及简单的程序逻辑，从这篇开始，不再只是统计词频这样的例子了。我会相对的举出一些特殊场景加以说明。需要说的是我也是一个Pig初学者，之前学习了一些Hadoop，在...

reduce 文件系统 hbase hadoop dump store group 编程语言 python hdfs 程序员数据处理

Pig

2013/04/21 22:33

8.5K

没有更多内容

加载失败，请刷新页面

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

公众号

视频号

问题反馈