大数据处理技术研究、使用 - OSCHINA - 中文开源技术交流社区

cloud-coder

热衷于大数据处理技术研究、使用<br> 关注中间件技术

500

经验值

开源豆

256

粉丝

关注

关注私信

专长领域： WEB开发, 服务器端开发, 软件开发管理

开发平台： Java EE, Java SE, PHP, Python, Linux/Unix

连击天

fork: star:

加载中

Zero-copy概念 wiki上关于zero-copy的概念定义 "Zero-copy" describes computer operations in which the CPU does not perform the task of copying data from one memory area to another...

zero wiki netty 网络应用 memory copy bytebuf bytebuffer zerocopy filechannel fileregion

Nio & 多线程

2016/04/11 16:58

4.4K

java 的zero copy多在网络应用程序中使用。Java的libaries在linux和unix中支持zero copy，关键的api是java.nio.channel.FileChannel的transferTo()，transferFrom()方法。我们可以用这两个方...

data application java linux 网络应用 server cache https client zero blog copy unix .net

java

2014/08/11 11:06

1.4W

acid（数据库事务正确执行的四个基本要素的缩写），CAP定理指定一个分布式系统只能同时实现一致性、可用性和分区容忍性（或分区容错性）中的两个。在一系列的研究结果里发现，在较大型的分布...

分布式系统数据库系统其他 acid transaction transactionprocessing consistent

nosql/缓存/存储

2014/06/30 10:02

1 Flink基石 Flink之所以能这么流行，离不开它最重要的四个基石：Checkpoint、State、Time、Window。 1.1 Checkpoint Checkpoint机制，这是Flink最重要的一个特性。Flink基于Chandy-Lamport算...

flink rocksdb download hdfs timer runtime level spark buffer apacheflink 数据处理 flink1 state

开源

2019/02/12 11:52

347

背景　 Flink 是一款新的大数据处理引擎，目标是统一不同来源的数据处理。这个目标看起来和 Spark 和类似。这两套系统都在尝试建立一个统一的平台可以运行批量，流式，交互式，图处理，机器学...

spark flink dataset tungsten scala java 数据处理 storm https memory 编程语言 r语言

开源

2019/02/12 11:34

4.3K

概述在如今数据爆炸的时代，企业的数据量与日俱增，大数据产品层出不穷。出现了很多热门的开源社区，其中著名的有 Hadoop、Storm，以及后来的 Spark，他们都有着各自专注的应用场景。Spark...

计算引擎 flink spark 大数据 hadoop mapreduce oozie reduce machinelearning 开源社区 storm

开源

2019/02/12 11:15

742

RPC 先简单介绍下RPC，它是Remote Procedure Call(远程过程调用)的简称。一般基于RPC协议所设计的接口，是基于网络采用客户端/服务端的模式完成调用接口的。优点简单并且易于理解（面向开发...

graphql schema json rest 前后端分离远程过程调用 payload client overload easy server

tools

2018/10/22 10:07

884

什么是GraphQL 介绍GraphQL是什么的文章网上一搜一大把，篇幅有长有短，但是从最核心上讲，它是一种查询语言，再进一步说，是一种API查询语言。这里可能有的人就会说，什么？API还能查？API...

graphql type schema articles crud query context resolver 消息推送 note scalar prisma ios

tools

2018/10/22 10:03

236

1.墨菲定律如果有两种或两种以上的方式去做某件事情，而其中一种选择方式将导致灾难，则必定有人会做出这种选择。 2.波克定理只有在争辩中，才可能诞生最好的主意和最好的决定。 3.奥格尔维...

其他

工作日志

2018/07/18 10:16

268

Machine Learning from Start to Finish with Scikit-Learn

mrs data miss sample theresultisatableofnumbersthatlooksscarytohumans

python

2017/06/29 14:30

248

类加载器与类全名才能确立其在JVM中的唯一性

类加载器 JVM

flume

2017/06/25 21:46

756

Kafka Producer 发送消息源码阅读

kafka client server linger gzip requests type memory partition lz4 snappy recordbatch sender none

flume

2017/06/08 17:09

4.6K

分析JVM致命错误日志hs_err_pid.log

crash java 虚拟机 util code cookie apache v 垃圾收集器 home class monitor reference jdk

hadoop相关

2017/05/12 16:21

454

hdfs federation 配置及原理

hdfs 文件系统 core-client-namenode home hadoop projects mapreduce linux apache hbase

flume

2017/04/17 11:44

1.6W

Scala：Enumeration scala的枚举的声明，与Java中声明有很大区别，Scala的枚举值有些特殊，它的关键是内部有一个Value类，所谓的枚举值都是通过它产生的。如果我们不做任何约定的话，枚举值...

scala blue blog black java .net value bdmh csdn http purple valred enumerationscala enumeration

scala

2017/03/10 16:55

333

Dynamic 从Scala 2.10 开始，增加了Dynamic类型，所有直接或间接的继承自 Dynamic 的类，都可以实现。 Dynamic 继承自 Any，它的源代码中什么都没有，只有一句话。 traitDynamic extends Any...

scala 编译器 java lang dynamic language dynamictypes dynamics args applydynamic applydynamicnamed

scala

2017/03/10 16:20

714

Scala：AnyRef和AnyVal

scala lang html class short null .net wrapper java arg0 anyval anyref boolean unitfinal http defwait

scala

2017/03/10 15:32

scala类型系统

class type java scala 面向对象语言 runtime 编程语言 list getclass string classof integer

scala

2017/03/10 13:55

353

Scala中Manifest、ClassTag、TypeTag的学习

scala lang java 编译器 type manifest hey runtime string list classmanifest reflect typetag

scala

2017/03/10 11:10

Linux vmstat命令实战详解

linux unix web服务器监控工具 cache nginx apache vmstat 140m mcache free swpd buff buffer

linux

2017/02/25 12:03

没有更多内容

加载失败，请刷新页面

cloud-coder

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

公众号

视频号

问题反馈