文档章节

深入理解tera——百度开源万亿级数据库

backJ
 backJ
发布于 2016/10/26 19:36
字数 238
阅读 1K
收藏 2

最近偶然发现百度的同学 00k ,发布了百度万亿级数据库tera。 从介绍可以看出该系统已成为百度spider 3.0和网页数据库的核心模块,管理节点过万,数据存储量级达到pb级。虽然该系统开源较晚,但相比于同类开源产品,如hbase等,性能、可靠性和稳定性应该有非常大的提升。从公布资料看,tera每天能实时处理百亿的链接数据,管理万亿数据规模,而类似hbase的系统还没有哪个应用能达到百度的数据量级。

tera另外一个吸引人的特点是全c++实现,终于可以摆脱java了。

后续开一个深入理解tera的技术专题,与大家分享一下。

记录一下代码地址:http://github.com/baidu/tera,代码走起!

© 著作权归作者所有

backJ
粉丝 4
博文 1
码字总数 238
作品 0
海淀
程序员
私信 提问
加载中

评论(3)

petermay
petermay
用的是HDFS
petermay
petermay
tera集群部署后,运行不起来,出现以下问题,哪位仁兄帮看一下:

[192.168.247.130:2181], sessionId=0x25c9b804ca20009, negotiated timeout=10000

E0613 14:31:56.213695 80339 tablet_io.cc:304] fail to open table: /tera/meta, Corruption: CURRENT file lost

E0613 14:31:56.213883 80339 tabletnode_impl.cc:328] fail to load tablet: meta [, ], status: kTableCorrupt

E0613 14:31:56.228971 80411 tabletnode_zk_adapter.cc:230] kick mark node is created
dayreturn
dayreturn
期待楼主的专题开张!
百度开源的万亿量级数据库 Tera 发布0.5.2版本

百度开源的万亿量级数据库Tera发布0.5.2版本。 Tera简介 Tera是一个高性能、可伸缩的结构化数据存储系统,被设计用来管理搜索引擎万亿量级的超链与网页信息。为实现数据的实时分析与高效访问...

thesonder
2016/12/09
8.8K
39
Tera 0.5.1 发布,百度万亿量级数据库

百度开源的万亿量级数据库Tera发布0.5.1版本。 Tera简介 Tera是一个高性能、可伸缩的结构化数据存储系统,被设计用来管理搜索引擎万亿量级的超链与网页信息。为实现数据的实时分析与高效访问...

thesonder
2016/11/08
5.6K
11
Tera的系统设计

本文重点介绍百度的万亿量级数据库Tera的诞生背景、业务场景及需求、设计目标和设计思路。如果您还不了解Tera,可参考Tera主页。 设计背景 百度的链接处理系统每天处理万亿级的超链数据,在过...

dayreturn
2016/10/25
566
0
Tera 0.5.3 发布,百度万亿量级数据库

百度开源的万亿量级数据库Tera发布0.5.3版本。 Tera简介 Tera是一个高性能、可伸缩的结构化数据存储系统,被设计用来管理搜索引擎万亿量级的超链与网页信息。为实现数据的实时分析与高效访问...

dayreturn
2016/12/21
3.1K
8
【一周热门软件更新】我一口气发布六个版本更新,还有谁?

可能因为这周的 “1024” ,很多软件都想着搞个大新闻,纷纷来个大更新,可局长我也是身经百战啦,什么更新没见过?下面来看看一些本周关注度较高的软件更新资讯。 先看一看后端相关项目更新...

OSC源创君
2016/10/29
868
0

没有更多内容

加载失败,请刷新页面

加载更多

在JavaScript中将数字转换为字符串的最佳方法是什么?

将数字转换为字符串的“最佳”方法是什么(就速度优势,清晰度优势,内存优势等而言)? 一些例子: String(n) n.toString() ""+n n+"" #1楼 如果需要将结果格式设置为特定的小数位数 (例如...

javail
26分钟前
111
0
51单片机中断学习

一、中断的概念 CPU在处理某一事件A时,发生了另一事件B请求CPU迅速去处理(中断发生); CPU暂时中断当前的工作,转去处理事件B(中断响应和中断服务); 待CPU将事件B处理完毕后,再回到原...

demyar
27分钟前
97
0
创龙TI KeyStone C66x多核定点/浮点DSP TMS320C665x 的拓展IO信号、FMC接口

广州创龙结合TI KeyStone系列多核架构TMS320C665x及Xilinx Artix-7系列FPGA设计的TL665xF-EasyEVM开发板是一款DSP+FPGA高速大数据采集处理平台,其底板采用沉金无铅工艺的6层板设计,适用于高...

Tronlong创龙
28分钟前
90
0
理解虚拟网络

概念 TUN/TAP,veth

认真即可
34分钟前
162
0
聊聊artemis的ServerConnectionLifeCycleListener

序 本文主要研究一下artemis的ServerConnectionLifeCycleListener BaseConnectionLifeCycleListener activemq-artemis-2.11.0/artemis-core-client/src/main/java/org/apache/activemq/artem......

go4it
35分钟前
111
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部