加载中
Apache Doris在蜀海供应链数据仓库建设中的实践

概述 最早接触doris是在2020年初,当时是为了解决在海量数据上实时高并发查询的问题,当时调研了很多框架,在使用这Doris之前我的架构和其他公司的架构基本差不多,Hadoop,Hive,Spark,Pre...

Flink Doris Connector设计方案

Flink Doris Connector设计方案 该方案首先感谢社区Spark Doris Connector的作者 从Doris角度看,将其数据引入Flink,可以使用Flink一系列丰富的生态产品,拓宽了产品的想象力,也使得Doris...

Spark Doris Connector设计方案

Spark Doris Connector 是Doris在0.12版本中推出的新功能。用户可以使用该功能,直接通过Spark对Doris中存储的数据进行读写,支持SQL、Dataframe、RDD等方式。 从Doris角度看,将其数据引入S...

Apache Doris 动态分区介绍及使用方法

1. 介绍 在某些使用场景下,用户会将表按照天进行分区划分,每天定时执行例行任务,这时需要使用方手动管理分区,否则可能由于使用方没有创建分区导致数据导入失败,这给使用方带来了额外的维...

09/28 14:25
36
Apache Doris Sequence介绍及使用方法

Sequence列目前只支持Uniq模型,Uniq模型主要针对需要唯一主键的场景,可以保证主键唯一性约束,但是由于使用REPLACE聚合方式,在同一批次中导入的数据,替换顺序不做保证。替换顺序无法保证...

Apache Doris Routine Load数据导入使用方法

1.概要 Routine load 功能为用户提供了一种自动从指定数据源进行数据导入的功能。 Routine Load 是支持用户提交一个常驻的导入任务,通过不断的从指定的数据源读取数据,将数据导入到 Doris ...

09/26 14:37
12
Apache Doris Stream load 数据导入使用方式及案例

1.概要 Stream load 是一个同步的导入方式,用户通过发送 HTTP 协议发送请求将本地文件或数据流导入到 Doris 中。Stream load 同步执行导入并返回导入结果。用户可直接通过请求的返回体判断本...

Apache Doris Broker数据导入

1.概要 Broker load 是一个异步的导入方式,支持的数据源取决于 Broker 进程支持的数据源。 用户需要通过 MySQL 协议 创建 Broker load 导入,并通过查看导入命令检查导入结果 主要适用于以下...

Apache Doris 数据导入总览

1.导入总览介绍 Apache Doris 的数据导入功能是提供用户将数据导入到 Doris 中,导入成功之后,用户可以通过 Mysql 客户端使用SQL对数据进行查询分析。 Doris 为满足不同场景的数据数据导入需...

Apache Doris 升级手册

Apache Doris 可以通过滚动升级的方式,平滑进行升级。升级顺序是先升级BE,再升级FE,不能颠倒升级顺序。Doris保证BE向后兼容FE。 升级的过程可以分为: 测试 Doris BE 升级的正确性, 测试...

09/18 15:23
14
正式成为Apache Doris 项目Committer

非常感谢Aache Doris社区的信任和肯定,邀请我成为Aache Doris项目的Committer,这是肯定,也是荣誉,更是责任。 特别感谢社区明雨带我进入开源社区,感谢缪翎,政国,昊鹏等在使用过程中给我...

09/18 11:53
14
Apache Doris 环境安装部署

这里以百度的Doris发行版 Palo-0.14.13版本为例进行演示编译安装部署 1. Doris编译 1.1 docker 镜像下载 这里我们使用的最新镜像 Apache doris 0.14.0及百度发布的Palo-0.14.7及之前的版本都...

Apache Doris Join的实现与调优实践

ApacheDoris Join实现与调优实践 8 月 14 号,由示说网和上海白玉兰开源开放研究院联合举办的开源大数据技术线上 Meetup 如期举行,Apache Doris 社区受邀参与本次 Meetup ,来自百度的数据内...

Apache Doris常见问题答疑(一)

Q:invalid cluster id: xxxx A:这个错误可能会在show backends 或 show frontends 命令的结果中出现。通常出现在某个FE或BE节点的错误信息列中。这个错误的含义是,Master FE向这个节点发送...

09/14 12:57
22
Apache Doris常见问题答疑(二)

Q:show backends/frontends 查看到的信息不完整 A:在执行如 show backends/frontends 等某些语句后,结果中可能会发现有部分列内容不全。比如show backends结果中看不到磁盘容量信息等。 ...

Apache Doris ODBC mysql外表注意事项

前面一篇文章介绍了Apache doris ODBC外表使用方式,这里要说的是在使用Mysql的ODBC外表的时候要注意事项: mysql数据库及表的字符集一定要是用UTF8,不要使用UTF8mb4,目前doris ODBC外表只...

09/14 12:53
17
如何构建公司的数据指标体系

概述 在数据化管理中,数据指标是业务中的核心内容,然而指标管理中总会出现许多问题。指标管理系统在一定程度上可以帮助实现规范化管理,但是针对不同的业务场景与需求,数据管理还应当灵活...

09/14 10:52
10
怎么进行数据仓库分层设计及设计规范

1.数据仓库分层模型设计 数据平台将数据分为操作数据层(ODS)、公共维度模型层(CDM)(其中公共维度模型层包括明细数据层(DWD)和汇总数据层(DWS))、应用数据层(ADS) 分层设计的好处:...

09/14 10:52
31
基于Apache doris怎么构建数据中台(一)-什么是数据中台

这是数据中台系列的第一篇文章,主要阐述数据中台概念,从技术和业务视觉看数据中台及数据中台要解决的问题 1.什么是数据中台 数据是从业务系统产生的,而业务系统也需要数据分析的结果,那么...

09/14 10:51
14
基于Apache doris怎么构建数据中台(二)-数据中台建设内容

这次主要是将基于Doris的数据中台建设内容及系统架构设计 围绕着上次将的我们要解决的五个问题:找数,理解数据,问题评估,取数及数据可视化,给出一个概要的设计及框架 数据中台建设内容 ...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部