文档章节

我与开源的那些事-漫谈敏捷BI平台之BIPlatform的基础架构(-)

d
 david_yuxue
发布于 2015/04/25 18:36
字数 632
阅读 2780
收藏 2

我们来自百度商业运营产品体系Data Team,通过研发数据类平台、工具和数据产品,帮助商业用户洞察业务运营状况、提高管理效能、辅助决策支持。而过去我们的分析型系统主要存在以下几个问题:

  1. 数据计算处理速度存在瓶颈:动态数据计算能力有限,当分析场景较复杂,交叉维度过多的情况下,报表的性能急剧下降,以售中报表系统为例,带有下钻功能的一个报表,平均响应时间在10s+,长期以来报表速度问题广受业务部门诟病。

  2. 报表功能单一,数据分析能力弱:受底层数据限制,无法进行多维度自助交叉的组合分析,而越来越多的主题分析、诊断分析,有维度交叉、钻取、转换等典型多维分析场景的诉求。

  3. 展现能力有限,图形计算分析能力尤其不足:不具备专业图形计算引擎,导致很多数据依靠表格来展现,但表格的展现能力远不及图形。成分、对比、趋势、分布、相关等关系,很难直观发现。

  4. 需求响应速度慢,开发效率低下:互联网业务变化频繁,有时,一个需求还没上线,业务就已经发生了变化。而对于报表新增指标、调整维度等基本需求的更新升级,更是非常频繁。但每次都经历开发、测试、上线流程,周期长,响应速度慢。由于这类原因,业务部门有时甚至不愿意提报表需求,从而导致报表配合业务运营的作用也大打折。

随着数据的积累,需求的不断变化,如何打造一个能够快速实现需求转化、高效的数据分析、展示平台,对我们来说,是一个机遇、也是一个挑战。

经过无数次的论证、调研、对比学习,我们提出了基于问题模型理论、基于Lucene高效文档检索技术的可视化敏捷BI平台-BIPlatform(技术变更以及基础架构如下):

(未完待续)

© 著作权归作者所有

共有 人打赏支持
d
粉丝 68
博文 11
码字总数 4987
作品 1
海淀
私信 提问
加载中

评论(3)

起床特困户
想请教一下OLAP用的是哪个产品?是否支持多数据源联合查询? Oracle+Mysql+Excel等任意关联
d
david_yuxue
问题模型即查询语义描述,描述你要查询的数据维度、指标、分组信息等
1
190526
请问什么是问题模型理论?
我与开源的那些事-漫谈敏捷BI平台 BiPlatform-开篇

2014年10月31日是一个令人兴奋的日子,经过小伙伴们近半年的准备、奋战,凝聚了一线开发人员无数心血的新一代敏捷BI平台-BIPlatform终于落户github(https://github.com/Baidu-ecom/bi-platf...

david_yuxue
2015/04/18
0
3
在本地部署biplatform出错

@david_yuxue 你好,想跟你请教个问题: 我根据您的文档配置到以下命令的时候出错,请您帮忙看看,我是哪里的问题。 java -jar tesseract-1.5.0-RELEASE.jar -Xmx4096m -Xms4096m -Dserver.p...

骄阳凉风
2015/07/24
2.5K
2
Biplatform初次使用时注册的用户保存问题

@david_yuxue 你好, 这段时间在关注你们开源的BI产品-biplatform, 也在偿试分析和摸索应用。现在使用的过程中有一个疑问想向你请教: 就是在布署好环境后,初次使用designer时,需要注册一个...

Welkman
2015/05/25
388
3
install tesseract时出现错误

@david_yuxue 你好,想跟你请教个问题: install tesseract时出现错误: [INFO] Scanning for projects... [WARNING] [WARNING] Some problems were encountered while building the effect......

SDUcolor
2016/04/19
419
0
如何通过BIPlatform完成计算指标的配置

先睹为快,我们先来看一下如何进行简单的基于四则运算的简单计算指标配置。 访问BIPlatform设计器,进入如下页面: 配置完成之后,点击提交完成配置,之后就可以正常使用你配置的计算指标了。...

david_yuxue
2015/06/06
0
0

没有更多内容

加载失败,请刷新页面

加载更多

dubbo 搭建与使用

官网:http://dubbo.apache.org/en-us/ 一,安装监控中心(可以不安装) admin管理控制台,monitor监控中心 下载 bubbo ops 这个是新版的,需要node.js环境,我没有就用老版的了...

小兵胖胖
3分钟前
0
0
mac 下 mysql 8.0.13 安装并记录遇到的问题 以便以后查看

安装 官网mysql 下载地址 安装过程 省去 安装好之后 下载navicat 错误1 链接 遇到 mysql 2003 - Can't connect to MySQL server 错误, 解决方案 重启mysql 服务 #错误2 ERROR 1045: Acces...

杭州-IT攻城狮
昨天
5
0

中国龙-扬科
昨天
1
0
[Spring4.x]基于spring4.x纯注解的Web工程搭建

在前文中已经说明了如何基于 Spring4.x+ 版本开发纯注解的非web项目,链接如下: https://my.oschina.net/morpheusWB/blog/2985600 本文则主要说明,如何在Web项目中,"基于spring纯注解方式...

morpheusWB
昨天
16
0
基础编程题目集-7-13 日K蜡烛图

股票价格涨跌趋势,常用蜡烛图技术中的K线图来表示,分为按日的日K线、按周的周K线、按月的月K线等。以日K线为例,每天股票价格从开盘到收盘走完一天,对应一根蜡烛小图,要表示四个价格:开...

niithub
昨天
5
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部