大数据可视化BI工具总结

BI工具的总结 xxx 传统型BI力求大而全的统一综合型报表和分析平台,侧重传统式报表开发,俨然一把屠龙刀。现互联网公司快速迭代的业务发展,需要的却是倚天剑,促使自助式BI和敏捷BI得以迅速...

Hive 常用的SQL4 视图

简介 Hive 中的视图和 RDBMS 中视图的概念一致,都是一组数据的逻辑表示,本质上就是一条 SELECT 语句的结果集。视图是纯粹的逻辑对象,没有关联的存储 (Hive 3.0.0 引入的物化视图除外),当...

2021/05/06 13:10
120
互联网项文档介绍

XXX项目可研分析报告 XXX项目项目立项申请 XXX项目计划书 XXX项目计划跟踪表 XXX项目配置管理计划 XXX项目周报 XXX项目会议纪要 XXX项目风险管理跟踪表 XXX项目事务管理跟踪表 XXX项目结项总...

2021/04/26 10:59
39
互联网项目经理必备文档介绍

项目建设方案 项目技术方案 项目实施方案 软件需求规格说明书 软件需求说明书也称为软件规格说明。该说明书对所开发软件的功能、性能、用户 界面及运行环境等做出详细的说明。它是用户与开发...

2021/04/26 10:58
57
互联网产品经理必备文档介绍

BRD 商业需求文档 Business Requirements Document,商业需求文档。这是产品声明周期中最早的问的文档,再早就应该是脑中的构思了,其内容涉及市场分析,销售策略,盈利预测等,通常是和老大...

2021/04/26 10:28
3.9K
windos jupyter动态切换多个conda环境

列出当前所有的kernel (web37) C:\Users\10103>jupyter kernelspec list Available kernels: web37 C:\Users\10103\AppData\Roaming\jupyter\kernels\web37 python3 D:\tools\Anaconda3-......

2021/04/16 13:43
97
大数据常用的调度框架及其对比

几种调度系统简单对比: Oozie 目前是托管在 Apache 基金会的,开源。通过 XML 文件来定义 DAG依赖,作业配置复杂。 Airflow 目前是托管在 Apache 基金会的,开源。python 语言开发,通过 py...

SPARK foreach循环中的变量问题,在循环体中有值,在循环体外无值

原因 在spark算子中引用的外部变量,其实是变量的副本,在算子中对其值进行修改,只是改变副本的值,外部的变量还是没有变。 通俗易懂的讲就是foreach里的变量带不出来的,除非用map,将结果...

2021/03/17 14:49
501
大数据OLAP系统(3) OLTP和OLAP的区别

OLTP和OLAP的区别 OLTP(on-line transaction processing)翻译为联机事务处理, 或者在线交易处理系统 OLAP(On-Line Analytical Processing)翻译为联机分析处理,或者在线分析系统 从字面...

大数据OLAP系统 (1)

数据生产面临的挑战 数据爆炸,每日使用最新维度对历史数据进行回溯计算。在Kylin的MOLAP模式下存在如下问题: 历史数据每日刷新,失去了增量的意义。 每日回溯历史数据量大,10亿+的历史数据...

Linux下JDK安装

yum安装 安装 JDK1.8 的命令如下: sudo yum install -y java-1.8.0-openjdk*安装 安装目录 ll /usr/lib/jvm/java-1.7.0-openjdk-1.7.0.79.x86_64 加入环境变量 export JAVA_HOME=/usr/lib/jv...

2021/03/02 16:55
42
Kafka+SparkStream+Hive的实战1

目前的项目中需要将kafka队列的数据实时存到hive表中。 import org.apache.kafka.clients.consumer.ConsumerRecord import org.apache.kafka.common.serialization.StringDeserializer impo...

2021/03/01 15:30
89
Hive 常用的SQL3 Hive分组取Top N

Hive分组取Top N Hive在0.11.0版本开始加入了row_number、rank、dense_rank分析函数,可以查询分组排序后的top值 使用规则: row_number() over ([partition col1] [order by col2] ) rank()...

2021/02/26 16:38
1.1K

没有更多内容

加载失败,请刷新页面