文档章节

经验分享 | 数据不是天注定!如何给数据改命实现全局顺滑优化?

Mr_zebra
 Mr_zebra
发布于 2017/08/23 15:35
字数 370
阅读 3
收藏 0
点赞 0
评论 0

本文来源于阿里云-云栖社区,原文点击这里

 

数据也有生辰八字,你信吗?列与列之间、行与行之间、元素与元素之间如何相生相克?查询慢?不要信什么这都是上天注定的,一切都可以通过数据改运实现全局和局部的顺滑优化?

image

image

怎么回事呢?且听我细细道来。

数据存储是上天注定的(写入时就决定了),但是我们可以按需改命,例如有个业务是运营商的通话流水,查询需求通常是按某个手机号码查询一个月的流水。而实际上数据是产生时即时写入数据库的,所以存放散乱。查询时耗费大量IO。需求是高效的按手机和月查询通话详单,所以我们需要将用户一个月的数据(通常是按月分区)进行重排即可。你就是上帝之手,数据的命运掌握在你的手中。

精髓就是:

展开全文

© 著作权归作者所有

共有 人打赏支持
Mr_zebra
粉丝 3
博文 499
码字总数 0
作品 0
PgSQL · 应用案例 · HDB for PG特性(数据排盘与任意列高效率过滤)

背景 数据也有生辰八字,你信吗?列与列之间,行与行之间,元素与元素之间如何相生相克?查询慢?不要信什么这都是上天注定的,如何给数据改运?看完本文,你也可以做到。 一份天赋,九份努力...

阿里云RDS-数据库内核组 ⋅ 2017/08/09 ⋅ 0

年终盘点丨细数2017云栖社区20大热点话题(附100+话题清单)

2017,你在聚能聊里分享了多少内容?贡献了多少话题?又收获了多少呢?社区聚能聊不仅可以请教技术难题,探讨热点话题,也可以八卦日常生活,分享码农们的点点滴滴。 程序员的世界不止是眼前...

云迹九州 ⋅ 01/09 ⋅ 0

一些日常用到的技术,不断积累中

整理iOS9适配中出现的坑 适配iOS9遇到的一些问题Scheme白名单 Bitcode及解决办法 iOS开发本地缓存(数据离线缓存、读取、释放 [ios] 数据持久化(加密等) 集成设置界面LGSettingView UICol...

iShown ⋅ 2016/01/19 ⋅ 0

【资料大放送】62页PPT|汇报的艺术2.0升级版—年终汇报特别篇

感谢关注天善智能,走好数据之路↑↑↑ 欢迎关注天善智能,我们是专注于商业智能BI,人工智能AI,大数据分析与挖掘领域的垂直社区,学习,问答、求职一站式搞定! 本文是天善智能签约讲师 陈...

天善智能 ⋅ 2017/12/12 ⋅ 0

阿里5位嘉宾3个分享:HBaseCon Asia 2017干货满满

HBaseCon是Apache HBase官方举办的技术会议,主要目的是分享,交流HBase这个开源分布式大数据存储的使用和开发以及发展。HBaseCon发起于2012年。通常HBaseCon的举办地是在美国,这是HBaseCo...

雪夜凋零 ⋅ 2017/08/10 ⋅ 0

会议 | 数据驱动的优化理论与实践国际研讨会:算法、大数据、人工智能结合将碰撞出怎样的火花

  AI 科技评论消息,2017 年 12 月 16 日-19 日,「2017 年数据驱动的优化理论与实践」国际研讨会在上海财经大学举办。本次研讨会由上海财经大学交叉科学研究院(RIIS)主办,杉数科技有限...

AI科技评论 ⋅ 2017/12/19 ⋅ 0

TommyLemon/Android-ZBLibrary

ZBLibrary-Android快速开发框架 坐标标准库ZBLibrary,是一个MVP架构的Android快速开发框架,提供一套开发标准(View,Data,Event)以及模板和工具类并规范代码。 封装层级少,简单高效兼容性...

TommyLemon ⋅ 2016/04/21 ⋅ 0

Ali-HBase的SQL实践与改进

2017云栖大会Hbase专场,阿里巴巴技术专家天穆带来Ali-HBase的SQL实践与改进的演讲。本文主要从为什么需要SQL开始谈起,进而讲解了SQL on Hbase,接着着重分享了Ali-Hbase SQL的优化与改进,...

云迹九州 ⋅ 01/11 ⋅ 0

数据驱动的优化理论与实践国际研讨会:算法、大数据、人工智能结合将碰撞出怎样的火花

雷锋网 AI 科技评论消息,2017 年 12 月 16 日-19 日,「2017 年数据驱动的优化理论与实践」国际研讨会在上海财经大学举办。本次研讨会由上海财经大学交叉科学研究院(RIIS)主办,杉数科技有...

思颖 ⋅ 2017/12/19 ⋅ 0

数据之美-天善智能&思迈特大数据沙龙活动精彩回顾

6月9日,10日,天善智能和广州思迈特软件一起举办了数据之美-天善智能&思迈特大数据沙龙活动,累计报名人数400余人,掀起了广深大数据学习的热潮。 另外,天善智能精心邀请的七位嘉宾,来自不...

天善智能 ⋅ 06/12 ⋅ 0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

骰子游戏代码开源地址

因为阿里云现在服务器已经停用了,所以上面的配置已经失效。 服务端开源地址:https://gitee.com/goalya/chat4.git 客户端开源地址:https://gitee.com/goalya/client4.git 具体运行界面请参考...

算法之名 ⋅ 39分钟前 ⋅ 0

设计模式--装饰者模式

装饰者模式 定义 动态地给一个对象添加一些额外的职责。就增加功能来说,装饰模式相比生成子类更为灵活。 通用类图 意图 动态地给一个对象添加一些额外的职责。就增加功能来说,装饰模式相比...

gaob2001 ⋅ 今天 ⋅ 0

JavaScript零基础入门——(八)JavaScript的数组

JavaScript零基础入门——(八)JavaScript的数组 欢迎大家回到我们的JavaScript零基础入门,上一节课我们讲了有关JavaScript正则表达式的相关知识点,便于大家更好的对字符串进行处理。这一...

JandenMa ⋅ 今天 ⋅ 0

sbt网络问题解决方案

转自:http://dblab.xmu.edu.cn/blog/maven-network-problem/ cd ~/.sbt/launchers/0.13.9unzip -q ./sbt-launch.jar 修改 vi sbt/sbt.boot.properties 增加一个oschina库地址: [reposit......

狐狸老侠 ⋅ 今天 ⋅ 0

大数据,必须掌握的10项顶级安全技术

我们看到越来越多的数据泄漏事故、勒索软件和其他类型的网络攻击,这使得安全成为一个热门话题。 去年,企业IT面临的威胁仍然处于非常高的水平,每天都会看到媒体报道大量数据泄漏事故和攻击...

p柯西 ⋅ 今天 ⋅ 0

Linux下安装配置Hadoop2.7.6

前提 安装jdk 下载 wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.7.6/hadoop-2.7.6.tar.gz 解压 配置 vim /etc/profile # 配置java环境变量 export JAVA_HOME=/opt/jdk1......

晨猫 ⋅ 今天 ⋅ 0

crontab工具介绍

crontab crontab 是一个用于设置周期性被执行的任务工具。 周期性执行的任务列表称为Cron Table crontab(选项)(参数) -e:编辑该用户的计时器设置; -l:列出该用户的计时器设置; -r:删除该...

Linux学习笔记 ⋅ 今天 ⋅ 0

深入Java多线程——Java内存模型深入(2)

5. final域的内存语义 5.1 final域的重排序规则 1.对于final域,编译器和处理器要遵守两个重排序规则: (1)在构造函数内对一个final域的写入,与随后把这个被构造对象的引用赋值给一个引用...

江左煤郎 ⋅ 今天 ⋅ 0

面试-正向代理和反向代理

面试-正向代理和反向代理 Nginx 是一个高性能的反向代理服务器,但同时也支持正向代理方式的配置。

秋日芒草 ⋅ 今天 ⋅ 0

Spring 依赖注入(DI)

1、Setter方法注入: 通过设置方法注入依赖。这种方法既简单又常用。 类中定义set()方法: public class HelloWorldOutput{ HelloWorld helloWorld; public void setHelloWorld...

霍淇滨 ⋅ 昨天 ⋅ 0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部