文档章节

对license数据的挖掘与分析

莱曼特
 莱曼特
发布于 2015/03/26 11:00
字数 2649
阅读 18
收藏 0
点赞 0
评论 0

                       license数据的挖掘与分析

    这里所称的数据分析泛指那些将数据转化为信息或知识的计算机应用系统(也可称之为商业智能应用,Business Intelligence/BI),包括决策支持、联机分析、查询与报表、预测分析、专业定量分析、数据挖掘、数据可视化应用等等。为企业或机构进行有效管理、提高竞争力提供信息和依据,是信息化进程中的高级阶段。在企业中已积累的数据是企业或机构宝贵的财富,如何有效地进行数据利用以获得更大的利益是集团化企业的中心目标。

集团化企业或机构在其发展过程中逐渐形成了多种不同类型的license设计研发相关应用软件以支撑公司的主营业务。还有一些公司通常由地点上分布的多个子公司或部门组成,子公司或部门独立地使用着各自的license服务器,而这些子公司或部门往往是很难相互调节使用软件license的,即基于不同厂商的或不同结构的license有不同的服务器和端口,造成了使用情况不明朗,资源使用浪费等情况。

在信息技术不断发展的今天,人们对信息的使用也越来越复杂。除了对软件服务器的进行增、删、改等事务处理操作和简单的统计汇总以外,高层管理者还要使用数据(历史的、现在的)进行各种复杂分析,如长期趋势分析和数据挖掘等,以支持决策。

从大量的历史数据中获取信息,要求license管理系统保存足够的历史数据,而且还要进行复杂的分析处理(每次处理涉及大量数据)。如果直接基于分散繁杂的license服务器的开展分析应用,则不可避免地要遇到以下诸多障碍:

1. 缺乏组织性。

    各个不同类型的license使用数据难以转化为有用的信息。license数据结构是面向操作的有效性组织的,而非面向分析的需要。分析所需要的数据内容可能分散在许多数据对象甚至许多应用中。同一字段在不同应用中又可能存在着同名异义、异名同义、单位不同、字长不同等许多难以识别的矛盾。将这些零碎而且结构各不相同的license服务器使用数据统一起来的工作将是复杂而繁重,难以应付不断变化的分析工作的需要。

2. 干扰事务处理系统的正常运行。

    实现对license使用情况精准的分析处理往往需要涉及较大的数据量,而且license服务器则要求尽快做出响应,如果进行一次大规模的分析,对机器性能的影响是难以忍受的,从而严重影响其正常运行。

3. 缺乏足够的历史数据。

    License使用分析应用常常需要通过一段历史时期的数据来分析趋势,而在license服务器中一般只存储当前的短期数据,且各个不同授权类型license的数据读取也不一样,这对于长期趋势分析和license使用规律探索构成制约。

4. 结果的准确可比性难以保证。

    License的使用数据是随时更新变化的。基于随时变化的数据源难于对问题作出一致的回答,而不一致的答案会干扰决策过程。

license的当前使用情况

 

  

license所在服务器的状态及其数据

 

  

【使用license的功能模块及当前功能模块的使用率和许可数量、到期时间】

  

【使用license的实时在线用户】

 

    一般来说对license使用问题的决策过程分这样三个阶段:

1. 发现问题。

     一开始,往往并未搞清license使用中的具体问题是什么,只是就所看到的现象提出了疑问和怀疑。需要从不同的方面和角度对数据找出其异常之所在。特别是当观察到某些因素组合起来会产生了特定的效果时,这尤其重要。

  

license在使用中获取不到的记录数据

 

  

license使用记录的历史数据——很明显的看出工作和非工作日license的使用数据差别

 

  

license使用率走势,也很直观的看出工作与非工作时的license使用率区别,以及最大使用率和平均使用率的差别】

 

2. 更加详细的分析和探讨所提出的问题。

     一旦发现了某种趋势或异常就要确认和解释其缘由。所谓分析,不仅是观察和列表,更重要的是:

①、证实这种趋势存在的必然性;

②、搞清楚为什么会存在这种趋势或异常;

③、预测这种趋势随着时间进程的发展;

④、预测这种趋势或异常会造成什么影响和后果。

 

  

license使用紧张程度的趋势,随着license数量的增加,紧张程度大幅减缓。

 

  

license的业务满足率,即当前的license数量是否满足用户的需求量

 

  

license业务满足率的数据——通过查询得知,当前还需35license才能满足100%的业务需求。】

 

3. 向其他决策者展现你的发现和结论,并得到确认分析、证实和预测其后果。

    这可能是一个复杂又漫长的过程。真正有权作出决策的人可能并未参与这一全过程。这时要能将分析的主要过程,尤其是结论清楚明白地展现给决策者,让他能洞察操作过程,理解决策支持的结论。

人们关心的是响应时间、数据的安全性和完整性。分析型处理则用于管理人员的决策支持和分析,经常要访问大量的历史数据。人们关心的是数据的易访问性、分析功能的充分性和有效性、以及结果的准确及时性。

分析应用所需工具可以归纳为以下几类:

1.查询工具

主要是指将数据直接(即无须经过复杂的分析算法处理)呈现给用户的工具。既可以是对数据仓库中记录级数据的查询,也可以是对分析结果(发展趋势或模式总结)的查询。其目标在于使得用户能够方便直观地提出查询要求并且以友好清晰的方式呈现出来,从而帮助用户实现对数据仓库的“阅览”。查询工具可以与分析型工具结合起来实现诸如原因分析、目标探察等分析任务。

2.分析型工具

根据数据仓库的定义和用途,它面向的用户是中高层领导和分析人员,主要执行决策支持和趋势分析类应用。

  

典型的数据分析系统是由以下成分组成:

1 各种所需的数据源。它们存在于各种事务处理系统的管理之下,是分析系统的数据流起点。

2 数据仓库系统。按管理主题领域所建立的分析型数据资源体系,是分析功能所作用的直接对象。其内容包括描述各种有关事物的细节级详细数据、体现各类管理主题的不同综合程度的主题数据、数据仓库数据集合及其形成过程的描述性信息(即元数据)和数据仓库管理系统。数据仓库管理系统要承担如下任务:数据抽取、校验、转换、整合、度量计算、加载、刷新、元数据维护、作业调度等。细节级详细数据一方面作为主题数据生成的数据基础,另一方面可以满足联机细节信息查询(包括由宏观至微观的钻入式分析)的需要。而主题数据则是满足绝大多数情况下分析计算数据请求的主体部分。

3 分析系统。即基于数据仓库之上的数据利用部分,是最终用户的使用环境。前面已经提到,按数据处理的复杂程度可分为查询型、分析型和挖掘型等;按使用对象的不同可分为决策支持系统、分析系统、专业分析研发系统等;按涉及的领域可分为财务分析系统、分析型客户关系管理、分析型渠道关系管理、业务分析系统、市场分析系统等;按操作模式的不同可分为客户机/服务器模式(C/S)、浏览器/服务器模式(B/S);根据用户需求的通用程度可配置通用商品工具软件或利用开发工具定制满足特定需求的分析环境。

分析系统的物理结构如下图所示:

  

一般情况下,为保证处理性能并且避免相互干扰,数据仓库系统部署在单独的硬件平台上,即分析系统服务器。对于基于Web的应用模式,也可以配备单独的Web服务器。


© 著作权归作者所有

共有 人打赏支持
莱曼特
粉丝 1
博文 57
码字总数 56188
作品 0
徐汇
时间序列数据挖掘综述

时间序列数据挖掘综述 一、引言   时间序列是指按时间顺序排列的一组数据,是一类重要的复杂数据对象。作为数据库中的一种数据形式,它广泛存在于各种大型的商业、医学、工程和社会科学等数...

dreaminthewind
2013/11/12
0
0
数据挖掘 自习笔记 第三章 定性归纳实践(下)

属性相关分析方法: 首先,我的读后感是,对这一系列我感到比较困惑,不过,如果遇到实际问题的时候,只能按照例子,照搬步骤来分析。但是我初步理解到,按照下面的操作,是通过信息量,来分...

urge104
2013/05/15
0
0
机器学习当道,还在使用基于词典的文本挖掘方法么,过时啦!

在多数企业中,体现客户与产品间联系的数据就占到总数据量的80%。对于企业来说,在制定主要策略时,使用文本挖掘客户与产品间的关系至关重要。由于众包挖掘和分析通常充满错误、花费昂贵且不...

【方向】
今天
0
0
认识数据挖掘

数据挖掘的方向 数据库技术角度 统计学角度 机器学习角度 一,数据挖掘的发展动力 1,数据量的增长 自动数据收集工具和成熟的数据库技术使得大量的数据被收集,存储在数据库、数据仓库或其他...

行走记忆时光
01/25
0
0
借助亚马逊S3和RapidMiner应用到文本挖掘

  【IT168 评论】本挖掘典型地运用了机器学习技术,例如聚类,分类,关联规则,和预测建模。这些技术揭示潜在内容中的意义和关系。文本发掘应用于诸如竞争情报,生命科学,客户呼声,媒体和...

it168网站
05/28
0
0
CIO时代APP微讲座:南京邮电大学李涛深度解读大数据时代的数据挖掘

3月13日下午,南京邮电大学计算机学院、软件学院院长、教授李涛在CIO时代APP微讲座栏目作了题为《大数据时代的数据挖掘》的主题分享,深度诠释了大数据及大数据时代下的数据挖掘。 众所周知,...

玄学酱
04/16
0
0
【译文】使用文本挖掘技术分析Twitter用户对电影的评价

【译文】使用文本挖掘技术分析Twitter用户对电影的评价 作者 佚名 译者 钱亦欣 引言 使用一些建模分析手段来评价电影的成功已经屡见不鲜,这类预测模型常常使用注入电影制作成本,类型,主演...

上大飞猪钱小莲
2017/05/21
0
0
别一口一句大数据,话说你真的懂运维大数据?

前言 关于运维大数据,业界已经有不少言论,但往往是众说纷纭,甚者是”管中窥豹“,尚无对运维大数据的一个全面见解。今天,本文就基于自己在运维大数据从业岗位上积累的经验,向大家系统地...

勤智运维
01/03
0
0
零基础自学数据挖掘工程师必知的四大阶段 第三阶段是重点

  本文介绍的学习路线使用的是当下主流数据分析挖掘编程语言Python来掌握数据挖掘的实际工作能力与认识水平。按照 1)基础理论→2)编程能力→3)挖掘应用→4)大数据实践 的学习流程来设置...

蓝胖子讲大数据
2017/11/07
0
0
一篇文章让你知道什么是数据挖掘

大数据如果想要产生价值,对它的处理过程无疑是非常重要的,其中大数据分析和大数据挖掘就是最重要的两部分。在前几期的科普中,小编已经为大家介绍了大数据分析的相关情况,本期小编就为大家...

风火数据
06/02
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

数据库事务的四大特性以及事务的隔离级别

本篇讲述数据库中事务的四大特性(ACID),并且将会详细地说明事务的隔离级别。 如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下四个特性: ⑴ 原子性(Atomicity) 原子性是...

Java大蜗牛
8分钟前
0
0
Spring Boot 整合 MyBatis/通用Mapper/PageHelper分页插件

整合MyBatis 整合通用Mapper 1. POM依赖配置 <properties><mapper.starter.version>2.0.3-beta1</mapper.starter.version></properties><!-- 通用Mapper --><dependency><groupId>t......

OSC_fly
17分钟前
0
0
CentOS7 双网卡绑定

环境 操作系统 CentOS7.5,禁用 NetworkManager 服务 网卡 eth0 网卡 eth1 绑定网卡 bond0 网卡 eth0 配置 修改 /etc/sysconfig/network-scripts/ifcfg-eth0 TYPE=EthernetBOOTPROTO=noneD......

Colben
18分钟前
0
0
zk实战--rpc框架集群化

在看此篇内容时需要浏览下面内容 netty实战--手写rpc框架 前文功能简介以及功能扩充 利用netty来实现一个点对点的rpc调用。客户端和服务端都是靠手写地址进行socket同学的,无法1对多,也无法...

xpbob
35分钟前
11
0
springboot 发送邮件

获取授权码 添加配置 # 账号和密码spring.mail.username=aaa@qq.comspring.mail.password=bbb# 服务器地址spring.mail.host=smtp.qq.comspring.mail.properties.mail.smtp.ssl.en...

阿豪boy
35分钟前
0
0
如何使用GNU Ring?

文章名:如何使用GNU Ring? 作者:冰焰火灵X 1079092922@qq.com 文章许可:CC BY-SA 4.0 ##1. 安装 下载GNU Ring 点击左边选择你的系统版本(这里以 GNU/Linux 为例,我使用的是Mint 18.3)...

ICE冰焰火灵X
38分钟前
4
0
深入理解springMVC

什么是spring MVC Spring MVC属于SpringFrameWork的后续产品,已经融合在Spring Web Flow里面。Spring 框架提供了构建 Web 应用程序的全功能 MVC 模块。使用 Spring 可插入的 MVC 架构,从而...

Java填坑之路
44分钟前
1
0
《射雕英雄传》书摘

1. 我虽是个飘泊江湖的贫家女子,可不是低三下四、不知自爱之人。你如真心爱我,须当敬我重我。我此生决无别念,就是钢刀架颈,也决意跟定了你。将来……将来如有洞房花烛之日,自然……自能...

k91191
54分钟前
1
0
解决:modal中datePicker 选中时,会触发modal的hidden.bs.modal事件

最近项目中发现了一个bug,具体表现为选中模态框上datepicker组件上的日期时,会触发模态框的关闭事件,导致数据编辑无法正常进行。网上搜索了下,解决方法如下: $('.datepicker').on('hid...

Funcy1122
58分钟前
0
0
Redis分布式锁的正确实现方式

前言 分布式锁一般有三种实现方式: 1.数据库乐观锁 2.基于Redis的分布式锁; 3.基于Zookeeper的分布式锁。本篇博客将介绍第二种方式,基于Redis实现分布式锁。虽然网上已经有各种介绍Redis...

大海201506
今天
2
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部