文档章节

大数据技术的应用现状与展望

 陈小君
发布于 05/26 15:36
字数 1205
阅读 10
收藏 0

本文是我即将由嵌入式底层驱动行业转入大数据研究领域的综述文章,案例摘自《程序员》电子期刊,由于初学者知识面较窄,查看文献量较少,因此后续还会在此基础上,继续跟踪并深入研究,为论文撰写积累知识储备和素材。

1. 大数据技术的应用领域
2. 大数据技术的几个应用案例
3. 大数据技术的问题与挑战
4. 大数据技术的前景展望
1.大数据技术的应用领域
1.1 大数据研究的四项关键技术
(1)数据采集、预处理与存储技术 
(2)数据分析、学习与信息挖掘技术 
(3)数据安全与隐私保护技术 
(4)数据的中心体系结构 


1.2 大数据技术的应用领域
(1)以大数据技术为基础的现有数据处理领域,比如图像(人脸)的识别、匹配,视频压缩解码 
(2)以大数据技术为基础的数据学习领域,比如语音识别、汉字等语义学习以及商用平台的信息推荐系统等 
(3)以大数据技术为基础的系统连接与交互领域,比如基于智能对话的人机交互,对话系统的语言理解与分析等

2.大数据技术的几个应用案例
2.1 基于注意力机制的端到端语音识别方案——应用厂商小米
 
(1) 端到端语音识别只需呀一个神经网络就可以识别汉字序列。 
(2) 注意力机制摒弃了传统的不准确性假设。 
(3)该技术只停留在算法阶段,存在难收敛、训练速度慢和无法给出音素切分点等缺点。

2.2 面向图像分析应用得海量样本过滤方案——应用厂商苏宁
 
(1) 多重过滤效果明显。 
(2) 利用初级特征、深度特征以及无监督聚类和深度分类器的分类方法,可提取高质量图像。 
(3) 海量高质量图像样本的获取,是取得优异算法性能的重要前提。

2.3从连接到交互的智能对话交互实践及范式思考——应用厂商阿里巴巴
(1) 人和智能设备交互一定是自然语言。 
(2) 人和设备交互是双向的。 
(3) 人和设备对话交互的多轮的。 
(4) 需要较好的上下文理解。 
对话系统架构框图: 
 
自然语言理解流程: 
 
人机交互的几个阶段: 
 
人机交互第二阶段实现方案: 
 
智能对话交互生态的范式思考——开发者平台: 
 

 

想要在大数据这个领域汲取养分,让自己壮大成长。分享方向,行动以前先分享下一个大数据交流分享资源群870097548,欢迎想学习,想转行的,进阶中你加入学习。
总结: 
(1).打造语言理解的鲁棒性和领域扩展性; 
(2).打造机器持续学习的能力; 
(3).打造数据闭环。

3. 大数据技术的问题与挑战
(1) 大数据的数据分析需求不仅体现在海量数据的处理能力上,还体现在对新的知识类型的兴趣上。需要新型的局部数据采样进行数据分析的策略。 
(2) 大数据深度学习问题:理论分析、数据特征提取以及训练和优化提取技术。 
(3) 大数据隐私保护问题:需要相关政策法规的约束。 
(4) 大数据质量和可用性问题:比如数据的冗余、噪声和误差的负面影响,还有数据一致性、精确性和完整性等问题。

4. 大数据技术的前景展望
(1) 大数据技术还需探索多数据源有效获得高质量数据的理论与方法。 
(2) 大数据技术还需研究高效的数据过滤方法,建立多模态融合计算的理论,提高数据的可用性。 
(3) 大数据技术还需解决数据恢复、定量评估和数据演化的新问题,进一步研究近似计算理论和技术,解决缺失数据的利用问题等。
 

© 著作权归作者所有

粉丝 2
博文 18
码字总数 47598
作品 0
私信 提问
信通院2018人工智能发展白皮书技术篇重磅发布

  大数据文摘出品   9月6日,2018中国人工智能峰会(CAIS2018)在南京国际博览会议中心召开。斯坦福客座教授吴恩达以Landng.ai创始人、CEO的身份出席了峰会,并在主论坛上做了题为《人工...

大数据文摘
2018/09/07
0
0
2018第二届中国移动金融发展大会

主题:《严“政”以待,共建移动金融新生态》 时间:4月24-25日 地点:北京.新世纪日航酒店 规模:500人+ 主办方:移动支付网、北京移动金融产业联盟 协办方:北京网络信息安全技术创新产业联...

蟠桃会会议平台
2018/03/23
0
0
2018第二届中国移动金融发展大会

主题:《严“政”以待,共建移动金融新生态》 时间:4月24-25日 地点:北京.新世纪日航酒店 规模:500人+ 主办方:移动支付网、北京移动金融产业联盟 协办方:北京网络信息安全技术创新产业联...

pantaojun
2018/03/23
0
0
2018第二届中国移动金融发展大会

主题:《严“政”以待,共建移动金融新生态》 时间:4月24-25日 地点:北京.新世纪日航酒店 规模:500人+ 主办方:移动支付网、北京移动金融产业联盟 协办方:北京网络信息安全技术创新产业联...

蟠桃会会议平台
2018/03/23
1
0
2017中国云计算国际峰会

2017 中国云计算国际峰会将于2017-03-30召开,旨在汇集研究人员、开发人员和行业专家,探讨云计算在全球的应用总体情况与未来趋势、云解决方案、 云零售、云电商、云视频、云金融、电信云、云...

活动家
2017/02/14
0
0

没有更多内容

加载失败,请刷新页面

加载更多

FPGA 设备 USB Platform Cable USB

lsusbFuture Technology Devices International, Ltd FT232H Single HS USB-UART/FIFO IC

MtrS
今天
4
0
lua web快速开发指南(6) - Cache、DB介绍

"数据库"与"缓存"的基本概念 数据库与缓存是服务端开发人员的必学知识点. 数据库 "数据库"是一种信息记录、存取的虚拟标记地点的集合统称. 比如现实生活中, 我们经常会用到文件柜、书桌等等数...

水果糖的小铺子
今天
6
0
Oracle分页查询语句的写法

Oracle分页查询语句的写法 Oracle分页查询语句使我们最常用的语句之一,下面就为您介绍的Oracle分页查询语句的用法,Oracle分页查询语句基本上可以按本文给出的格式来进行套用。   Oracle分...

康师傅
昨天
5
0
java并发图谱

1527
昨天
2
0
Mybatis之拦截器Interceptor

使用mybatis时用PageHelper进行分页,用到了PageInterceptor,借此了解下mybatis的interceptor。Mybatis的版本是3.4.6,MybatisHelper的版本是5.1.3。 1、PageInterceptor 先上一段代码,如下...

克虏伯
昨天
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部