文档章节

【互动问答分享】第9期决胜云计算大数据时代Spark亚太研究院公益大讲堂

Spark亚太研究院
 Spark亚太研究院
发布于 2014/08/25 17:12
字数 507
阅读 193
收藏 0

“决胜云计算大数据时代”

Spark亚太研究院100期公益大讲堂 【第9期互动问答分享】

 

Q1: Spark GraphX的用途在哪里?

        :图计算广泛应用于社交网络、电子商务,地图等领域;

         Spark GraphX可以轻而易举的完成基于度分布的中枢节点发现、基于最大连通图的社区发现、基于三角形计数的关系衡量、基于随机游走的用户属性传播等;

         从技术层面讲Spark GraphX非常适合于微信、微博、社交网络、电子商务、地图导航等类型的产品,所以可以期待Spark GraphX在Facebook、Twitter、Linkin、腾讯、百度等的大规模应用。

 

Q2:Spark GraphX使用的成功案例是什么?

        在国内主要是淘宝在大规模使用Spark GraphX;

         在淘宝,Spark GraphX不仅广泛应用于用户网络的社区发现、用户影响力、能量传播、标签传播等,而且也越来越多的应用到推荐领域的标签推理、人群划分、年龄段预测、商品交易时序跳转等,据淘宝的明风介绍,借助于Spark GraphX,经过半年多的尝试,淘宝之前一些想做但因为没有足够的计算能力而不能实现的图模型,现已不是问题。

 

Q3:Spark GraphX支持哪些流行的算法

        最经典是只会PageRank、TriangleCount、ShortestPaths等三大最常用的算法;

        通过对Pregel的支持从而也提供了更多的例如SVDPlusPlus、ConnectedComponents、StronglyConnectedComponents等算法;

        随着新版本的发布会推出更多的算法实现库;

 

Q4:学习Spark GraphX如果想深入的话推荐哪些数学书籍

        《离散数据》

        《集合论》

        《线性代数》

        《关系代数》

© 著作权归作者所有

Spark亚太研究院
粉丝 76
博文 73
码字总数 35236
作品 0
朝阳
技术主管
私信 提问
【互动问答分享】第10期决胜云计算大数据时代Spark亚太研究院公益大讲堂

“决胜云计算大数据时代” Spark亚太研究院100期公益大讲堂 【第10期互动问答分享】 Q1:Spark on Yarn的运行方式是什么? Spark on Yarn的运行方式有两种:Client和Cluster模式 Client模式如...

Spark亚太研究院
2014/09/04
253
0
【互动问答分享】第13期决胜云计算大数据时代Spark亚太研究院公益大讲堂

“决胜云计算大数据时代” Spark亚太研究院100期公益大讲堂 【第13期互动问答分享】 Q1:tachyon+spark框架现在有很多大公司在使用吧? Yahoo!已经在长期大规模使用; 国内也有公司在使用; ...

Spark亚太研究院
2014/09/24
135
0
【互动问答分享】第17期决胜云计算大数据时代Spark亚太研究院公益大讲堂

“决胜云计算大数据时代” Spark亚太研究院100期公益大讲堂 【第17期互动问答分享】 Q1:为了加快spark shuffle 的执行速度是否可以把sparklocaldirs 指向一块固态硬盘上面,这样做是否有效果...

Spark亚太研究院
2014/10/17
195
0
【互动问答分享】第12期决胜云计算大数据时代Spark亚太研究院公益大讲堂

“决胜云计算大数据时代” Spark亚太研究院100期公益大讲堂 【第12期互动问答分享】 Q1:jobserver 企业使用情况如何? 中国有一家视频网站已经使用超过JobServer超过半年的时间; 2013年和2...

Spark亚太研究院
2014/09/19
181
1
【互动问答分享】第15期决胜云计算大数据时代Spark亚太研究院公益大讲堂

“决胜云计算大数据时代” Spark亚太研究院100期公益大讲堂 【第15期互动问答分享】 Q1:AppClient和worker、master之间的关系是什么? :AppClient是在StandAlone模式下SparkContext.runJob...

Spark亚太研究院
2014/10/08
128
0

没有更多内容

加载失败,请刷新页面

加载更多

区块链基本概念一览

本文翻译自 中本聪 (Satoshi Nakamoto) 提供的资料 区块链:点对点电子金融服务系统。(Bitcoin: A Peer-to-Peer Electronic Cash System ) 允许在线从甲方向乙方支付,而无需提供格外 的...

一口今心
21分钟前
4
0
java.util.ConcurrentModificationException 异常问题详解

环境:JDK 1.8.0_111 在Java开发过程中,使用iterator遍历集合的同时对集合进行修改就会出现java.util.ConcurrentModificationException异常,本文就以ArrayList为例去理解和解决这种异常。 ...

shzwork
35分钟前
7
0
MAMP Pro for Mac(PHP/MySQL开发环境) v5.6

macdown为大家提供一款包含Macintosh、Apache、MySQL和PHP四大开发环境的软件, ——MAMP Pro mac,使用MAMP Pro Mac破解版,用户可以使用现有的动态DNS提供商轻松地将本地服务器连接到互联网...

云不若
39分钟前
4
0
浏览器 大文件分片上传处理

核心原理: 该项目核心就是文件分块上传。前后端要高度配合,需要双方约定好一些数据,才能完成大文件分块,我们在项目中要重点解决的以下问题。 * 如何分片; * 如何合成一个文件; * 中断了...

东方雨
41分钟前
6
0
Vim和Ctags提示和技巧[关闭]

我刚刚使用我的Vim(或者更确切地说是gVim)安装了Ctags (以帮助进行C ++开发),并希望找到您最喜欢的命令,宏,快捷方式,以及随之而来的提示...... 分享你最好的武器库。 在Vim开发中你会...

技术盛宴
51分钟前
8
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部