文档章节

把微信聊天记录做成词云(二)—— 分词&作图

苗永超
 苗永超
发布于 2017/10/16 00:07
字数 189
阅读 94
收藏 0

    我用了两种方案来分词:

    1.结巴分词:写了程序遍历导出的聊天语句,对message进行分词,然后将所有词都append到一个大的list中输出;

    2.spark tokenizer:select tokenizer(Message) as tmp from tb, 这个语句就能得到关键词的list;

   

    绘图我用的牛x的bdp个人版,步骤如下:

    a.选择一张工作表;

    b.新建图表;

    c.拖入关键词的字段到维度;

    d.选择图表类型为词云;

    d.done!

    ps: bdp的词云有智能分词功能,可以将整句放在字段中,用bdp的智能分词来分词。

    附图是用bdp做的词云:    

© 著作权归作者所有

共有 人打赏支持
苗永超
粉丝 15
博文 57
码字总数 14075
作品 0
海淀
后端工程师
私信 提问
微信手机端的本地数据全文检索优化之路

本文由微信团队原创分享,转自 WeMobileDev,感谢原作者。 1、前言 基于本地数据的全文搜索(Full-Text-Search,FTS)在移动应用上扮演着重要的角色。与基于服务端提供的搜索服务不同,移动端...

JackJiang2011
2017/10/18
0
0
微信全文搜索优化之路

欢迎大家前往腾讯云技术社区,获取更多腾讯海量技术实践干货哦~ 作者: jiaminchen,微信终端开发团队的一员 本文首次发表在《程序员》杂志 2017 年 09 月期。 前言 基于本地数据的全文搜索(...

2017/12/18
0
0
Python词云展示十九大报告

“不忘初心,牢记使命,高举中国特色社会主义伟大旗帜,决胜全面建成小康社会,夺取新时代中国特色社会主义伟大胜利,为实现中华民族伟大复兴的中国梦不懈奋斗。” 十九大召开已过去近一个月...

巧不巧克力
2017/11/19
0
0
职场人士最值得尝试的11款办公小程序,你知道吗?

善于使用优秀的工具也是职场人士必备的能力,使用一个好的工具不仅可以提高我们的工作效率,更可以让我们的生活更加便捷、高效。 说到工具,相信大家会说出很多实用的APP,但是手机铺满app不...

思途科技在线
2018/08/28
0
0
AI何时能懂环境会沟通?别急,这个“你说我画”小游戏开了个好头 | 论文

安妮 夏乙 编译整理 量子位 出品 | 公众号 QbitAI 晚上9点,一下午开了3个会的你终于回到家,换了衣服瘫倒在沙发里。放空了三分钟之后,你缓过神来,喊了一声: Siri,把我刚才挂在衣架上的浅...

yh0vlde8vg8ep9vge
2017/12/30
0
0

没有更多内容

加载失败,请刷新页面

加载更多

kettle demo9 在Java代碼中读取文件内容插入到数据库

kettle调用java代码一步步扩展,本次在Java代码里读取本地文件,然后把数据插入到数据库 本地文件内容,book.txt 完整流程图 1、生成记录,设置1条 2、java代码,主要两部分,第一,方法上面...

wells杨
33分钟前
3
0
使用split_size优化的ODPS SQL的场景

首先有两个大背景需要说明如下: 说明1:split_size,设定一个map的最大数据输入量,单位M,默认256M。用户可以通过控制这个变量,从而达到对map端输入的控制。设置语句:set odps.sql.mapp...

阿里云官方博客
35分钟前
3
0
让线程按顺序执行8种方法

实现 我们下面需要完成这样一个应用场景: 1.早上;2.测试人员、产品经理、开发人员陆续的来公司上班;3.产品经理规划新需求;4.开发人员开发新需求功能;5.测试人员测试新功能。 规划需求,...

编程SHA
39分钟前
2
0
云服务无法绑定公网IP问题解决方案

问题描述:在云服务器上跑的代码启动服务监听公网IP的时候可能报如下异常 bind: cannot assign requested addressbind: cannot assign requested address ..... 查看配置文件写的确实是ssh连...

MrPei
41分钟前
4
0
java中的this::

::是java8 中新引入的运算符 Class::function的时候function是属于Class的,应该是静态方法。 this::function的funtion是属于这个对象的。 注意: 调用方法可以名称不一样,但是需要参数一样...

Java搬砖工程师
45分钟前
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部