小松1的个人空间 / Spark /
正文

spark2.2 拆分字符串

原创
小松1
Spark
2021/05/24 12:20
阅读数 1K
本文被收录于专区
AI & 大数据
进入专区参与更多专题讨论

读取文件

val txt = spark.read.text("D:\\tmp\\log.txt")

拆分字符串

val dfSplit:DataFrame = txt.withColumn("split",
  split(col("value"), "\t")).select(
  $"split".getItem(0).as("transactionid"),
  $"split".getItem(1).as("service"),
  $"split".getItem(2).as("appkey")
)
dfSplit.show()
展开阅读全文
apache spark

© 著作权归作者所有

举报
加载中
点击引领话题📣 发布并加入讨论🔥

热门评论

t
transtone 2023-12-11 14:53
Tiptap 皮肤一枚。连所谓的AI也是tiptap内置的：https://tiptap.dev/blog/tiptap-ai
Elric黄
Elric黄 2023-12-06 10:22
华为这请要求就是想请数学好一点的码农而不是请真正的数学家
Marshmallow
Marshmallow 2023-12-11 13:31
这就是收割，阻断你任何途径（管你MIT 不MIT），倒逼你付费。
c
cxc236 2023-12-08 00:24
还以为是道歉的帖子，却还是在文过饰非。
是不是玩不起啊
是不是玩不起啊 2023-12-07 14:21
商业化很好，但是， 第一： 4917之前的版本，文档在MIT协议仓库内，禁止他人私有化部署是没有法【补丁】律依据的，为了收费撕毁既定合约，言而无信。 第二：版权声明删除 “全体贡献者” ，但并未移除全体贡献者的内容， 这很不道德切侵犯了贡献者的知识产权。 与这样的企业合作需要三思。
魔力猫
魔力猫 2023-12-04 09:28
按274条，数额特别巨大或者有其他特别严重情节的，处10年以上有期徒刑，并处罚金。这个数够了，就是认定麻烦。
-丨AlexLiu丨-
-丨AlexLiu丨- 2023-12-11 15:34
6哇，居然在开源中国刷到这种新闻
y
yh2216 2023-12-05 10:07
许久未见如此厚颜无耻的文章了
monkey_cici
monkey_cici 2023-12-04 10:01
各大厂，干活的老程序员都被炒鱿鱼了，新人便宜又勤奋，但是上来接手就懵逼，到处都是坑，维护起来处处是坑.....这些就是开猿节流,降本增笑的影响了....
LibreSoftc
LibreSoftc 2023-12-11 15:59
真正的大佬 敢于留朴实无华的种子
w
winnyrain 2023-12-05 10:12
这不是商业化，这是赤裸裸的割韭菜，违反MIT协议，毫无信用，人品崩塌，看到大家都在骂，我就放心了
donnie4w
donnie4w 2023-12-11 14:11
官网：https://tlnet.top/tim 文档：https://tlnet.top/timdoc 下载：https://tlnet.top/download 应用示例：https://tim.tlnet.top
屮殖
屮殖 2023-12-11 13:36
只有源码？
z
zhuzhua 2023-12-04 14:57
对的，坐船到河中间，开始收费了，和TM劫道的有啥区别？学水浒传呢？
Ai东
Ai东 2023-12-11 13:29
mybatis-mp 不是myabtis-plus，是为数不多的支持多表查询的orm框架！
屮殖
屮殖 2023-12-11 13:25
小米再二想，也改变不了人家计算机系高材生的事实。就像百度再吃人，也改变不了人家少年班的事实。
屮殖
屮殖 2023-12-11 13:22
他被骗又不是一次两次了，不过小便宜请。
疯
疯狂的狮子Li 2023-12-03 23:58
挨个大厂走一圈呗这节奏
osc_25732934
osc_25732934 2023-12-11 14:58
可以学习下滴滴原地升级
枯藤KT
枯藤KT 2023-12-07 16:17
忠实火狐用户，relay插件、multi-container插件很棒。自建同步服务，数据保存到自己的服务器上，帐号服务使用国际火狐帐号，几个电脑的历史记录互相同步，太爽了
kfyty
kfyty 2023-12-11 16:10
国内基于 mybatis 二次开发的框架真是多啊
施巴拉稀
施巴拉稀 2023-12-11 15:43
下一个替换的叫：OpenJiaoZa，下下一个叫：OpenYouTu，下下下一个叫：OpenLaMi。
donnie4w
donnie4w 2023-12-11 14:09
官网：https://tlnet.top/tim
monkey_cici
monkey_cici 2023-12-05 08:54
老板: 快速弄出一个可用版本来，后面再优化迭代....市场不等人....
p
phper08 2023-12-04 13:15
https://gitee.com/dotnetchina/Furion/blob/v4/LICENSE.zh “特此免费授予任何获得本软件副本和相关文档文件（下称“软件”）的人不受限制地处置该软件的权利”
p
phper08 2023-12-04 13:15
https://gitee.com/dotnetchina/Furion/commit/66eec96da18c7f69ae30c608ec4e8f14e21f9718 把版权所有者从“百小僧, 百签科技（广东）有限公司 和所有贡献者”改成了“百小僧, 百签科技（广东）有限公司”
pauli
pauli 2023-12-11 13:19
遥遥领先
陈钇蒙
陈钇蒙 2023-12-04 10:51
都看到马斯克裁了70%的推特员工, 推特也就宕机几次罢了, 大厂们觉得这样做划算, 所以纷纷效仿, 没准他们觉得用几次宕机换一大堆裁员划得来
o
osc_78692802 2023-12-08 13:52
10个人的小团队搞微服务约等于找死。微服务需要专门的运维团队支撑。微服务不如10年前nginx负债均衡的单体应用。
Marshmallow
Marshmallow 2023-12-11 13:34
你在说啥呢？打感情牌呢？你研究没研究什么是 MIT,没研究先研究下，我不捐我不pr我也没贡献我就不能用了？真的扯犊子撤到家了。
Ai东
Ai东 2023-12-11 13:24
mybatis-mp 有望 2023年最佳 orm框架 ： https://gitee.com/mybatis-mp/mybatis-mp
枫_林_海
枫_林_海 2023-12-11 14:22
这个组件管的有点太宽。后面会成为系统稳定性的最薄弱的地方。
jason-he
jason-he 2023-12-06 23:38
尊重规则
easymbol
easymbol 2023-12-05 09:06
当下这个环境还考虑个锤子的可读性，又不是自己的私有项目，你得要有不可替代性的写法，最好是核心仅仅只能自己看得懂改的动
机器人心理学家
机器人心理学家 2023-12-11 16:45
人家又不用996
qianmoQ
qianmoQ 2023-12-07 16:52
你可别扯什么 值得其他开源项目团队 “择其善者而从之、其不善者而改之” 其他开源团队没有这么无底线，不尊重协议的，自己丢人就行了，别拉上别的团队
Keijack
Keijack 2023-12-11 15:15
Firefox 倒下之后，剩下的就只有一个浏览器内核了。叹气。
奋斗到天明
奋斗到天明 2023-12-08 18:09
问题是，拼多多也是 java，中台，微服务。 怎么 java 打败 java，中台干翻中台，微服务否定微服务？ 为喷而喷，用商业模式的失败否定技术架构，也够虾扯的。
屮殖
屮殖 2023-12-11 13:28
说好的是最后一个版本的windows呢？
从今以后
从今以后 2023-12-05 09:24
这根本不是钱不钱的问题，就这就是赤裸裸的诈骗！现骗你过来说没有套路。等你用上了，再改协议。他今日可以文档收费，他日也可以其他地方再套路收费。
cczywyc
cczywyc 2023-12-04 11:12
不要混淆概念，大家从来都不是反对收费，所以别在这扯什么人生价值、情商智商乱七八糟的。本质上这是违反 MIT 协议的问题，别在这又当又立的。
无法选中
无法选中 2023-12-11 13:46
有的更新为什么带三个感叹号
阿伏流
阿伏流 2023-12-11 15:04
谢谢解答
光明丶
光明丶 2023-12-04 14:26
收费嘛没毛病，毕竟也要活下去，但是先拉人下水，再套，你让别人怎么办？进退不得，伤筋动骨剥皮。
中医药人工智能研究
中医药人工智能研究 2023-12-11 14:21
基于大语言模型(LLM)的各类GPT为什么不适合作为医疗AI的核心模型？ https://my.oschina.net/mye/blog/10320229
IdleMan
IdleMan 2023-12-11 13:17
就好比以前吹XX 的其实就是个高级点的编辑器，我给一个方法重命名还要一个个文件去修改方法名？
施巴拉稀
施巴拉稀 2023-12-11 15:26
计算一下投入产出比
屮殖
屮殖 2023-12-11 13:26
这是二代了，一代是求伯君。
-乐天-
-乐天- 2023-12-11 13:50
做个广告 -> V-IM（中文名：乐聊）基于JS的超轻量级聊天软件 https://gitee.com/alyouge/V-IM
梅子酒好吃
梅子酒好吃 2023-12-11 15:16
程序员的坏毛病：）
ZCShou
ZCShou 2023-12-04 09:28
人家@AdminBj也没抨击你，只是客观评论，你这个就给人扣了个社交平台宣泄引众议的帽子！无论买不买 VIP，人家都有权在任何平台发表自己的言论，你的 VIP 还包括限制用户发言的条款么？以后会不会加任何时候必须对你唯命是从的条款啊
mvpint
mvpint 2023-12-05 09:38
最后写出优雅代码，让后人看懂，然后35岁后滚蛋，这就是现实，这就是资本主义😹
红薯片
红薯片 2023-12-11 14:04
发明以来第一次？
临风笑笑
临风笑笑 2023-12-04 15:39
- // 版权 © 2020-present 百小僧, 百签科技（广东）有限公司 和所有贡献者 + // 版权 © 2020-present 百小僧, 百签科技（广东）有限公司
砼砼
砼砼 2023-12-11 14:28
为啥我这边每篇文章的，评论都是这个“Furion 商业化探索得罪了谁”的评论？得罪了谁？我又不用.net
桐乡张学友
桐乡张学友 2023-12-05 10:46
根本就不是钱的事，是他自己说永久免费，无商业行为，然后自己说话不算数，男人都不是，谁还敢相信他！谁还敢相信zg开源
p
phper08 2023-12-04 13:14
https://www.oschina.net/comment/news/202968#rpl_296263844 这是他一年前说的“补充说明：没有任何商业行为，无需任何形式授权，完全开源免费。 ”
浪
浪尖的旋律 2023-12-07 08:05
营销水平比华为低了一大截，华为的营销能针对有钱有势对电子产品不太懂的人，很多中老年人对华为极高评价，他们对价格不敏感、不缺钱。
F
Francesca 2023-12-07 19:12
web3就是个炒作啊，谁能说明白web3是什么东西？你如果不懂web3说明你懂web3，如果你懂web3说明你不懂web3
cczywyc
cczywyc 2023-12-04 11:14
不要混淆概念，大家从来都不是反对收费，它是违反了 MIT 开源协议，明白吗？

关于作者

小松1
Lv3
小松1
私信
提问
文章
87
经验值
1.4K
粉丝
4
关注
1

作者的专辑

全部
运维(1)
虚拟机(1)
neo4j数据库(2)
安全(5)

作者的其它热门文章

▪ {{formatHtml(o.title)}}

热门资讯

1
IntelliJ IDEA 2023.3 & JetBrains 全家桶年度大版本更新
2
Django 5.0 正式发布，最流行 Python Web 框架
3
Linus Torvalds 收敛脾气，谈内核社区“老龄化”问题
4
新概念“防御性编程”：让自己稳拿铁饭碗
5
小米 14 系列手机内核源代码已托管至 GitHub
6
让代码运行起来，比代码可读性重要
7
周星驰 Web3 团队下个月上线独立 App
8
phpy：PHP 与 Python 互调用库，为 PHP 引入 Python 生态
9
华为招数学博士的要求非常奇怪？
10
把电脑分辨率改成 500% —— 「赛博灯泡」

推荐关注

换一批
gozfree
gozfree
开源软件作者
sharpcx
sharpcx
文章 12
访问 9.8W
吴珂
吴珂
文章 1
访问 164
阿dai学长
阿dai学长
文章 268
访问 50W
王念博客
王念博客
文章 133
访问 154.1W

热门软件

TypeCell - Typescript 实时编程环境
FESCAR - 微服务架构分布式事务解决方案
Kite AI - 人工智能编程助手
Osprey - 漏洞检测与利用框架
Muzic - 人工智能音乐研究
BetterGI - 原神游戏辅助工具
Silq - 高级量子编程语言
AWTK-IOTJS - 物联网 GUI 开发套件
HoloClean - 半自动数据修复框架
Terminal.Gui - .NET 跨平台终端 UI 工具包
TF-GNN - 基于 TensorFlow 的图神经网络框架
JupyterLab - Jupyter 跨平台应用程序
uni-app - 基于 Vue.js 的跨平台框架
PrimiHub - 隐私计算平台
Hunt Redis - D 语言 Redis 客户端
BRCC - 分布式配置中心
kaka - Java 事件领域模型框架
Paddle.js - 浏览器中的深度学习框架
libspng - PNG 图片读写库
Diagrams - 云系统架构图绘制工具
打赏
0 评论
0 收藏
0 赞
分享
返回顶部
顶部