Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01
Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01
stark_summer 发表于3年前
Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01
  • 发表于 3年前
  • 阅读 74
  • 收藏 2
  • 点赞 0
  • 评论 0

华为云·免费上云实践>>>   

摘要: Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01

创建一个Scala IDEA工程:


点击“Next”:


点击“Finish”完成工程的创建:


修改项目的属性:



首先修改Modules选项:



在src下创建两个文件夹,并把其属性改为source:


再修改Libraries:


因为要开发Spark程序,所以需要把Spark的开发需要的jar包导进来:



导入包完成后,在工程的scala下面创建一个package:



创建一个Object对象:


完成初始类的创建:



首先构建Spark Driver的模板代码:


该程序是对前面的搜狗日志的处理代码,只不过这个时候在IDEA中编写而已。

共有 人打赏支持
粉丝 59
博文 75
码字总数 51050
×
stark_summer
如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!
* 金额(元)
¥1 ¥5 ¥10 ¥20 其他金额
打赏人
留言
* 支付类型
微信扫码支付
打赏金额:
已支付成功
打赏金额: