特牛生活网

maven环境下使用java、scala混合开发spark应用_scala可以和java代码一起打jar包然后提交spark任务-CSDN博客

网友收藏
文章浏览阅读9.3k次。熟悉java的开发者在开发spark应用时,常常会遇到spark对java的接口文档不完善或者不提供对应的java接口的问题。这个时候,如果在java项目中能直接使用scala来开发spark应用,同时使用java来处理项目中的其它需求,将在一定程度上降低开发spark项目的难度。下面就来探索一下java、scala、spark、maven这一套开发环境要怎样来搭建。1、下载scala sdkht_scala可以和java代码一起打jar包然后提交spark任务