spark 如何与java应用结合
1、1.创建一个文件夹sparkapp2作为应用程序根目录

2、2.在 ./sparkapp2/src/main/java 下建立一个名为 SimpleApp.java 的文件(vim ./sparkapp2/src/main/java/SimpleApp.java),添加代码如下:

3、3.该程序依赖Spark Java API,因此我们需要通过Maven进行编译打包。在./sparkapp2中新建文件pom.xml(vim ./sparkapp2/pom.xml),添加内容如下,声明该独立应用程序的信息以及与Spark的依赖关系:

4、4.使用maven打包应用程序

5、5.文件结构

6、6.下载依赖包

7、7.通过spark-submit提交应用程序

声明:本网站引用、摘录或转载内容仅供网站访问者交流或参考,不代表本站立场,如存在版权或非法内容,请联系站长删除,联系邮箱:site.kefu@qq.com。
阅读量:157
阅读量:91
阅读量:131
阅读量:167
阅读量:21