spark 如何与java应用结合

 时间:2024-10-13 13:13:12

1、创建一个文件夹sparkapp2作为应用程序根目录

spark 如何与java应用结合

2、在 ./sparkapp2/src/main/java 下建立一个名为 SimpleApp.java 的文件(vim ./sparkapp2/src/main/java/SimpleApp.java),添加代码如下:

spark 如何与java应用结合

3、该程碌食撞搁序依赖Spark Java API,因此我们需要通过Maven进行编译打包。在./sparkapp2中新建文件pom.x罪焐芡拂ml(vim ./sparkapp2/pom.xml),添加内容如下,声明该独立应用程序的信息以及与Spark的依赖关系:

spark 如何与java应用结合

4、使用maven打包应用程序

spark 如何与java应用结合

5、文件结构

spark 如何与java应用结合

6、下载依赖包

spark 如何与java应用结合

7、通过spark-submit提交应用程序

spark 如何与java应用结合
  • Notepad++怎么不自动检测字符编码
  • 图解Navicat删除数据库、备份/还原和导出导入
  • MyEclipse注册码
  • navicat连接数据库详解
  • eclipse javaEE配置tomcat8,正常启动
  • 热门搜索
    张家界旅游景点图片 芙蓉镇旅游 常州旅游攻略 美国个人旅游签证 平潭岛旅游 石家庄旅游攻略 江门大方旅游 中国旅游经济蓝皮书 和儿子旅游爬山做了儿子带套 美东旅游