zl程序教程

您现在的位置是:首页 >  其他

当前栏目

Spark程序打包

2023-09-14 08:57:20 时间

背景:

spark程序,使用scala语言开发。整个项目中包含多个子模块,依赖包文件使用maven来管理。

 

打包:

方法一:使用artifacts来

 

选择模块,选择对应的主函数:

 

 点ok保存。

 

 

由于spark程序部分依赖包服务器上已有,只需要包含几个自定义的jar包即可。因此,需要手工将多余的jar包删除。

最后仅仅保留3个自己指定的依赖包,确定。

 

从主菜单中build:

 

最后生成jar在class\artifacts目录下:

 

注意点: 如果不是第一次打包,一定使用rebuild,build重复打包有时候更新不成功。