1. 项目打包
新建CMD,移动至项目文件夹下,输入代码,开始打包:
image.png
打包完成后,会显示BUILD SUCCESS,如图:
image.png
- 注意!!!
- 如果BUILD FAILD的话,可以在Eclipse里面把程序运行一下,再重新BUILD
此时项目文件夹的target文件夹中会有两个jar包。
其中,第二个为包含依赖包的jar包。
image.png
2.项目发布
新建一个cmd,输入:
spark-submit --master yarn-cluster --class 包名称.主类名称 完整文件路径
项目发布成功后,等待阿里云yarn集群程序运行完成。
image.png
无论项目运行成功与否,都会出现一个track view URL,用于在阿里云的Spark UI 中查看项目运行结果输出,或者查看错误信息。
在logs中的stdout中可以查看项目运行过程中的输出信息
在stderr中可以查看项目运行过程中的日志信息,包括loginfo、error等。
image.png
网友评论