微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

错误:在运行由 Maven 使用 spark-submit

如何解决错误:在运行由 Maven 使用 spark-submit

我一直在努力从 Maven 程序集插件构建的 jar 中运行主类,在 POM 文件中使用插件如下,有人可以帮忙吗?

在命令下运行 -

spark-submit --master local --class org.first.spark.Test file:///C:\Users\Prem\TestScala\target\TestScalaTemp.jar

错误 -

错误:无法加载类 org.first.spark.Test。

<plugin>
            <groupId>org.apache.maven.plugins</groupId>
            <artifactId>maven-assembly-plugin</artifactId>
            <configuration>

                <finalName>TestScalaTemp</finalName>
                <appendAssemblyId>false</appendAssemblyId>
                <archive>
                    <manifest>
                        <mainClass>org.first.spark.Test</mainClass>
                    </manifest>
                </archive>
                <descriptorRefs>
                    <descriptorRef>jar-with-dependencies</descriptorRef>

                </descriptorRefs>

            </configuration>
        </plugin>

        <plugin>
            <groupId>org.apache.maven.plugins</groupId>
            <artifactId>maven-compiler-plugin</artifactId>
            <version>3.8.1</version>
            <configuration>
                <source>1.8</source>
                <target>1.8</target>
            </configuration>
        </plugin>

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。