如何解决Spark-HBase - GCP 模板 (1/3) - 如何在本地打包 Hortonworks 连接器?
我正在尝试在 GCP 上下文中测试 Spark-HBase 连接器并尝试遵循 [1],它要求使用 Maven(我尝试过 Maven 3.6.3)为 Spark 2.4 在本地打包连接器 [2],并导致以下问题。
错误“branch-2.4”:
[ERROR] Failed to execute goal net.alchim31.maven:scala-maven-plugin:3.2.2:compile (scala-compile-first) on project shc-core: Execution scala-compile-first of goal net.alchim31.maven:scala-maven-plugin:3.2.2:compile failed.: NullPointerException -> [Help 1]
参考资料
[1] https://github.com/GoogleCloudPlatform/cloud-bigtable-examples/tree/master/scala/bigtable-shc
[2] https://github.com/hortonworks-spark/shc/tree/branch-2.4
解决方法
正如评论中所建议的(感谢 @Ismail !),使用 Java 8 可以构建连接器:
@keyframes anim1 {
0%{
transform: rotate(0deg);
}
50%{
transform: rotate(180deg);
}
100%{
transform: rotate(180deg);
}
}
@keyframes anim2 {
0%{
transform: scale(1,1);
}
50%{
transform: scale(1.111,1.111);
}
100%{
transform: scale(1,1);
}
}
.button{
animation: anim1 3s ease-in-out,anim2 5s ease-in-out;
}
sdk use java 8.0.275-zulu
然后可以按如下方式在 GCP template 的 mvn clean package -DskipTests
中导入 jar。
Dependencies.scala
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。