微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

OLAP 查询 Spark 不适用于 Janusgraph

如何解决OLAP 查询 Spark 不适用于 Janusgraph

在 Janusgraph 和 Apache Spark 中使用 OLAP 处理。它没有提高性能,反而降级了。

查询

g.V().has('property1','ABC').inE().outV().has('property2',33).properties('property1','property2').group().by(key).by(value().sum())

错误

14:15:42 WARN  org.apache.spark.storage.BlockManager  - Block rdd_11_1 Could not be removed as it was not found on disk or in memory
14:15:42 ERROR org.apache.spark.executor.Executor  - Exception in task 3.0 in stage 4.0 (TID 18)
java.lang.NoSuchMethodError: net.jpountz.lz4.LZ4BlockInputStream.<init>(Ljava/io/InputStream;Z)V
    at org.apache.spark.io.LZ4CompressionCodec.compressedInputStream(CompressionCodec.scala:122)
    at org.apache.spark.serializer.SerializerManager.wrapForCompression(SerializerManager.scala:163)
    at org.apache.spark.serializer.SerializerManager.wrapStream(SerializerManager.scala:124)
    at org.apache.spark.shuffle.BlockStoreShuffleReader$$anonfun$3.apply(BlockStoreShuffleReader.scala:50)
    

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。