微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

Spark Kernel 提供程序使用 Apache Spark 的基础

程序名称:Spark Kernel

授权协议: Apache 2.0

操作系统: 跨平台

开发语言: Scala

Spark Kernel 介绍

Spark Kernel 的最主要目标:提供基础给交互应用程序联系和使用 Apache
Spark

几个主要特性:

  1. 定义和运行 Spark 任务

  2. 以类似 Scala REPLSpark Shell 的方式,动态地执行 Scala 代码

  3. 收集数据存储的结果

  4. 通过 Spark Kernel,将执行结果和数据流返回到你的应用程序。

  5. 使用 Comm API —— 一个 IPython 协议的抽象 —— 在你的应用程序和 Spark Kernel 之间进行更详细的数据通信和同步。

  6. 脱离 Apache Spark 来主持(Host)和管理你的应用。

  7. Spark Kernel 作为向 Apache Spark 集群发出的请求的一个代理。

Spark Kernel 官网

https://developer.ibm.com/open/spark-kernel/

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐