手机版
热门标签
站点地图
我要投稿
广告合作
联系我们
搜 索
广告位招租
广告位招租
切换导航
首页
人工智能
编程教程
编程导航
编程百科
编程问答
编程博文
编程实例
硬件设备
网络运营
软件教程
移动数码
办公软件
操作系统
网络运维
技术频道
▸ 编程语言
▸ 前端开发
▸ 移动开发
▸ 开发工具
▸ 程序设计
▸ 行业应用
▸ CMS系统
▸ 服务器
▸ 数据库
公众号推荐
微信公众号搜
"智元新知"
关注
微信扫一扫可直接关注哦!
spark-shell
spark-shell专题提供spark-shell的最新资讯内容,帮你更好的了解spark-shell。
初始化时出现pyspark2错误:在发送其端口号之前,Java网关进程已退出
当我尝试初始化pyspark shell时,python似乎出现了一些问题,此错误是pyspark特有的,并且在初始化spark或spar
作者:佚名 时间:2022-10-31
我需要能够在Scala中导入哪个“ JAR”文件?
当我尝试这样做时: <pre><code>scala> import org.apache.parquet </code></pre> 错误提示: <pre><code><consol
作者:佚名 时间:2022-08-15
Jupyter Notebook中的PySpark问题
初始化时出现此错误。我已经设置了master和worker,然后启动了它。尽管在设置了master和spark之后,我没有
作者:佚名 时间:2022-08-14
Spark-shell退格键在屏幕上打印'$ <3>'
我对scala和Spark还是很陌生,当我尝试删除一行代码时,看到的是$ <3>而不是删除所需的行/字符。 <
作者:佚名 时间:2022-08-13
错误:找不到:scala命令wordcount中的值
我正在尝试根据在线视频教程在spark中运行一些scala代码:这是一个字数统计程序 <pre><code>val lines = sc.
作者:佚名 时间:2022-08-11
如何在bash脚本中获取spark-shell << EOF <spark query> EOF的退出状态?
我有一部分shell脚本,如下所示。 spark_data = <code>spark-shell << EOF spark.sql(query) EOF</code> 我
作者:佚名 时间:2022-06-22
如何确定在单个节点上运行的Spark的最佳设置?
我有55 GB的数据需要处理。我在具有32核和180GB RAM(无群集)的单台计算机上运行Spark-shell。由于它是单
作者:佚名 时间:2022-06-03
为什么Spark包解析器`--packages`不会将依赖项复制到$ SPARK_HOME / jars? 与Jupyter一起使用
有人可以向我解释为什么我在<code>com.amazonaws_aws-java-sdk-bundle</code>上使用自动程序包解析器,为什么我必
作者:佚名 时间:2022-06-03
无法使用 spark 从多行 json 字符串或 JSONL 字符串中创建数据帧
我一直在尝试从 jsonl 字符串中形成数据框。我能够形成数据框,但问题是只有单行被读取,忽略其他。<
作者:佚名 时间:2022-06-02
无法在 spark-shell Hadoop 3.2.1 和 spark 3.0.0 中发送 RPC XXXX
我正在尝试在具有 8 Gig 内存的 Windows 10 电脑上以伪分布式模式运行 spark shell。 我能够在 yarn 上提交和运
作者:佚名 时间:2022-06-01
spark-shell 中的 Apache Hudi 示例为 Spark 2.3.0 引发错误
我正在尝试使用 spark-shell 运行此示例 (<a href="https://hudi.apache.org/docs/quick-start-guide.html" rel="nofollow noreferrer
作者:佚名 时间:2022-06-01
在 Windows 上的 Git Bash 中设置 Spark-shell
我的系统上的任何其他软件都没有遇到过这个问题。能够在窗口终端/命令提示符和 Git-Bash 中安装和运行
作者:佚名 时间:2022-06-01
Spark Shell 命令在本地失败
我正在尝试在本地运行 spark-shell 命令,但出现以下错误 <块引用> java.net.BindException:无法分配请求
作者:佚名 时间:2022-05-28
spark-shell 中的 HBase SparkContext 类型不匹配
我正在尝试在 <code>spark-shell</code> 中使用 HBase。有两个集群:Cloudera 和 Hortonwork。 Cloudera 集群执行完美的
作者:佚名 时间:2022-05-25
Spark 配置,org.apache.spark.shuffle.FetchFailedException 连接失败
我在 4 个虚拟机上安装了 hadoop 3.1.0 和 spark 2.4.7。我总共有 32 个内核,128G 内存。我一直在运行 spark-shell
作者:佚名 时间:2022-05-24
无法在包 org.apache.spark.deploy 中访问包部署中的对象 SparkHadoopUtil
为什么 SparkHadoopUtil 在这里无法访问,而在较低版本的 spark 中却可以访问,即使它们是导入的? <pre><
作者:佚名 时间:2022-05-17
如何通过删除字段周围的引号和双引号来格式化 CSV 数据
我正在使用一个数据集,显然它的每一行都有“双引号”。我无法看到它,因为它在我使用浏览器时默
作者:佚名 时间:2022-05-14
使用不等列的分区从 S3 读取数据
我在 S3 中有一些分区数据,每个分区都有不同数量的列,如下所示。当我在 pyspark 和 tru 中读取数据以
作者:佚名 时间:2022-05-03
在 linux 机器上使用 s3a 失败 >100 列镶木地板
我正在使用 s3a 从数据库读取数据帧并写入 .parquet(s3a://bucketname//folder)。 它适用于 <100 列数据框,但 crash
作者:佚名 时间:2022-04-30
从 Apache Spark 加载时以科学格式存储在 Hive 表中的小数
我在使用 hive 表时遇到问题,其中十进制数(例如 0.00000000000)存储为 0E-11。即使它们代表相同的值 0,
作者:佚名 时间:2022-04-30
上一页
1
2
下一页
小编推荐
苹果市值2025年有望达4万亿美元
• 联想拯救者Y700发布:骁龙8 Gen 3 价格
• 雷神新款25寸显示器上市:1080P 300Hz屏
• Redmi Note 14系列卖爆 女性用户增多 1
• 腾讯:不再公开显示职级!不希望被官僚
• 三只羊“财色录音”是假的!但背后技术
• 视频美颜SDK与直播美颜工具API的架构设
• 淘宝已接入微信支付!官方确认:京东双
热门标签
更多
python
JavaScript
java
HTML
PHP
reactjs
C#
Android
CSS
Node.js
sql
r
python-3.x
MysqL
jQuery
c++
pandas
Flutter
angular
IOS
django
linux
swift
typescript
路由器
JSON
路由器设置
无线路由器
h3c
华三
华三路由器设置
华三路由器
电脑软件教程
arrays
docker
软件图文教程
C
vue.js
laravel
spring-boot