手机版
热门标签
站点地图
我要投稿
广告合作
联系我们
搜 索
广告位招租
广告位招租
切换导航
首页
人工智能
编程教程
编程导航
编程百科
编程问答
编程博文
编程实例
硬件设备
网络运营
软件教程
移动数码
办公软件
操作系统
网络运维
技术频道
▸ 编程语言
▸ 前端开发
▸ 移动开发
▸ 开发工具
▸ 程序设计
▸ 行业应用
▸ CMS系统
▸ 服务器
▸ 数据库
公众号推荐
微信公众号搜
"智元新知"
关注
微信扫一扫可直接关注哦!
yarn
yarn专题提供yarn的最新资讯内容,帮你更好的了解yarn。
如何减少火花作业中的“未使用的 Vcore 秒”?
我正在运行 Spark 作业,其中运行我的 spark sql 查询,这些查询既复杂又冗长。 由于作业运行了数小
作者:佚名 时间:2022-05-18
在集群模式下使用 spark-submit 运行时,将文件从 HDFS 复制到 Java 代码中的本地目录
我正在开发一个 Java 程序,其中一些代码生成一个文件并将其存储在某个 HDFS 路径上。然后,我需要将
作者:佚名 时间:2022-05-18
纱线上的 flink 显示部署花费了 60 多秒请检查请求的资源在 YARN 集群中是否可用
我在我的集群上启动了 hdfs 和 yarn,有一个 jobmanager 和两个 taskmanager,jps 在 master 显示: <pre><code
作者:佚名 时间:2022-05-17
使用 hadoop 库在 YARN 上等待日志聚合
我使用了 <code>LogAggregationFileController</code> 的 <code>apache hadoop-3.2.2</code> (<a href="https://hadoop.apache.org/docs/curr
作者:佚名 时间:2022-05-16
如何为分区键定义特定的火花节点?
我需要在异构集群中运行数据集的相似性连接算法。 在程序的第一步中,对数据集的记录进行签名
作者:佚名 时间:2022-05-16
YARN Fair-Scheduler 不会将工作置于待处理状态
我面临一个与 YARN 的公平调度程序相关的问题。 (Hadoop 3.2.2) 我有一组作业,比如说 6 个,它们都提
作者:佚名 时间:2022-05-15
“纱线服务”类型的 LLAP 卡在接受状态
名称为“yarn-service”的应用程序 llap0 已卡在接受状态,无法运行,因此 HiveServer2 Interactive 无法启动。
作者:佚名 时间:2022-05-15
Log4j 文件旋转在火花纱中不起作用
我使用自定义 log4j 属性将我的应用程序提交给 yarn。自定义配置本身被驱动程序和执行程序识别和使用
作者:佚名 时间:2022-05-15
Spark YARN 客户端模式1 个主站,4 个从站:无法更改驱动程序内存 master 的日志文件显示 -Xmx1g
我在带有 <strong> 的 ec2 <strong>集群</strong> 上使用 <strong>spark-2.4.7-without-hadoop</strong> 和 <strong>hadoop-3.2.2</str
作者:佚名 时间:2022-05-14
hive 如何管理基于非 Tez 和非 MapReduce 的查询
<pre><code>Create table t1(id int) </code></pre> 我在 Hive 2.3.6 (MapR Hadoop Distribution 6.3.0) 上触发了上述查询。
作者:佚名 时间:2022-05-14
Spark-yarn客户端模式下的ApplicationMaster如何工作?
我对火花很陌生。目前我正在寻找 Spark 代码以更好地了解它的工作原理。 据我所知,在 Spark Client
作者:佚名 时间:2022-05-14
pySpark:所需的执行程序内存
当我在 pyspark 上尝试 <code>conf.set("spark.executor.memory", "42g")</code> 时,我收到这条消息“<code>Ill
作者:佚名 时间:2022-05-14
使用 Conda Env 问题运行 PySpark
我正在尝试根据以下内容使用 PySpark 传输 python 环境: <a href="https://community.cloudera.com/t5/Community-Artic
作者:佚名 时间:2022-05-14
有没有办法通过 applicationID 以及链接的 spark-submit 命令获取纱线日志?
我在 <strong>Amazon EMR</strong> 上有大约 400 个 <strong>yarn</strong> 应用程序,我以 20 个为一组运行这些应用程
作者:佚名 时间:2022-05-11
什么可能导致 Yarn NodeManager 中看似随机的 NoSuchMethodError
执行 37 小时后,一个 Flink 批处理作业(在 YARN 上运行)在我们的集群上失败,NodeManager 进程抛出错误:
作者:佚名 时间:2022-05-10
有没有办法选择在 Spark ui 应用程序中显示哪些作业?
我正在寻找一种方法来减少 Spark ui 工作的数量,而这些工作只有我感兴趣的工作。 例如,如果我
作者:佚名 时间:2022-05-09
dask-yarn 作业在读取镶木地板时因 dumps_msgpack ImportError 失败
我正在尝试在 AWS EMR 集群上使用 <code>dask-yarn</code> 对一个小型镶木地板文件(10K 条记录)进行简单的读
作者:佚名 时间:2022-05-08
dask-yarn 脚本因分布式.scheduler.KilledWorker 和空工人而失败
我正在尝试运行以下代码以在 HD Insight Spark 集群上测试 dask-yarn,该集群具有两个头节点和两个具有 4 个
作者:佚名 时间:2022-05-04
Yarn NodeManager 以 0xc0000bb8 启动失败
我正在按照本指南在我的 <strong>Windows 10</strong> 电脑上安装 <strong>Apache Hadoop 3.2.2</strong>:<a href="https://kon
作者:佚名 时间:2022-05-03
在 Windows 10 上的带有空格的目录中运行包时出现问题
通过我跑的终端 <code>yarn create xxxxxxx-app</code> 在 URL 中有空格的目录中,但它失败了,因为它无法理解完
作者:佚名 时间:2022-05-03
上一页
7
8
9
10
11
12
13
14
下一页
小编推荐
苹果市值2025年有望达4万亿美元
• 联想拯救者新一代Y700平板通过IMDA认证
• 最新AI生图模型Flux1.1刷屏!添加单反相
• 联发科天玑 9400 频率敲定,3.626GHz 最
• 苹果新品发布会来了!5款产品面临停产
• 佳能R5C Mark II配置曝光:双系统设计,
• AI应用的东风,奥特曼不想错过
• 为新品让路!苹果定制版Mac发货延期
热门标签
更多
python
JavaScript
java
HTML
PHP
reactjs
C#
Android
CSS
Node.js
sql
r
python-3.x
MysqL
jQuery
c++
pandas
Flutter
angular
IOS
django
linux
swift
typescript
路由器
JSON
路由器设置
无线路由器
h3c
华三
华三路由器设置
华三路由器
电脑软件教程
arrays
docker
软件图文教程
C
vue.js
laravel
spring-boot