程序员经验分享-hwhale

终止 aws 中的 Spark 步骤

2024-01-19

我想在 EMR Spark 集群上设置一系列 Spark 步骤，并在当前步骤花费太长时间时终止当前步骤。但是，当我 ssh 进入主节点并运行 hadoop jobs -list 时，主节点似乎认为没有正在运行的作业。我不想终止集群，因为这样做会迫使我为我正在运行的任何集群购买一整小时的时间。谁能帮我终止 EMR 中的 Spark-Step，而不终止整个集群？


这很容易：

yarn application -kill [application id]

您可以列出正在运行的应用程序

yarn application -list
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)

Hadoop

amazonwebservices

apachespark

EMR

终止 aws 中的 Spark 步骤 的相关文章

随机推荐

  • 无法从 master 连接到 kubernetes pod：i/o 超时

    我配置了 1 个主节点和一个节点的 kubernetes 集群 运行主节点和节点的机器不在同一网络中 对于网络 我安装了 calico 并且所有 pod 都在运行 为了测试我使用的集群获取外壳示例 https kubernetes io d

  • 用 Java 写入文件

    我对 Java 很陌生 由于某种原因我无法写入文件 我的代码如下所示 FileWriter fstream try fstream new FileWriter fileLocation BufferedWriter out new Buf

  • 如何定期更新 Label 控件的值？

    我试图让标签显示一些文本 然后在一段时间后刷新自身并能够稍后重新显示其他内容 但目前我不知道如何使标签暂停 如果可能的话 到目前为止我的代码 foreach var x in mod labelWARNING Visible true la

  • 全屏纹理采样的最佳方式

    在片段着色器中采样全屏纹理的最佳方法是什么 例如延迟渲染器中的 g 缓冲区 或后处理着色器中的场景纹理 目前我使用以下两种方式 将屏幕尺寸作为统一值传递给着色器并计算 u v gl FragCoord vec2 texCoord gl Fr

  • 在 .each 循环中显示一个条目的模式 - Rails / Bootstrap

    我想要一个链接来打开一个模式 显示单击的对象 word title 显示在每个循环中 现在它会打开模式 但随后会为循环中的每个项目再次显示它 h1 Glossary of words h1 p Pagination at 25 p tabl

  • 如何将 CSV 或 JSON 导入到 firebase cloud firestore

    有没有办法像 Firebase 实时数据库一样将 CSV 或 JSON 导入到 firebase cloud firestore 通用解决方案 我发现许多脚本允许上传 JSON 但没有一个允许子集合 我上面的脚本处理任何级别的嵌套和子集合

  • 如何使用XNA加载文件夹中的所有文件？

    我想加载文件夹中的所有文件 内容 纹理 进入游戏使用Content Load 文件名 但是 我无法以这种方式 找到 位于 Content 内的文件 该程序而是查看 bin 调试 内容 纹理 但是当尝试使用 Content Load 加载 j

  • 模板类成员特化声明

    当我在模板类中专门化一个 静态 成员函数 常量时 我 对声明的去向感到困惑 这是我要做什么的一个例子 直接来自IBM 关于模板专业化的参考 http publib boulder ibm com infocenter comphelp v8

  • Koa 中的 Promise 错误处理

    如果我在 Koa 中做出承诺 它们可能会被拒绝 function fetch var deferred q defer Some async action which calls deferred reject return deferre

  • 如何让Android上的工具栏占据全宽？

    结果如下 https i stack imgur com VgbZT png https i stack imgur com VgbZT png 我希望它位于状态栏正下方且全宽 就像这样 https i stack imgur com FF

  • Internet Explorer 8 在哪里存储其故障转储？

    我正在对抗一个错误 该错误不会在我的计算机上重现 但每次都会在我客户的计算机上重复 我已经尝试了一切 现在我正在寻找 IE8 崩溃后留下的任何调试数据 或其他数据 谷歌和微软的搜索没有给我任何结果 Internet Explorer 8 在

  • npm 错误！ npm install 时代码 EINTEGRITY

    当我尝试进行 npm install 时 出现此错误 npm ERR code EINTEGRITY npm ERR sha512 boQj1WFgQH3v4clhu3mTNfP vOBxorDlE8EKiMjUlLG3C4qAESnn9A

  • 将 div 定位到包含 div 的底部

    如何将 div 定位到包含 div 的底部 div class outside div class inside inside div div 此代码将文本 inside 放置在页面底部 outside width 200px height

  • aov 公式错误项：矛盾的例子

    我已经看到了 R 中受试者内设计的通用公式的两种基本方法aov R 随机 X 依赖 W 内 B 之间 Pure within X Error R W1 W2 or X W1 W2 Error R W1 W2 Mixed X B1 B2 Er

  • deep=True 在 pyyaml.Loader.construct_mapping 中做什么？

    在网上搜索自定义构造函数的用法时 我看到如下内容 def some constructor loader node value loader construct mapping node deep True return SomeClass

  • Fortran I/O：指定大记录大小

    我正在尝试将一个数组写入文件 我以这种方式打开文件 open unit 20 FILE output txt form unformatted access direct recl sizeof u Here u是一个数组并且sizeof

  • 如何调整散景轴上的刻度数（标签在小数字上重叠）

    我有一个由垂直堆叠和对齐的图形组成的多图形散景图 因为我想垂直对齐图 所以 y 轴标签旋转为垂直而不是水平 在某些情况下 散景会产生太多刻度 以致刻度标签完全重叠 导致难以辨认 这是一个例子 import bokeh plotting as

  • 我的中断处理程序应该禁用中断还是 ARM 处理器自动执行此操作？

    我们的小组使用定制驱动程序在共享 I2C 总线上连接四个 MAX3107 UART 四个 MAX3107 的中断连接 即通过逻辑或运算共享中断 到 ARM9 处理器 LPC3180 模块 上的 GPIO 引脚 当这些设备中的一个或多个中断时

  • Python 中的模块和包有什么区别？

    Python 中的模块和包有什么区别 也可以看看 包 和 模块 有什么区别 https stackoverflow com questions 3680883 whats the difference between package and

  • 终止 aws 中的 Spark 步骤

    我想在 EMR Spark 集群上设置一系列 Spark 步骤 并在当前步骤花费太长时间时终止当前步骤 但是 当我 ssh 进入主节点并运行 hadoop jobs list 时 主节点似乎认为没有正在运行的作业 我不想终止集群 因为这样做

热门标签