程序员经验分享-hwhale

在 Windows 上安装 Apache Spark 时没有名为“资源”的模块

2023-11-21

我正在尝试安装 apache Spark 以在我的 Windows 计算机上本地运行。我已遵循此处的所有说明https://medium.com/@loldja/installing-apache-spark-pyspark-the-missing-quick-start-guide-for-windows-ad81702ba62d.

安装完成后，我可以成功启动 pyspark，并执行以下命令

textFile = sc.textFile("README.md")

然后，当我执行对 textFile 进行操作的命令时，例如

textFile.first()

Spark 给我错误“worker 无法连接回”，并且我可以在控制台中看到来自worker.py 的异常，显示“ModuleNotFoundError：没有名为资源的模块”。查看源文件，我可以看到这个 python 文件确实尝试导入资源模块，但是该模块在 Windows 系统上不可用。我知道您可以在 Windows 上安装 Spark，那么我该如何解决这个问题呢？


我整个早上都在为同样的问题而奋斗。最好的选择是降级到 Spark 2.3.2

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)

python

Windows

apachespark

在 Windows 上安装 Apache Spark 时没有名为“资源”的模块 的相关文章

随机推荐

  • 如何强制 DriverManager.getConnection() 方法调用超时？

    我有一个应用程序将与 MySQL 建立数据库连接并执行查询 有时 DriverManager getConnection 方法调用需要2秒 有时需要30秒 有没有办法控制这个方法2秒后超时 DriverManager setLoginTim

  • Flask SQLAlchemy 分页错误

    我有这个代码和all 方法和所有其他方法都适用于此 我已经查看了所有内容 我可以认为该方法paginate 致力于BaseQuery这也是Query app route app route index app route blog app

  • 如何修复 xamarin android 中的“不允许到 x 的明文 HTTP 流量”

    我的应用程序存在问题 不允许到 x 的明文 HTTP 流量 我已经尝试将 android usesCleartextTraffic true 放入我的清单中 但我想将 android usesCleartextTraffic 标志更改为 f

  • 在 F# 中，谁负责消息队列？

    在 F 中 如果我做类似的事情 让表单 新表单 文本 MyForm 在FSI中运行它 表单将正常显示和更新 甚至可以接收消息 然而 谁在泵送消息队列呢 这里没有 Application Run 调用 我有点困惑 正如 ildjarn 所说

  • CasperJS，使用测试框架并行浏览

    问题 我想知道是否可以进行并行浏览将测试框架放在一个脚本文件中 因此使用 tester 模块和 casperjs test 命令 我见过有些人创建了两个 casper 实例 CasperJS并发请求 and https groups goo

  • 使用 ShowDialog 和无边框窗口时，IsMouseOver 触发器不起作用

    我有两个Windows申请 其中之一是MainWindow另一个是设置 SettingsWindow单击设置按钮时打开ShowDialog并设置其Owner to MainWindow On the SettingsWindow我在窗口的最

  • Internet Explorer 11-出现安全证书错误提示问题

    我正在 IE11 中测试一个网站 它具有混合内容 http 和 https 在以前的版本中 会有一个提示询问我们应该允许安全证书错误的内容 但IE11中无此提示 站点崩溃 我尝试更改 高级选项 中的安全设置 但没有用 请建议 此行为与设置的

  • HTTP 响应有重定向，但没有往返？

    我希望浏览器反映除用于创建请求的 URL 之外的其他 URL 但无需往返服务器 我也许会这样做 POST form HTTP 1 1 然后返回 HTTP 1 1 200 OK Location hello 但这会导致重定向 浏览器将再次请求

  • 按值列表对查询结果排序

    我正在处理一个 sql 查询 它传递一个值列表作为参数 例如 select from ProductGroups where GroupID in 24 12 7 14 65 该列表由整个数据库中使用的关系构成 并且必须按此顺序保存 我想按

  • 关于让 xxhdpi 在 Android 模拟器中工作有什么建议吗？

    我尝试手动配置 AVD 以支持 xxhdpi 480 dpi 但是 Android 模拟器的最大支持 xhdpi 320 dpi 是的 文档说 xhdpi 可以扩展 但是 我希望看到它工作 我目前正在尝试从源代码构建 android 看看是

  • 角度指令 attrs.$observe

    我在网上找到了这个 Angular 指令来添加 Twitter 分享按钮 一切似乎都是显而易见的 但我不知道发生了什么attrs observe实际上正在做 我查看了文档但看不到 observe任何地方都可以引用 该指令似乎只是添加了hre

  • 如何检查线程是否位于同步块或方法内？

    我的 Java 应用程序使用两个线程 从历史上看 有同步方法和专用锁对象在使用 我需要知道当前线程是否有锁 以及它是通过方法还是对象 我怎样才能做到这一点 当进入同步方法时 VM 对当前对象设置锁 因此以下代码具有相同的效果 synchro

  • PostgreSQL UTF-8 二进制排序规则

    我想要一个排序规则 将 0x1234 的 UTF 8 编码排序为低于 0x1235 而不管 Unicode 标准中的字符映射如何 MySQL 为此使用 utf8 bin MSSQL 显然http msdn microsoft com en

  • 在Sql Server中将2个数字相除

    我正在进行 SQL Server 查询计算 除法总是给我零 SUM sl LINES ORDERED SUM sl LINES CONFIRMED SUM sl LINES CONFIRMED SUM sl LINES ORDERED AS

  • 使用 Azure WebJobs SDK 进行依赖注入？

    问题在于 Azure WebJobs SDK 仅支持公共静态方法作为作业入口点 这意味着无法实现构造函数 属性注入 我无法在官方 WebJobs SDK 文档 资源中找到有关此主题的任何内容 我遇到的唯一解决方案是基于这篇文章中描述的服务定

  • Chrome 失败错误代码

    I ve been searching for a while now and I can t find the exact list of all fail to load error code error description of

  • 正则表达式和匹配[关闭]

    这个问题不太可能对任何未来的访客有帮助 它只与一个较小的地理区域 一个特定的时间点或一个非常狭窄的情况相关 通常不适用于全世界的互联网受众 为了帮助使这个问题更广泛地适用 访问帮助中心 以下是 PHP 正则表达式示例的示例列表 也许这对某人

  • 如何在 JavaScript 中声明嵌套对象？

    我正在尝试创建一个包含对象的对象 因此将其视为字典 var dictionaries dictionaries english to french english hello french bonjour english i want fr

  • taskkill 和 taskkill /f 之间的区别

    On 微软技术网我可以读到taskkill has a f参数强制终止进程 我想知道这在内部做了什么 以了解这种行为的影响 taskkill 没有 f 不会简单地向进程发送 WM CLOSE 消息 否则我的应用程序会询问是否保存打开的文档

  • 在 Windows 上安装 Apache Spark 时没有名为“资源”的模块

    我正在尝试安装 apache Spark 以在我的 Windows 计算机上本地运行 我已遵循此处的所有说明https medium com loldja installing apache spark pyspark the missin

热门标签