在 Windows 上运行 COPY 命令时发生酸洗错误:CQLShell

2023-12-14

我们在 Windows 7 上的 CQLShell 中运行复制命令。首先,我们遇到了“不正确的复制命令”:

COPY ourdata(data_time, data_ID, dataBlob)
FROM 'TestData.csv'
WITH HEADER = true;

后来我们在运行相同的命令后开始收到此错误:

Error starting import process:

Can't pickle <type 'thread.lock'>: it's not found as thread.lock
can only join a started process
cqlsh:testkeyspace> Traceback (most recent call last):
               File "<string>", line 1, in <module>
               File "C:\Program Files\DataStax\Community\python\lib\multiprocessing\forking.py",
                      line 373, in main
               prepare(preparation_date)
               File "C:\Program Files\DataStax Community\python\lib\multiprocessing\forking.py",
                      line 482, in prepare
                      file, path_name, etc = imp.find_module(main_name, dirs)
ImportError: No module named cqlsh

我们不确定这是否是路径问题(没有名为 cqlsh 的模块),或者是 csv 文件的 python pickle 对象问题。


所以我去测试了一下。我在 Cassandra 2.1.5 中创建了两个简单的表(顺便说一句-您使用的是哪个版本?)在 Windows 和 Linux 上。然后我在每个上测试了 COPY TO/FROM。

Linux(Ubuntu 14.04.2 LTS):

Connected to Test Cluster at dockingbay94:9042.
[cqlsh 5.0.1 | Cassandra 2.1.5 | CQL spec 3.2.0 | Native protocol v3]
Use HELP for help.
aploetz@cqlsh> use stackoverflow2;
aploetz@cqlsh:stackoverflow2> COPY dummy3(id,time) TO '/home/aploetz/dummy3.txt' 
    WITH HEADER=true AND DELIMITER='|';

4 rows exported in 0.071 seconds.
aploetz@cqlsh:stackoverflow2> COPY dummy4(id,time) FROM '/home/aploetz/dummy3.txt' 
    WITH HEADER=true AND DELIMITER='|';

4 rows imported in 0.427 seconds.

Windows 8.1:

Connected to Window$ Cluster at 127.0.0.1:9042.
[cqlsh 5.0.1 | Cassandra 2.1.5 | CQL spec 3.2.0 | Native protocol v3]
Use HELP for help.
WARNING: pyreadline dependency missing.  Install to enable tab completion.
aploetz@cqlsh> use stackoverflow;
aploetz@cqlsh:stackoverflow> COPY dummy3(id,time) TO 'e:\dummy3.txt' 
    WITH HEADER=true AND DELIMITER='|';

4 rows exported in 0.020 seconds.
aploetz@cqlsh:stackoverflow> COPY dummy4(id,time) FROM 'e:\dummy3.txt' 
    WITH HEADER=true AND DELIMITER='|';

Error starting import process:

Can't pickle <type 'thread.lock'>: it's not found as thread.lock
can only join a started process
aploetz@cqlsh:stackoverflow> Traceback (most recent call last):
  File "<string>", line 1, in <module>
  File "E:\Program Files\DataStax Community\python\lib\multiprocessing\forking.py", line 373, in main
    prepare(preparation_data)
  File "E:\Program Files\DataStax Community\python\lib\multiprocessing\forking.py", line 482, in prepare
    file, path_name, etc = imp.find_module(main_name, dirs)
ImportError: No module named cqlsh

因此,COPY TO(导出)工作正常,但 COPY FROM(导入)在 Windows 上失败。

DataStax 的 Josh McKenzie 在 12 月发表了一篇帖子,标题为:Cassandra 和 Windows:过去、现在和未来。在其中,他详细讨论了 Cassandra 在 Windows 上长期存在的一些问题。本质上,Windows NTFS 可以防止其他进程更改/删除其他进程正在使用(锁定)的文件。而这些问题直接影响CQLSH将数据COPY到Cassandra的能力。

有一张 JIRA 票(卡桑德拉-9670)解决了类似的问题(在 Windows 上使用 CQLSH 运行 cql 脚本会产生相同的错误消息)。我强烈怀疑这两个问题是相关的。无论如何,Cassandra 预计将在 Windows 3.0 版本上得到支持,该版本目前正在“开发中”。我尝试了一些技巧,看看能否在 Windows 上找到解决此问题的方法,如果找到,我会报告。但目前,您可能只需在 Linux 上使用 Cassandra 即可受益于其完整功能。

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

在 Windows 上运行 COPY 命令时发生酸洗错误:CQLShell 的相关文章

随机推荐