Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
排除特定子文件夹
我有一个包 它通过一个文件夹及其子文件夹运行来获取客户端数据 协议已更改 现在客户每次都会将其数据发布到不同的文件夹名称中 我想知道是否可以在主文件夹上执行 foreach 循环并排除特定文件夹 例如archive 我没有编写脚本的知识 所
sqlserver
SSIS
ETL
ssis2012
foreachloopcontainer
当使用 Python 处理一个巨大的 CSV 并突然停止时,“killed”是什么意思?
我有一个 Python 脚本 它导入一个大型 CSV 文件 然后计算文件中每个单词的出现次数 然后将计数导出到另一个 CSV 文件 但正在发生的事情是 一旦计数部分完成并开始导出 它就会说Killed在终端中 我不认为这是一个内存问题 如果
python
csv
ETL
kill
SSIS:创建具有不同行格式的平面文件
我想创建一个平面文件输出 其中行的格式不同 文件有标题行 中间数据行 页脚行 文件如下所示 H deptcode123 deptNameXYZ totalemp300 E Sam Johnson address1 empCode1 many
sqlserver
SSIS
ETL
ssis2012
bids
插入带有特殊字符的 Hive 表内容 - 制表符空格和换行符
我正在尝试从 Hive 表中筛选 where 子句 选择带有特殊字符 特别是 Tab 和 NewLine 的数据 我努力了 我努力了like n like t like hex 9 等等 但它们似乎不起作用 还尝试创建一个虚拟表来插入此类数
hive
specialcharacters
ETL
HiveQL
使用 sqlalchemy 将数据加载到 Oracle 数据库时不允许使用“Multi”方法
我正在使用 sqlalchemy 和 pandas 将数据帧加载到 Oracle 数据库 由于 multi 方法允许批量上传 因此我选择该方法 我的pandas版本是1 0 1 但是我收到以下错误 当前数据库版本设置的 oracle 方言不
python
Oracle
sqlalchemy
ETL
重塑表格以将行转换为列
我尝试搜索帖子 但只找到了 SQL Server Access 的解决方案 我需要 MySQL 5 X 中的解决方案 我有一个包含 3 列的表 称为历史记录 hostid itemname itemvalue 如果我做一个选择 select
sql
mysql
pivottable
ETL
SSIS:更新或插入后删除行
这是以下情况 我有一张桌子学生需要与不同服务器上的另一个表同步 学生B 这是从 A 到 B 的单向同步 由于表 StudentsA 可以容纳大量行 因此我们有一个名为学生同步 在输入服务器上 包含 ID学生自上次复制以来已被修改学生 to
sqlserver
ETL
SSIS
SSIS 包在调试时立即取消
我有一个相当简单的 SSIS 包 我已经多次使用它来将制表符分隔的文件导入到数据库中的单个表中 我将新的源文件附加到包中并尝试运行该包 包开始了 cmd 提示符会短暂出现 然后消失 然后该进程在平面文件源组件上退出 输出显示如下 SSIS
sql
SSIS
ETL
flatfile
我需要 ETL 吗?
我们目前使用 Datastage ETL 每天导出包含 15 个表 3 个不同模式 中的数据的 CSV 文本文件 我想知道是否有一种更简单的方法可以在不使用 ETL 的情况下完成此任务 我尝试过脚本拉 它看起来简单 快速 但它又是一个 ET
ETL
将数据从 SAP 传输到 SQL Server 的最佳方法是什么?
我们希望基于 SAP 表从头开始构建一个新的数据仓库 对于提取 转换和加载 ETL 过程 我们希望使用 Microsoft SQL Server Integration Services 市场上有许多供应商 如 Theobald CData
SSIS
ETL
datawarehouse
saperp
sapdotnetconnector
执行具有多个结果集的存储过程
我正在使用 SSIS 2016 存储过程返回 4 个结果集 只有第一个结果集是相关的 需要写入表中 我无法修改存储过程 我不关心其他结果集中返回的任何数据 存储过程位于 SQL Server 2016 数据库中 结果也将驻留在 SQL Se
sqlserver
SSIS
ETL
ssis2008
ssis2016
在SSIS中显示foreach循环迭代次数
我需要检查在 Visual Studio 2017 中运行的 foreach 循环容器任务的迭代次数 如何实现此目的 1 使用Expression Task计算迭代次数 SSIS 2012 中可用的任务 在 Foreach 循环容器中 没有
sqlserver
SSIS
ETL
foreachloopcontainer
ssis2017
将 SQL Server 数据库数据移至 SAP BW
我读过一些关于将数据从 SAP BW 移入 SQL Server 的文章 我找不到任何有关将数据从 SQL Server 移动到 SAP BW 的文章 这是否可能 如果可以 处理此问题的最佳方法是什么 在搜索这个主题后 我发现了许多解决这个
sqlserver
SSIS
ETL
datawarehouse
sapbw
动态分配文件名到Excel连接字符串
这是我第一次在 SQL Server 2012 中使用 SSIS 我可以成功读取 excel 文件并将其内容加载到 SQL Server 2012 中的表中 任务是一个简单的直接读取 excel 文件 然后复制到 sql server 无需
sqlserver
SSIS
SQLServer2012
ETL
使用 read() 方法从 Amazon S3 读取大尺寸 JSON 文件时出现内存错误
我正在尝试使用 Python 将大量 JSON 文件从 Amazon S3 导入到 AWS RDS PostgreSQL 中 但是 这些错误发生了 回溯 最近一次调用最后一次 文件 my code py 第 67 行 位于 file con
python
postgresql
amazons3
ETL
amazonrds
如何将具有两个标题的混合记录类型固定宽度文件加载到两个单独的文件中
我的任务是加载格式奇怪的文本文件 该文件还包含不需要的数据 它包含两个背靠背的标头 每个标头的数据在交替行上指定 标题行开始于 我需要读取标头及其相应的数据 并将其转储到某个 Excel 表目标中 让我知道如何使用 SSIS 中的任何转换或
sqlserver
csv
SSIS
ETL
flatfile
Airflow:为每个文件运行 DAG 的正确方法
我有以下任务需要解决 文件通过端点不定期发送并存储在本地 我需要为每个文件触发 DAG 运行 对于每个文件 将执行相同的任务 总体流程如下 对于每个文件 运行任务 A gt B gt C gt D 正在批量处理文件 虽然这项任务对我来说似乎
python
ETL
airflow
batchprocessing
directedacyclicgraphs
ETL SSIS:将错误行重定向到单独的表
我正在开发一个包 其中包含一个源 大约 80 个查找和 1 个目标 源表中的数据不够一致 因此我的包经常失败 有没有一种方法可以传输将它们插入目标表时给出的所有行 例如 我在 Source 中有 5 行 其中第一行和第四行会出错 现在的结果
sqlserver
ETL
SSIS
如何将第三方库添加到 Talend 项目?
如何将第三方库 jar 文件 添加到 Talend 项目 还有一个问题是 每个人才component uses LogFactory 但就我而言 它正在抛出 java lang NoClassDefFoundError org apache
Java
ETL
talend
System.ArgumentException:对象不是 ADODB.RecordSet 或 ADODB.Record
我使用下面的代码来填充数据表 OleDbDataAdapter oleDA new OleDbDataAdapter DataTable dt new DataTable oleDA Fill dt Dts Variables My Res
c
SSIS
net35
ETL
«
1 ...
3
4
5
6
7
8
9
...11
»