Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
如何在 SQL 中创建临时表以在多个 ADF 活动中使用?
我需要在执行 Azure 数据工厂管道时在 SQL Server 中创建全局临时表 该表将在多项活动中使用 我已经尝试了几种方法 包括一种使用针对以下目标的存储过程活动sys sp executesqlSP 和CREATE TABLE语句作
sqlserver
azuredatafactory
ADF 在 git 模式下发布混乱
在 git 模式下 当我们想要测试管道时 ADF 会强制我们先发布 我的理解是 发布操作做了两件事 按照给定保存到本地 ADF DEV here 在分支 adf publish 我们的分支 中创建arm模板 指定 但要启用 发布 按钮 我们
Azure
azuredevops
azuredatafactory
azuregitdeployment
来自参数的 Azure 数据工厂源数据集值
我在 Azure Datafactory 中有一个由 CSV 文件支持的数据集 我在数据集中添加了一个附加列 并希望从数据集参数传递它的值 但值永远不会复制到该列 type AzureBlob structure name MyField
azuredatafactory
Azure 数据工厂:对于特定属性,每个 item() 值不存在
我的每个活动都有一个存储过程 SP 其中我显然使用 item 输入值 现在假设 SP 的输入值为 item a item b 和 item c 问题 对于 foreach 的某些迭代 item b 不存在 这是预期的 那么我应该如何在存储过
azuredatafactory
Azure数据工厂数据流静默地将日期列置空
我正在尝试使用 Azure 数据工厂将 CSV 插入到 Azure SQL 表中 一切看起来都很顺利 直到我检查结果 其中一列是可为空的日期 CSV 包含这样的值1 2 2020 12 00 00 AM 数据流默默地插入一个NULL而不是因
csv
azuresqldatabase
azuredatafactory
ADF - 迭代选择输出到复制活动
我们有一个 SP 其中 SP 执行并返回多个结果集 其中列号发生变化 如下所示 create proc test ab as select 1 as num1 select 1 as num1 2 as num2 select 1 as n
sql
Azure
azuresqldatabase
azuredatafactory
使用 ADF Pipeline 中的自定义活动从 OnPrem SQL Server 复制到 DocumentDB
我正在尝试从本地 SQL 服务器中的 SQL 表复制数据 并使用 Azure 数据工厂管道中的自定义活动将其上传到文档数据库 谁能告诉我如何使用 IDotNetActivity 或任何其他接口或类来完成它 实际上 自定义活动目前无法访问本地
sqlserver
Azure
azuredatafactory
customactivity
Azure 数据工厂 CI npm 验证步骤突然崩溃
我们一直在使用 Azure 数据工厂的 新 CI CD 设置 如文档页面所述 https learn microsoft com en us azure data factory continuous integration deliver
azuredevops
azuredatafactory
CICD
azurepipelinesyaml
如何使用数据工厂创建 Azure 按需 HD Insight Spark 集群
我正在尝试使用 Azure 数据工厂使用 Hdi 版本 3 5 创建按需 HD Insight Spark 集群 数据工厂拒绝创建并显示错误消息 HdiVersion 不支持 3 5 如果目前无法创建按需 HD Insight Spark
Azure
azuredatafactory
Azure 数据工厂:事件未启动管道
我已经设置了一个包含复制活动的 Azure 数据工厂管道 出于测试目的 源和接收器都是 Azure Blob 存储 我不想在源 Azure Blob 存储上创建新文件后立即执行管道 我创建了 BlovEventsTrigger 类型的触发器
Azure
azuredatafactory
如何过滤Azure数据工厂数据流中的时间戳列
我有时间戳列 我在其中编写了以下表达式来过滤该列 contact date gt toTimestamp 2020 01 01 contact date lt toTimestamp 2020 12 31 它不会抱怨语法 但运行后它不会根据
azuredevops
azuredatafactory
dataflow
Azure数据工厂:处理until/for活动中的内部故障
我有一个包含 Until 活动的 Azure 数据工厂 v2 管道 在 的里面until是一个复制活动 如果失败 则会记录错误 与本文中完全相同 并且我希望循环继续 Azure 数据工厂管道 发生故障 虽然内部复制活动的错误已得到处理 但u
Azure
errorhandling
ETL
azuredatafactory
untilloop
如何从 Azure 数据工厂中查找活动的输出中删除转义字符?
我正在从 Azure 数据工厂中的 SQL 数据库读取 JSON 数据 我有 Azure 数据工厂 ADF 管道 包含 查找 活动 它从 SQL DB 读取 JSON 数据并将其引入 ADF 管道 当我看到 ADF 的 Lookup 活动的
Azure
azuredevops
azuresqldatabase
azuredatafactory
在 ADF 管道中将文件 blob 存储的访问层从热层更改为存档层
我想使用 ADF 管道将文件从一个容器复制到另一个容器 在复制时我必须将访问层从热层更改为存档层 我必须使用 ADF 管道来实现这一点 帮助我找到一种不使用自定义活动的方法会很棒 我没有在任何活动中看到实现此目的的直接属性 您可以尝试下面的
azuredatafactory
azuresynapse
azure数据工厂:如何将文件夹的所有文件合并到一个文件中
我需要创建一个大文件 通过合并分散在 Azure Blob 存储中包含的多个子文件夹中的多个文件 还需要进行转换 每个文件包含单个元素的 JSON 数组 因此最终文件将包含一个JSON 元素数组 最终目的是在 Hadoop 和 MapRed
json
Azure
azuredatafactory
是否可以从 adf 连接到 databricks deltalake 表
我正在寻找一种能够从 ADF 和其他 Azure 服务 如数据目录 连接到 Databricks deltalake 表的方法 我没有看到 ADF 数据源中列出的 databricks 数据存储 关于类似的问题 是否可以从 Azure 数据
azuredatafactory
azuredatabricks
deltalake
Azure 数据流需要几分钟才能触发下一个管道
Azure 数据工厂在 10 毫秒内将数据传输到 Db 中 但我遇到的问题是它需要等待几分钟才能触发下一个管道 最终需要 40 分钟 所有管道传输数据的时间不到 20 毫秒 但不知何故 它要等待几分钟才能触发下一个 I used debug
Azure
azuredatalake
azuredatafactory
获取子文件夹Azure数据工厂中的所有文件名
我在数据湖中有一个以下文件夹结构 我想从 ParentFolder 目录的所有子文件夹中获取所有 csv 文件名 我的所有文件都是 csv 文件 是否有一种使用元数据活动的简单方法 父文件夹 gt 年 2020 文件夹 2020 10 20
Azure
azuredatafactory
使用 python azure 函数从 azure blob 存储读取文件
我创建了一个天蓝色函数Python 3 9我将使用执行该功能Http Trigger via Azure data factory 现在 在我的 python azure 函数中 我想从我的存储帐户访问存储容器并从同一容器读取文件 以便对文
python
Azure
azurefunctions
azuredatafactory
如何通过azure数据工厂生成不记名令牌
我跟着这个blog用于生成不记名令牌 我有一个这样的APIhttps login microsoftonline com
Azure
azuredatafactory
«
1
2
3
4
5
6
»