Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
Azure 数据工厂复制数据速度很慢
源数据库 Azure VM D16s v3 上托管的 PostgreSQL 目标数据库 Azure VM D4s v3 上托管的 SQL Server 开发人员版本 源数据库大小约为1TB 目标数据库为空 现有架构与源数据库相同 吞吐量仅为
Azure
azuredatafactory
如何在Azure数据工厂中传递不记名令牌API
我有一个 API 它具有授权和不记名令牌 我在邮递员中进行了测试 它正在工作 但是 当我在 ADF 中使用 Web 活动时 它不起作用 我在 URL 部分传递 url 创建新标头 输入授权并指定值 Bearer token 出现以下错误 E
Azure
azuredatafactory
Azure Synapse Analytics - 运行数据流时出现异常
使用 Synapse Analytics Workspace 的预览和相关的 Synapse Studio 我创建了一个数据流 该数据流只需将 parquet 文件从 Datalake gen2 存储加载到 SQL 池内的表中 运行仅包含此
azuredatafactory
azuresynapse
通过 ADF 将记录加载到 Dynamics 365
我正在 Azure 数据工厂中使用 Dynamics 连接器 TLDR 此连接器是否支持加载需要传入父记录密钥的子记录 例如如果我想创建一个contact并将其附加到父级account 我更新插入一条带有 null 的记录contactid
dynamicscrm
azuredatafactory
commondataservice
xrmtoolbox
如何将变量传递到 Azure 数据工厂 REST url 查询字符串
我是 Azure 数据工厂的新手 我有一个链接到 REST api 的源数据集 该 API 的 url 有一个查询字符串 我有一个将数据从 REST 复制到数据库的活动 但我必须在查询字符串中传递不同的值 并对不同的值运行相同的活动 如何在
Azure
azuredatafactory
使用 oauth azure 数据工厂进行分页
在 Azure 数据工厂内 我通过 REST 复制活动调用 microsoft graph 利用 REST 来获取服务的访问令牌 Graph api 最多返回 200 个结果 因此我有兴趣使用可以在源中创建的分页规则 在邮递员中我可以看到我
Azure
oauth20
azuredatafactory
Azure 数据工厂 - 多个文件/blob 上基于事件的触发器
当在 Blob 容器内的文件夹中创建新文件 Blob 时 我将通过基于事件的触发器调用 ADF V2 管道 Blob 容器结构 Blob 容器 gt 文件夹名称 gt gt 文件1 csv gt 文件2 csv gt 文件3 csv 我使用
azuredatafactory
azureblobstorage
azureblobtrigger
Azure数据工厂上传到Salesforce并引用另一个对象上的字段
这是这样的场景 我们正在使用 Azure DataFactoryV2 运行一系列管道 这些管道从本地数据源获取帐户数据 将其转换并上传到 Salesforce 目前我们想要导入一个帐户并将其与另一个帐户关联 帐户存在标准的父 子关系 例如经
Azure
salesforce
azuredatafactory
salesforcelightning
获取数据工厂中单个管道执行的成本
我正在考虑使用 Azure 数据工厂 V2 进行集成导入 并想知道是否有办法跟踪正在运行的各个管道的成本 例如 如果我有 3 个管道 代表 3 个不同的集成 是否有办法查看每个管道产生的成本 还有一种方法可以近乎实时地执行此操作 以便在一个
azuredatafactory
Azure 数据工厂复制数据活动 SQL 接收器存储过程和 ARM 模板中的表类型参数
我正在部署一个包含复制数据活动的 Azure 数据工厂管道 其中接收器是 SQL Server 存储过程 我提供存储过程名称 该名称映射到数据工厂的 ARM 模板中的 sqlWriterStoredProcedureName 最近 用于在复
azuredatafactory
Azure 数据工厂 v2:活动执行管道输出
有没有办法在活动 执行管道 中引用已执行管道的输出 即 主管道按顺序执行2个管道 第一个管道生成一个自己创建的 run id 需要将其作为参数转发到第二个管道 我已阅读文档并检查主管道是否记录了第一个管道的输出 但看起来这不可能直接实现 到
Azure
azuredatafactory
Azure 数据工厂检查复制记录的行数
我正在设计一个 ADF 管道 用于将 SQL 表中的行复制到 Azure Data Lake 中的文件夹 之后 SQL 中的行应该被删除 但是对于发生的删除操作 我想知道复制的行数是否与我在管道开头选择的行数相同 有没有办法获取复制操作的行
azuredatafactory
Azure 数据工厂 V2 中的分页规则值(适用于 Rest API)
我正在尝试填写Value分页规则内的框解释于本文 https sqlkover com azure data factory and the exact online rest api dealing with pagination 最近发
azuredatafactory
在U-SQL中解析json文件
我正在尝试使用 USQL 解析下面的 Json 文件 但不断收到错误 Json file dimBetType SKey 1 BetType BKey 1 BetTypeName Test1 dimBetType SKey 2 BetTyp
json
Azure
azuredatafactory
azuredatalake
usql
来自 azure 批处理服务的定期 stdout 和 stderr
我正在天蓝色数据工厂中运行管道 并且使用自定义单元来运行天蓝色批处理活动 我运行的天蓝色批处理作业非常大 我想监控我处于该作业的哪个阶段 在远程虚拟机上 我通常使用logging模块输入python 我能够在作业完成时获取作业的状态 即所有
Azure
azuredatafactory
azurebatch
Azure数据工厂自动重新触发失败的管道
我想使用 If Condition Activity 动态内容 自动重新触发失败的管道 过程 管道 1 在计划时间使用触发器 1 运行 有效 如果管道 1 失败 计划触发器 2 将运行管道 2 有效 管道 2 应包含 if 条件来检查管道
Azure
ifstatement
pipeline
azuredatafactory
Azure 数据工厂:查询 CosmosDB 源中的 _ts(纪元)字段
我正在尝试将数据从 Azure CosmosDB 复制到 Azure SQL 数据库 在 Azure CosmosDB 源中 查询如下 select from c where c DefinitionTime gt formatDateTi
Azure
azurecosmosdb
datetimeformat
epoch
azuredatafactory
数据工厂子项修改或创建日期
我有一个数据工厂 V2 管道 由 获取元数据 和 forEach 活动组成 用于读取文件共享 本地 上的文件列表并将其记录在数据库表中 目前 我只能读取文件名 但还想检索每个文件的修改日期和 或创建日期属性 有什么帮助吗 谢谢 Accord
azuredatafactory
Azure 数据工厂 - 如何触发计划/一次性管道?
背景 我已安排运行管道以将数据从源复制到目标 该任务计划每天在特定时间运行 问题 管道的输入数据集是外部的 并且在特定时间间隔不可用 这意味着复制活动必须等到管道中提到的计划开始时间才能开始 考虑到数据量 我不想在这里浪费时间 要求 在任何
Azure
azuredatafactory
具有改进的 CI/CD 的 Azure 数据工厂部署
我正在关注此处发布的为 ADF 设置的新推荐 ci cd https learn microsoft com en us azure data factory continuous integration deployment improv
azuredevops
azuredatafactory
1
2
3
4
5
6
»