Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
Azure 数据工厂和日志分析
我想在 ADF 中对输入数据执行一些验证检查 并且任何验证失败都希望捕获到 Azure 日志分析中 有人可以指导我如何通过 Azure 数据工厂将自定义日志捕获到日志分析中吗 任何示例数据流 管道都会非常有帮助 谢谢 库马尔 如果我理解正确
azuredatafactory
azureloganalytics
Azure 数据工厂表达式生成器字符串格式错误:无法识别的令牌(换行)
我有一个映射数据流 我想在其中对源使用自定义 SQL 查询 但我无法将其分成多行 我收到一条错误消息 令牌识别错误 如果我删除换行符并将整个查询放在一行上 它可以工作 但看起来很难读 我想保留查询格式 有谁知道如何做到这一点 LE 同样的情
azuredatafactory
如何让 Azure 数据工厂循环访问文件夹中的文件
我正在看下面的链接 https azure microsoft com en us updates data factory supports wildcard file filter for copy activity https azu
Azure
azuredatafactory
使用 Google DataFlow/Apache Beam 并行化图像处理或爬行任务是否有意义?
我正在考虑将 Google DataFlow 作为运行管道的选项 该管道涉及以下步骤 从网络下载图像 处理图像 我喜欢 DataFlow 管理完成工作所需的虚拟机的生命周期 因此我不需要自己启动或停止它们 但我遇到的所有示例都使用它来执行数
Azure 数据工厂通过访问密钥连接到 Blob 存储
我正在尝试在 Azure 数据工厂中构建一个非常基本的数据流 从 blob 存储中提取 JSON 文件 对某些列执行转换 然后存储在 SQL 数据库中 我最初使用托管身份对存储帐户进行身份验证 但在尝试测试与源的连接时收到以下错误 com
Azure
azurestorage
azureblobstorage
azuredatafactory
如何通过 Azure 批处理和数据工厂使用 Azure Analysis Services 进行身份验证
我有一个 c Sharp 类库 它使用 AMO 库连接到 Azure Analysis Services 我想将其用作数据工厂管道的一部分来刷新多维数据集分区 这是通过 Azure 批处理作为自定义 net 活动完成的 var server
c
azuredatafactory
azurebatch
azureanalysisservices
如何在Azure数据工厂中使用formatDateTime?
我想将管道触发时间格式化为以下格式 10 Mar 2021 08 31 59 AM 这是我正在使用的代码 formatDateTime pipeline TriggerTime DD MON YYYY HH MI SS AM PM 然而 日
azuredatafactory
使用 Visual Studio 2017 的 Azure 数据工厂项目
我不确定 Visual Studio 2017 目前是否支持 Azure 数据工厂项目 我刚刚安装了 VS 2017 但无法打开我们的解决方案 因为有一个 azure 数据工厂项目 Azure 数据工厂是否支持 Visual Studio
VisualStudio
Azure
VisualStudio2017
azuredatafactory
在 Azure 数据工厂查找中处理 >5000 行
我有一个复制活动 它将表从 MySQL 复制到 Azure 表存储 这很好用 但是当我在 Azure 表上进行查找时 出现错误 数据太多 这是按照文档设计的 Lookup 活动最多可包含 5 000 行 最大大小为 2 MB 另外还提 到了
Azure
azuredatafactory
发布管道与集成运行时冲突
此问题涉及如果数据工厂中定义了自托管集成运行时 如何通过 CI 在 VSTS 中 传播数据工厂 我设置了 3 个环境 Dev UAT Prod 每个环境都有自己的数据工厂 开发人员托管主协作分支 我正在使用 VSTS 从 adf publi
azuredatafactory
Azure 数据工厂管道“发生故障”
我正在设置 ADF 管道以将 blob 复制到 Azure SQL DB 中 我的管道中有一个迭代活动 其中我设置了一个计数器 仅当 blob 存在时才进行循环和复制 This works great except for some ran
Azure
azuredatafactory
数据工厂中的 U-SQL 作业失败
每当我运行时 我总是从数据工厂收到以下错误U SQL作业 Job submission failed the user adla account name does not have permissions to a subfolder i
Azure
azuredatafactory
azuredatalake
Azure-data-Factory 复制数据如果某个文件存在
我的 blob 容器中有很多文件 但是 我只想仅当 blob 容器上存在某个文件 例如 SRManifest csv 时才运行存储过程 我在数据工厂上使用了获取元数据和 IF 条件 你能帮我写一下动态脚本吗 我试过这个 bool start
azuredatafactory
如何获取 ADF2 中动态内容中一个月的最后一天?
我想根据 utcnow 时间戳获取一个月的最后一天 下面表达式中的 dd 应该自动为该月的最后一天 28 30 或 31 formatDateTime adddays utcnow 2 yyyy MM ddT23 59 59 999 考虑到
azuredatafactory
如何在 Azure 数据工厂的复制活动期间向文件名添加日期?
我正在从 Azure 数据工厂中的 SFTP 中提取一个文件夹 该文件夹将始终具有相同的名称 因此我在复制活动中明确指定了它 但我试图弄清楚如何添加复制它的日期到当前文件名 该文件夹取自 SFTP 并存储在 ADLS Gen2 中 下面附上
Azure
azuredatafactory
azuredatalake
在“数据工厂”模式下启用发布
我已在 Azure 数据工厂上启用 Git 我也创建了我的 Git 存储库 当我想创建一个新的管道时 我收到以下消息 您已在数据工厂中启用 GIT 数据工厂 模式下的发布已禁用 请切换回 GIT 模式以进行进一步更改 当我想选择 GitHu
Azure
GitHub
Repository
azuredatafactory
有没有办法在 Azure 数据工厂中插入带有嵌套数组的文档?
我正在尝试在 CosmosDb 中添加具有嵌套数组的文档 我正在使用Copy Activity 样本文件 itemNumber D10001 readings value 25 ets 100011111 value 35 ets 1000
azurecosmosdb
azuredatafactory
如何从 Azure 数据工厂中的 json 对象中提取值
我有我的 ADF 管道 设置变量活动的最终输出是这样的 name test value 1234 该变量的输入是 variableName test value test 1234 设置变量项列中提供的表达式为 item ColumnNam
azuredatafactory
使用 JSON 为数据工厂中的每个循环提供数据
数据工厂新手 我正在努力解决以下问题 我有一个 Web 活动 它调用 API 并返回以下 JSON ResponseCode 200 ResponseText OK Data ramco purchaseordershipment ramc
azuredatafactory
Azure 数据工厂 - 处理大小为 4194304 的查找活动限制
我有一个天蓝色数据工厂管道 其中包含检查 JSON 文件的查找活动 天蓝色的尺寸如下所示 Azure 博客大小屏幕截图 当我下载它时 我看到该文件的以下值 因此它并不大于错误指出的值 查找活动结果的大小 5012186 超出了限制 4194
Azure
azuresynapse
azuredatafactory
«
1
2
3
4
5
6
»