azure-data-factory

1热度

1回答

这可能很简单，但我很难理解Azure数据工厂管道的确切触发时间。我遵循MS教程来创建一个DF管道，以将数据从Blob复制到Azure SQL。我在 “1 - 3月份16:14 IST（上午10时44分UTC）” 低于计划，创造了管道开始日期 - 2017年2月28日上午12:00 UTC 结束日期 - 2017年3月4日下午11:59 UTC 在1日周期性创建管道后，它会立即运行下面的窗口，

1热度

1回答

Azure ADF自定义活动与现有的ADLS链接服务

我正在尝试使用Azure SDK在Visual Studio中使用自定义ADF活动将数据写入ADLS。我创建的管道将被部署到现有的ADF中，该ADF已经定义了ADLS和批量链接服务。我的问题是这样的：在自定义活动方法中，如何使用现有的ADLS链接服务来写入数据？此问题与此类似：ADF - C# Custom Activity但我不认为我可以简单地提起连接字符串，因为链接服务正在使用我的SPN，

0热度

1回答

“批处理执行失败，HTTP状态码为BadGateway，端点

上的机器学习服务响应我想通过Azure Data Factory（ADF）安排AzureML实验。问题“批量执行失败，HTTP状态码：BadGateway。从端点https://ussouthcentral.services.azureml.net/workspaces/26c276f8420a4c30aae39b0c27845134/services/7b122129b2c041f9b4399d

0热度

2回答

Azure门户数据工厂监视器和Manate错误404文件或目录未找到

我创建了一个Azure数据工厂管道并部署它。没有问题。当我在Azure门户数据工厂刀片中时，单击Monitor &管理按钮，它会将我带到MS Edge中的新选项卡，并显示以下错误： 404 - 找不到文件或目录。您正在查找的资源可能已被删除，名称已更改或暂时不可用。有谁知道我需要做什么才能够监视我的Azure Data Factory管道活动？谢谢。

0热度

1回答

如何处理Azure数据工厂中的增量和完全上传

我们有一个Azure存储帐户和2个blob存储。 A Full和a公司在完整版中，只要需要完整上传，我们就会放置完整上传CSV文件，在公司我们只是每天放置小增量CSV文件。我们首先将所有数据加载到临时文件中，然后加载到ODS en，最后加载到Edw（Enterprise DW）。只有在对表格进行结构更改时才需要完整上传。基本上两个上传之间的唯一区别是全也cleares在ODS和EDW的所有

2热度

2回答

在Azure数据工厂实例上共享数据管理网关

我有DEV/TEST/PROD的3-TIER设置（但让我们忽略此帖的测试）。对于每个TIER，我都有一个ADF实例在相同订阅中的单独资源组中运行。我的DEV-ADF实例包含一个将本地数据加载到Azure SQL DW的网关 - 让我们调用网关“MyGateway”。我将相同的ADF项目也部署到了我的PROD-ADF实例，但我无法创建具有相同名称的新网关。另外，我不想让第二台VM在那里运行另一台D

1热度

2回答

Azure Data Factory是否支持链接服务中的Active Directory身份验证？如果是，那么连接字符串应该是什么？

我们有一个要求，其中所有其他认证模式（如windows和sql server认证）都将被取消，我们将不得不在Azure数据工厂管道中仅使用AAD认证。所以我想知道是否可以在Azure Data Factory链接的服务中实现AAD身份验证。

1热度

1回答

Azure Data Factory .NET SDK活动指标

是否有人知道如何（或者如果可能）访问Azure门户中“详细信息”下显示的每个活动运行的这些指标？最初的计划是使用.NET SDK但这些指标似乎被包括在内。这是我迄今为止设法找到的。 var datasliceRunListResponse = client.DataSliceRuns.List( _resourceGroupName, dataFactoryName

2热度

3回答

动态表存储名称

是否可以在数据工厂输入中具有动态表存储表名称？的一切东西，我觉得是有一个固定的名字 "properties": { "type": "AzureTable", "linkedServiceName": "StorageLinkedService", "typeProperties": { "tableName": "MyTable" }, 的情况是，我想表的动态列表中的数据

1热度

2回答

如何调用Web服务API并将数据路由到Azure SQL数据库？

配置好Azure SQL数据库之后，我想用HTTP REST GET调用中的数据提供一些表。我尝试过Microsoft Flow（其HTTP请求操作完全失败），我现在正在探索Azure数据工厂，但无济于事。我现在想到的唯一方法就是配置Azure虚拟机并安装Postman与Newman。但是，我仍然需要为Azure SQL数据库创建一个Web服务接口。是否Microsoft不提供HTTP调用服