azure-data-factory

2热度

1回答

我正在通过活动json中的policy.timeout属性强制数据工厂中的自定义活动超时。但是我还没有看到任何文档建议如何超时操作Azure批处理？我假设批处理任务被强制以某种方式终止。但是任务 - >定制活动通知所以它可以收拾？我问的原因是，我可能会中间复制到数据湖店，我既不想让它无限期地运行，也不会停止它没有某种清理（我不能看到一种做交易的方式作为例如使用数据湖商店SDK）。我正在考虑

-1热度

1回答

，当我们在蔚蓝的数据工厂创建AzureBatchLinkedService它给错误湛蓝一批池我使用云服务

，当我们在蔚蓝的数据工厂创建AzureBatchLinkedService它给了湛蓝一批池错误我使用云服务错误实体配置失败：Azure批量操作失败。代码：'BadRequest'消息：'输入不是有效的Base-64字符串，因为它包含非基本64字符，多于两个填充字符或填充字符中的非法字符。 “ 问候，马尼什

0热度

1回答

配置天青搜索IP以连接到本地数据库

我正在使用索引器在Azure索引中加载数据。我想使用本地数据库来复制蔚蓝索引中的数据。我不想使用ADF。 Here我发现我需要允许azure搜索IP连接到本地数据库。但我不知道如何配置？

2热度

2回答

如何从Azure的数据副本湖加快宇宙DB

我使用Azure的数据工厂从Azure的数据存储湖的数据复制到宇宙DB的集合。我们将在数据湖中有几千个JSON文件，每个JSON文件都是大约。 3 GB。我正在使用数据工厂的复制活动，并且在初始运行时，使用默认设置将一个文件加载到集群设置为10000 RU/s和数据工厂需要3.5小时。现在我已经将它扩展到50000 RU/s，将cloudDataMovementUnits设置为32，并将write

1热度

1回答

可以在Data Factory中使用我们的虚拟机而不是批处理服务吗？

我正在使用批处理服务进行数据工厂自定义活动，但我想单独使用我的虚拟机而不是批处理服务。 { "name": "AzureBatchLinkedService", "properties": { "type": "AzureBatch", "typeProperties": { "accountName": "myazurebatchaccount", "batchUri": "http

0热度

1回答

将增量数据加载到天蓝色数据库和天蓝色数据仓库中的最佳实践

我计划实施天蓝色BI。我需要关于如何使用azure数据库，azure sql datawarehouse，azure数据工厂+多基站来实现增量数据加载的专家建议。以哪种方式，我们应该将数据存储在湛蓝湖水数据等感谢纳坦帕特尔

0热度

1回答

Azure DataFactory并发性

我有一个自定义的Dotnet活动，我通过ADF运行，它基本上连接到Azure Blob存储，获取它解析的blob的租约。尽管我在我的设置中将并发性设置为10，并且在UI上看到10个作业并行运行，但我看到只有4个锁定在我的blob上（只有4个blob被租借和解析）。因此，我认为虽然其他6个职位正在运行，但他们没有做任何事情？ ADF中的并发有什么限制吗？我从我以前的10个片开始，因此我不必等待15分

0热度

1回答

如何在vs2017中创建天蓝色数据工厂项目？

如何在vs 2017中创建蔚蓝数据工厂？我没有vs2015，我该怎么办？我检查了在线模板，但找不到一个。类似的问题是：Azure Data Factory project with Visual Studio 2017 但它没有答案。

1热度

1回答

Azure Data Factory无声无息地落后于计划

我有许多活动在ADF上运行，有些活动每天运行一次，每小时运行一次，每15分钟运行一次。我找到了在ADF中设置alerts的方法，这样失败的活动将触发电子邮件。然而，我还没有找到创建更详细的自定义警报的方法。在这种情况下运行，每15分钟 "scheduler": { "frequency": "Minute", "interval": 15 } 一个任务是要

1热度

1回答

配置文件来部署Azure的数据工厂

我创建配置文件（Dev.json & QA.json）部署Azure的数据工厂文物使用Visual Studio不同的环境为这里给出https://www.purplefrogsystems.com/paul/2017/01/using-azure-data-factory-configuration-files/. 部署使用VS是花时间的任务，所以我决定使用PowerShell。现在，我想用（