azure-data-factory

0热度

1回答

我对Azure中的解决方案方法有疑问。问题是如何决定使用哪些技术以及如何找到它们的最佳组合。假设我有两个数据集，每天增长：我有每天来我ADL商店CSV文件，它包含气象数据的所有可能Lattitudes和Longtitudes组合和zip为他们编码，以及50个不同的天气变量。我有另一个POS数据集（销售点），它也作为每日CSV文件到我的ADL存储。它包含所有零售地点的销售数据。所需的输出是拥

0热度

1回答

Azure Process Orchestration

我在寻求关于流程编排最佳实践的建议。为了给一些方面，我有以下任务，以协调：扩展Azure的批次池提供足够的节点执行自定义.NET代码调用服务器来检索任务的列表。这些任务每天都在变化。将这些任务排队到批处理池。在批处理池中执行每个任务（自定义.Net代码）。每个任务都会在Azure存储帐户中创建数据。缩小批处理池，因为它不再需要。开始/放大数据仓库批量将数据导入数据仓库（期望使用Poly

1热度

1回答

我们如何安排在AZURE自定义代码调用认知API

我有一个DLL从IP摄像机下载图像，说间隔为4小时。我们的目标是到存储在AZURE DATA LAKE STORE下载的文件，说 /sample/ImageIPCam1/Image1.jpg /sample/ImageIPCam1/Image2.jpg /sample/ImageIPCam1/Image3.jpg 下载后，我们需要调用认知API（FACE API）来检查，如果这三个或N图

0热度

3回答

Azure Data Factory：配置频率

我打算使用Azure Data Factory作为项目中数据湖分析作业的触发器。数据湖作业将根据由StreamAnalytics处理并存储在Data Lake中的传感器输入数据计算关键指标。这些工作应该每5分钟计算一次数值。根据Microsoft文档，不可能配置小于15分钟的间隔/频率。任何人都面临同样的问题并找到了解决方案，还是在本场景中使用不同的工具作为Azure Data Facto

0热度

1回答

在DataFactory活动中将DateTime更改为Unix时间戳

我试图将Azure表从一个存储帐户复制到另一个存储帐户。但是，在做这个副本时，我想将列的日期时间值更改为Unix时间戳。我正在使用Azure DataFactory复制活动。如果我在输出数据集中指定InitialDate列类型为Int64，那么我得到的错误是cannot convert datetimeoffset to Int64。 "activities": [ {

0热度

1回答

Azure数据工厂中的授权/授权按钮用于数据存储区不替换JSON中的授权和会话标识

用于数据存储区的azure数据工厂中的授权/授权按钮不替换JSON中的授权和会话标识。我使用Mozilla Firefox或Chrome浏览器

1热度

1回答

任何情报跑得比投放依据其他Azure的数据工厂

我有一个客户端请求我的数据工厂解决方案他们想运行我的数据厂当过的I/P文件是在Blob存储可用/任何位置。要非常清楚，他们不希望按计划运行解决方案，因为有一天文件不会显示出来。所以我想要智能来搜索文件是否可用于处理如果是，那么我必须运行我的数据工厂解决方案来处理该文件，否则不需要运行数据因子在此先感谢 Jay

1热度

2回答

从Excel文件加载数据到Azure Datawarehouse

我成功地将数据从CSV加载到Azure SQL Server数据仓库，但是现在我有一个Excel文件作为源，当我尝试将此Excel文件读入BLOB CSV时，它会创建一个文件与垃圾字符。任何帮助，将不胜感激。

1热度

1回答

Azure数据工厂安全发布

我有一个Azure数据工厂的Visual Studio项目在GitHub存储库中，作为配置的一部分，我有几个链接的服务，例如，一个用于Asure SQL数据库，Azure Blob和一个一个Azure Batch，所有这些链接的服务都有一个连接字符串或帐户密钥。我这里使用的描述的安全发布的形式给出：https://github.com/Azure/Azure-DataFactory/tree/m

0热度

1回答

Microsoft.Azure.Search.IndexBatchException：批量中的1000个索引操作中的1个失败

我在通过ADF将数据从OnPremSql数据库推入Azure Search Index时遇到跟随错误。 Copy activity encountered a user error at Sink side: ErrorCode=UserErrorAzuerSearchOperation,'Type=Microsoft.DataTransfer.Common.Shared.HybridDelive