如何将azure blob文件复制到azure数据分析解决方案

Question

有没有办法在Azure上创建一个作业或Azure服务来将Azure blob文件移动（切割）到Azure数据存储区？

Answer 1

我会说Azure Data Factory非常适合这一点。它支持调度（https://docs.microsoft.com/en-us/azure/data-factory/data-factory-scheduling-and-execution），它支持将数据从Blob传输到Azure Data Lake。看到这个例子：https://docs.microsoft.com/en-us/azure/data-factory/data-factory-azure-datalake-connector

从网站：

数据工厂是编排和自动数据的移动和转换基于云的数据集成服务。您可以使用Data Factory服务创建数据集成解决方案，该服务可以从各种数据存储中提取数据，转换/处理数据并将结果数据发布到数据存储。

数据工厂服务允许您创建移动和转换数据的数据管道，然后运行指定的时间表（小时，每日，每周等）的管道。它还提供了丰富的可视化功能，可显示数据管道之间的沿袭和依赖关系，并可从单一统一视图监控所有数据管道，轻松查明问题并设置监控警报。

https://docs.microsoft.com/en-us/azure/data-factory/data-factory-introduction

Answer 2

Azure的数据分析湖是的计算服务，而不是数据存储。

数据湖分析工作可以连接到数据上：

• 数据湖店
• Azure存储（BLOB）：看到https://docs.microsoft.com/en-us/azure/data-lake-analytics/data-lake-analytics-manage-use-portal#manage-account-data-sources
• 其他来源通过联合查询：http://sqlblog.com/blogs/jorg_klein/archive/2016/06/17/setup-azure-data-lake-analytics-federated-u-sql-queries-to-azure-sql-database.aspx

因此，您可以将数据保留在blob存储中，或使用Azure Data Factory将其转移到Data Lake Store，以获得最佳的分析性能并享受它的优势其他好处（见https://docs.microsoft.com/en-us/azure/data-lake-store/data-lake-store-overview）。