Azure Data Lake Analytics中的内存限制

Question

我已经为NetCDF文件实施了一个自定义提取器，并在输出它们之前将这些变量加载到内存中的数组中。有些阵列可能很大，所以我想知道ADLA中的内存限制。是否有可以分配的最大内存量？

Answer 1

（Azure Data Lake Team here）

每个顶点有6GB可用。请记住，该内存在操作系统，U-SQL运行时和在顶点上运行的用户代码之间共享。

Answer 2

除了Saveen的回复：请注意，一行最多可以包含4MB的数据，因此您的SqlArray将受限于最大行大小以及从您的提取器返回后。