azure-data-lake

    2热度

    1回答

    我们使用U-SQL从一组.csv文件中提取传感器数据。每个记录包含一传感器ID,测量和值的时间,以及接收到该记录时的时间: +----------+---------------------+------------------+---------------------+ | SensorID | MeasurementTime | MeasurementValue | ReceivedTim

    0热度

    1回答

    我有一个USQL查询可以在管理表中针对400M记录自行运行。 但是在开发过程中,我不想一直对所有记录运行它,所以我弹出一个where子句,运行一小段数据,并在大约2分钟(@ 5 AU)内完成,写出结果到我的数据湖中的tsv。 满意。 但是,我现在想用它作为第二个查询和进一步处理的来源。 因此,我创建了原始USQL(减去where子句)的视图。 然后进行测试,一个新的脚本: 'Select * fr

    0热度

    1回答

    我们计划使用EventHub捕获从EventHub接收数据到数据存储区。我们有消息从多个来源进入EventHub,并希望根据EventHub消息标题将它们路由到Datalake上的不同文件夹。有什么不同的选择来做到这一点?

    0热度

    1回答

    我有2个表。我想要列表中的分类网址[Activite_Site]我尝试了下面的查询,但它不起作用...任何人都有想法。 预先感谢您 Table [Categorie] URL CAT http//www.site.com/business B2B http//www.site.com/office B2B http//www.site.com/job B2B http//w

    4热度

    2回答

    我认为这个问题与Azure Data Lake Analytics的查询优化有关;但让我们看看... 我有2个单独的查询(TVF)做聚合,然后最后的查询加入2在一起的最终结果。 所以...... Table > Header Query Table > Detail Query Result = Header Query + Detail Query 要出测试整个逻辑,我有一个过滤器单独运

    0热度

    1回答

    我想在本地执行USQL代码,但代码显示为简单文本&提交选项已禁用。 DECLARE @sliceDateYYYY string = @sliceDate.Substring(0, 4); DECLARE @sliceDateMM string = @sliceDate.Substring(5, 2); DECLARE @sliceDateDD string = @sliceDate.Subst

    1热度

    1回答

    比方说,我有一个名为MyAssembly的程序集,其类别MyClass有一个MyFunction(long timestamp)方法(它将datetime作为字符串以YYYY-MM-DD HH24:mm:ss的格式返回)。如果我创建一个脚本这样的工作: @outputData = SELECT MyAssembly.MyClass.MyFunction(t1.timestamp).Substri

    1热度

    2回答

    我有一个返回 SQL.ARRAY<SQL.ARRAY<string>> 我需要拼合这一个csv,没有得到正确的结果集。 这里是什么样子以U-SQL,如果我创建阵列,该阵列: DECLARE @boardA1 SQL.ARRAY<string> = new SQL.ARRAY<string>{"111", "PASS", "0"}; DECLARE @boardA2 SQL.ARRAY<str

    0热度

    1回答

    我在Data Lake Store中有一堆HTML文件,并希望将它们的完整源代码放到一个表中(只有一列来自所有文件的代码,输出格式与我无关,但可能是tsv)。我无法找到一种方法来使用标准提取器或网络上适用于我的任何东西。我必须为此编写一个自定义提取器吗? 我试过Extractors.Tsv()和Extractors.Text()与一大堆的分隔符。我第一次尝试: @data = EXTRACT s

    1热度

    1回答

    我想使用Azure Data Store SDK(C#)获取文件夹中的文件数,但FileStatusProperties.ChildrenNum属性始终为空,并且它永远不会返回(https://docs.microsoft.com/en-us/dotnet/api/microsoft.azure.management.datalake.store.models.filestatusproperti