sql-data-warehouse

    -1热度

    1回答

    我有我的数据仓库建立在Amazon Redshift上。我目前面临的问题是,我的架构中有一个庞大的事实表(大约500M行),其中大约有10个客户端的数据。我有定期(主要是每天)为这个事实表生成数据并需要刷新的过程,意思是删除旧数据并插入新生成的数据。 问题是,这个批量删除 - 插入操作在我的事实表中留下了一个需要耗费时间并因此不能立即完成的VACUUM的问题。而这个事实表(由于删除数据而产生的巨大

    0热度

    1回答

    对于任务,我必须从具有目录列表的文本文件中删除一行。用户输入文件名,包括文件名的目录必须被删除。对于赋值,我必须使用char数组。我有一个问题,strcmp在返回0时返回-13,但只有在应该删除的行之后有另一行时才会发生这种情况。在这里,问题的代码: void deleteSong() { char userSongName[ENTRY_SZ], objectSongName[ENTR

    1热度

    1回答

    商定的模式来插入新的数据到Azure的数据仓库已经存在的表似乎是... create table dbo.MyTable_New with (distribution = round_robin) as select Col1 ,Col2 from dbo.MyTable union all select Col1 ,Col2 from

    0热度

    2回答

    我有下面的代码 - 它是用来当用户点击下拉只加载默认选项加载一个下拉,因为这个下拉是相当大的,IE浏览器没有按”非常喜欢这个。下面是代码: function populateDropDown(id, code) { var currentSelect = document.getElementById(id); <%--Don't enable the dropdown if

    2热度

    1回答

    当查询较大的数据集以便将记录从Blob存储插入Azure数据仓库时,会导致Polybase性能下降的原因是什么? 例如,数千个压缩(.gz)CSV文件,每隔几个小时在6个月的数据范围内进行分区。在SSMS中从外部表中查询这些文件并不完全优化,而且速度非常慢。 客观地说,我正在将数据加载到Polybase中,以便将数据传输到Azure数据仓库。除了大数据集似乎,Polybase很慢。 有什么选择可以

    1热度

    5回答

    我想向用户显示旧的和新的版本号,然后复制新版本。当我试图在显示版本信息后复制文件时,我得到以下例外 进程无法访问文件'C:\ Auto TEC \ Common.dll',因为它正在被另一个进程使用。 下面是代码: using System; using System.Collections.Generic; using System.ComponentModel; using System

    0热度

    1回答

    我想从Visual Studio 15.2部署Azure应用服务。具体而言,我试图部署以下服务:https://github.com/Microsoft/Azure-SQL-DB-auditing-OMS-integration将审计日志从SQL数据仓库提取到OMS。但是,由于安全问题,我们希望在不创建公共端点和url的情况下这样做。我们尝试在VNet中进行配置,但它不允许您这样做,除非VNet具

    0热度

    1回答

    我在接受采访时被问到设计Facebook聊天信使。 要求是它应该能够支持一对一的对话,它应该是实时的。 在讨论架构时,我将如何存储两个用户之间的对话,以便我不必加载整个对话,然后创建我要在聊天框中显示的视图。 任何人都可以告诉我他们将如何存储用户之间对话的详细模式,以便检索旧对话视图的延迟应尽可能低。由于我们要存储的数据将在一年内以PB级的比例存储,我们还需要在存储数据时考虑数据的缩放比例。 我已

    0热度

    1回答

    我期待自动将Azure SQL数据库中的数据同步到Azure SQL数据仓库。它可能只需要插入而不是更新,它将涉及25-35张表和几张表中的几百万条记录。 (稍后一旦数据同步,我们可能会从源删除已同步的记录。) 任何人都可以推荐一些工具或方法,可以做到这一点,适合上面的大多数要求吗? 我看了数据工厂但这似乎并不适用于增量加载