优化存储过程以处理300万条记录

Question

下面我设计了一个存储过程，用于对比下面的每个Profile和Source Table中的300万条记录，并使用另一个表中存在的记录（PROFILE_BC）更新Source表）也将有约300万条记录。 我想优化下面的这段代码。你能提出任何其他方法吗？我只是担心这将需要6个多小时才能完成。我们可以使用DTS来做同样的事吗？并想法如何使用DTS来完成。一些人建议有一个叫做Lookup的组件，可以使用模糊查找。欢迎任何优化相同的想法。

USE Database 

GO 
/****** Object: StoredProcedure [dbo].[ProcName] Script Date: 11/13/2010 17:15:04 ******/ 
SET ANSI_NULLS ON 
GO 
SET QUOTED_IDENTIFIER ON 
GO 

CREATE PROCEDURE [dbo].[ProcName] 
AS 
BEGIN 

SET NOCOUNT ON; 

DECLARE @not_on_ebc_file_xx## char(2); 
    SET @not_on_ebc_file_xx## = 35; 

DECLARE @voters_no varchar(18); 
    DECLARE @candidate_id char(10); 
DECLARE @perm_disq_temp char(2); 
DECLARE @voters_no_jms varchar(18); 


DECLARE PROFILES_CURSOR CURSOR LOCAL FAST_FORWARD 
    FOR SELECT CP.CANDIDATE_ID, CP.VOTERS_NO FROM PROFILE CP INNER JOIN SOURCE SR ON 
CP.CANDIDATE_ID = SR.CANDIDATE_ID 
WHERE CP.CANDIDATE_ID NOT LIKE 'MA%'; 


OPEN PROFILES_CURSOR; 
FETCH NEXT FROM PROFILES_CURSOR 
INTO @candidate_id, @voters_no; 


    WHILE @@FETCH_STATUS = 0 
    BEGIN 

    SELECT @voters_no_jms = VOTERS_NO FROM PROFILE_BC WHERE VOTERS_NO = @voters_no; 
    SELECT @perm_disq_temp = PERM_DISQ FROM SOURCE WHERE CANDIDATE_ID = @candidate_id; 

    IF (@voters_no_jms = @voters_no) -- record exists in jms_temp table/ebc file 
    BEGIN 
    IF (@perm_disq_temp = @not_on_ebc_file_xx##) 
    BEGIN 
     UPDATE SOURCE SET PERM_DISQ = '' WHERE CANDIDATE_ID = @candidate_id; 
    END 

    END 
    ELSE 
    BEGIN 
    IF (@perm_disq_temp = '' OR @perm_disq_temp IS NULL) 
    BEGIN 
     UPDATE SOURCE SET PERM_DISQ = @not_on_ebc_file_xx## WHERE CANDIDATE_ID = @candidate_id; 
    END 
    END 

    SET @voters_no_jms = ''; 

    FETCH NEXT FROM PROFILES_CURSOR INTO @candidate_id, @voters_no; 

    END 

CLOSE PROFILES_CURSOR; 
DEALLOCATE PROFILES_CURSOR; 

END 

Answer 1

如果你有想到的表现，你应该总是尽量避免使用游标。 而不是使用游标，你可以做到这一点。尝试在处理SQL时考虑集合。我注释了查询的更新部分并添加了一个选择，以便您可以查看数据。

BEGIN TRANSACTION 

DECLARE @not_on_ebc_file_xx## char(2); 
SET @not_on_ebc_file_xx## = 35; 

--UPDATE SR 
--SET  PERM_DISQ = 
--   CASE WHEN NOT PROFILE_BC.VOTERS_NO IS NULL THEN 
--     CASE WHEN PERM_DISQ.PERM_DISQ = @not_on_ebc_file_xx## THEN '' 
--      ELSE PERM_DISQ.PERM_DISQ 
--     END 
--    WHEN PERM_DISQ.PERM_DISQ = '' OR PERM_DISQ IS NULL THEN @not_on_ebc_file_xx## 
--    ELSE PERM_DISQ.PERM_DISQ 
--   END 
SELECT CASE WHEN NOT PROFILE_BC.VOTERS_NO IS NULL THEN 
        CASE WHEN PERM_DISQ.PERM_DISQ = @not_on_ebc_file_xx## THEN '' 
         ELSE PERM_DISQ.PERM_DISQ 
        END 
       WHEN PERM_DISQ.PERM_DISQ = '' OR PERM_DISQ IS NULL THEN @not_on_ebc_file_xx## 
       ELSE PERM_DISQ.PERM_DISQ 
      END AS PERM_DISQ 
FROM PROFILE CP 
     INNER JOIN SOURCE SR 
      ON CP.CANDIDATE_ID = SR.CANDID_ID 
     LEFT JOIN PROFILE_BC 
      ON CP.VOTERS_NO = PROFILE_BC.VOTERS_NO 
     LEFT JOIN SOURCE PERM_DISQ 
      ON CP.CANDIDATE_ID = PERM_DISQ.CANDIDATE_ID 
WHERE CP.CANDIDATE_ID NOT LIKE 'MA%'; 


ROLLBACK TRANSACTION; 

取消对更新和设置语句和注释掉select语句来更新