更新大批量數(shù)據(jù)的背景：

用戶需要將VIP的微信標識，傳給用戶的ERP會員檔案中，已知存量數(shù)據(jù)約50W行數(shù)據(jù)，線下的微信標識數(shù)據(jù)我們開發(fā)提供了openid和erpid的csv文件，erpid和線下的會員檔案id對應，需要將openid也更新到會員檔案里。

更新數(shù)量大致分為兩大步驟

一、將我們要更新的數(shù)據(jù)源導入數(shù)據(jù)庫內(nèi)，需要創(chuàng)建臨時表，將數(shù)據(jù)傳入臨時表
二、寫游標，將臨時表內(nèi)的數(shù)據(jù)與需要更新的數(shù)據(jù)進行更新

1.將csv文件里面的數(shù)據(jù)導入數(shù)據(jù)庫臨時表中，先創(chuàng)建臨時表

create table vip_openid
(erpid number(10),
 openid varchar(200)
)

2.臨時表創(chuàng)建后，將cvs文件里的數(shù)據(jù)導入表中，在這里我們選擇工具>文本導入器 

選擇要導入的csv文件，注意csv文件的表字段和數(shù)據(jù)庫表字段對應 

選擇文件后在界面將會預覽導入的數(shù)據(jù) 

3.點擊到oracle的數(shù)據(jù)，選擇導入的表，先選擇用戶名，用戶名下的表名，然后選擇表與csv文件表字段對應關系，我們選擇導入，可以看到提示導入完成。

4.接下來就是對會員表和臨時表的數(shù)據(jù)關聯(lián)更新，我們先使用直接update方式進行更新試驗，該方法只更新5W數(shù)據(jù)，耗時12分鐘左右：

于是參考百度文檔建議，寫了一個游標如下

declare
 cursor cur is--聲明游標cur
 select B.openid，A.ID ROW_ID
  FROM C_CLIENT_VIP A ,VIP_OPENID B
  WHERE A.ID=B.ERPID
  ORDER BY A.ID;--從A和B表中找到ID對應的openid，并對游標內(nèi)數(shù)組排序
 V_COUNTER NUMBER;--聲明一個number類型的變量
BEGIN 
V_VOUNTER:=0;--初始化變量值為0
 FOR ROW IN CUR LOOP--遍歷游標
  UPDATE C_CLIENT_VIP A SET A.OPENID=ROW.OPENID WHERE A.ID=ROW_ID;
    V_COUNTER:=V_COUNTER+1;--每次循環(huán)變量值+1
  IF(V_COUNTER>=1000) THEN
    COMMIT;
    V_COUNTER:=0;--每更新1000行，V_COUNTER值為1000時候，就提交給數(shù)據(jù)庫
    提交后將變量歸零，繼續(xù)下一個1000行更新
  END IF;
 END LOOP;
  COMMIT;
END;

大概48W行數(shù)據(jù)，43秒即更新完畢。

使用以上方式注意一點，因為數(shù)據(jù)庫會員表的ID有索引，所以使用游標速率很快。如我們的多表關聯(lián)字段沒有索引，使用此方式可能效果不是很明顯。

總結

以上就是這篇文章的全部內(nèi)容了，希望本文的內(nèi)容對大家的學習或者工作具有一定的參考學習價值，謝謝大家對腳本之家的支持。如果你想了解更多相關內(nèi)容請查看下面相關鏈接