狠狠色丁香婷婷综合尤物/久久精品综合一区二区三区/中国有色金属学报/国产日韩欧美在线观看 - 国产一区二区三区四区五区tv

LOGO OA教程 ERP教程 模切知識交流 PMS教程 CRM教程 開發文檔 其他文檔  
 
網站管理員

SQLServer中采用bulk insert語句一次性插入十萬級以上大量數據到指定的數據庫表(字段數量不同)

admin
2023年7月31日 21:54 本文熱度 1268

Sql server 的 bulk insert 語句可以高效的導入大數據量的平面文件(txt,csv文件)到數據庫的一張表中,其用法如下:

bulk insert tableName

from 'E:\\ClickSun\\ChinaIP.csv'

with

(fieldterminator=',',

rowterminator='\n')

其中"tableName"是數據庫表的名字,"E:\ClickSun\ChinaIP.csv"是導入平面文件的地址,fieldterminator 指定平面文件中列的分隔符是什么,rowterminator 指定平面文件中行的結束符是什么。


還可以使用 FIRSTROW LASTROW 限制行數。如下COPY前三行:

bulk insert tableName

from 'E:\\ClickSun\\ChinaIP.csv'

with

(fieldterminator=',',

rowterminator='\n',

FIRSTROW =1,

LASTROW=3)

要把平面文件數據導入到數據庫表中,平面文件只有9個字段,數據庫表有12個字段,字段數量不一致,怎么把平面文件字段的對應到表的字段,如何用 bulk insert 來實現?


數據庫表 china_ip_range

create TABLE china_ip_range

(

    id INT identity,

    address varchar(25),

    IPS0 tinyint,

    IPS1 tinyint,

    IPS2 tinyint,

    IPS3 tinyint,

    IPE0 tinyint,

    IPE1 tinyint,

    IPE2 tinyint,

    IPE3 tinyint,

    input_ime datetime

)


平面文件數據是:E:\ClickSun\ChinaIP.csv

address,IPS0,IPS1,IPS2,IPS3,IPE0,IPE1,IPE2,IPE3

中國北京,1,2,2,0,1,2,2,255

中國北京,1,2,4,0,1,2,4,255

中國北京,1,2,5,0,1,2,5,255

中國北京,1,2,8,0,1,2,8,255

中國北京,1,4,4,0,1,4,4,255

中國北京,1,8,0,0,1,8,255,255

中國北京,1,12,0,0,1,12,255,255

中國北京,1,13,96,0,1,13,127,255

中國北京,1,14,128,0,1,14,191,255

中國北京,1,14,224,0,1,15,255,255

中國北京,1,45,0,0,1,45,255,255

中國北京,1,88,0,0,1,91,255,255

中國北京,1,92,0,0,1,95,255,255

中國北京,1,116,0,0,1,117,255,255

中國北京,1,119,0,0,1,119,255,255

中國北京,1,202,0,0,1,203,255,255

中國北京,8,130,0,0,8,130,55,255

中國北京,8,130,56,0,8,131,255,255

中國北京,11,164,228,0,11,164,233,255


先在E盤clicksun目錄下面存放一個格式化xml文件:E:\ClickSun\ChinaIP.xml

<?xml version="1.0"?>

<BCPFORMAT xmlns="http://schemas.microsoft.com/sqlserver/2004/bulkload/format" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">

 <RECORD>

  <FIELD ID="1" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="25" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="2" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="3" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="4" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="5" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="6" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="7" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="8" xsi:type="CharTerm" TERMINATOR="," MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

  <FIELD ID="9" xsi:type="CharTerm" TERMINATOR="\r\n" MAX_LENGTH="3" COLLATION="Chinese_PRC_CI_AS"/>

 </RECORD>

 <ROW>

  <COLUMN SOURCE="1" NAME="address" xsi:type="SQLVARYCHAR"/>

  <COLUMN SOURCE="2" NAME="IPS0" xsi:type="SQLTINYINT"/>

  <COLUMN SOURCE="3" NAME="IPS1" xsi:type="SQLTINYINT"/>

  <COLUMN SOURCE="4" NAME="IPS2" xsi:type="SQLTINYINT"/>

  <COLUMN SOURCE="5" NAME="IPS3" xsi:type="SQLTINYINT"/>

  <COLUMN SOURCE="6" NAME="IPE0" xsi:type="SQLTINYINT"/>

  <COLUMN SOURCE="7" NAME="IPE1" xsi:type="SQLTINYINT"/>

  <COLUMN SOURCE="8" NAME="IPE2" xsi:type="SQLTINYINT"/>

  <COLUMN SOURCE="9" NAME="IPE3" xsi:type="SQLTINYINT"/>

 </ROW>

</BCPFORMAT>


然后使用 bulk insert 語句時,采用 FORMATFILE 參數指定該 ChinaIP.xml 文件:

BULK insert china_ip_range

    from 'E:\\ClickSun\\ChinaIP.csv'

WITH

(

    FORMATFILE = 'E:\\ClickSun\\ChinaIP.xml',

    FIELDTERMINATOR=',',

    ROWTERMINATOR='\n',

    FIRSTROW = 2

)

完整寫法:

set conn=opendb("oabusy","conn","accessdsn")

conn.execute("BULK insert china_ip_range from 'E:\\ClickSun\\ChinaIP.csv' WITH (FORMATFILE = 'E:\\ClickSun\\ChinaIP.xml',FIELDTERMINATOR = ',',ROWTERMINATOR = '\n',FIRSTROW = 2)")

conn.close

set conn=nothing

這樣 bulk insert 語句就會按照 ChinaIP.xml 文件中的列映射,將平面文件 E:\ClickSun\ChinaIP.csv 的各列數據,依次插入到表 china_ip_rangeaddress、IPS0、IPS1、IPS2、IPS3、IPE0、IPE1、IPE2、IPE3這九個字段上了。測試了一個將近10萬行的文件,執行時間在毫秒級,瞬間即操作完畢。


該文章在 2023/8/17 16:51:39 編輯過

全部評論1

admin
2023年7月31日 22:9

相關文章參考:


該評論在 2023/7/31 22:12:05 編輯過
關鍵字查詢
相關文章
正在查詢...
點晴ERP是一款針對中小制造業的專業生產管理軟件系統,系統成熟度和易用性得到了國內大量中小企業的青睞。
點晴PMS碼頭管理系統主要針對港口碼頭集裝箱與散貨日常運作、調度、堆場、車隊、財務費用、相關報表等業務管理,結合碼頭的業務特點,圍繞調度、堆場作業而開發的。集技術的先進性、管理的有效性于一體,是物流碼頭及其他港口類企業的高效ERP管理信息系統。
點晴WMS倉儲管理系統提供了貨物產品管理,銷售管理,采購管理,倉儲管理,倉庫管理,保質期管理,貨位管理,庫位管理,生產管理,WMS管理系統,標簽打印,條形碼,二維碼管理,批號管理軟件。
點晴免費OA是一款軟件和通用服務都免費,不限功能、不限時間、不限用戶的免費OA協同辦公管理系統。
Copyright 2010-2025 ClickSun All Rights Reserved