因?yàn)楣ぷ鞯男枰谠谧鰯?shù)據(jù)的分析和數(shù)據(jù)的遷移。在做數(shù)據(jù)遷移的時(shí)候需要將原有的數(shù)據(jù)導(dǎo)入到新建的數(shù)據(jù)庫(kù)中。本來(lái)這個(gè)單純的數(shù)據(jù)導(dǎo)入導(dǎo)出是沒(méi)有什么問(wèn)題的,但是客戶原有的數(shù)據(jù)全部都是存在.dat文件中的。所以解決方案如下
一、首先用數(shù)據(jù)庫(kù)查看工具Database System Utility查看客戶提供的原有的.dat文件。并將該數(shù)據(jù)文件中的數(shù)據(jù)導(dǎo)出為.txt文件。
二、這里才是今天要將的關(guān)鍵部分。建設(shè)我們?cè)跀?shù)據(jù)庫(kù)中的表結(jié)構(gòu)是這樣的
create table Test(ID int identity(1,1) primary key ,Name nvarchar(20),Sex nvarchar (2),IsWork bit)
表結(jié)構(gòu)如圖
下面我們通過(guò)以下的簡(jiǎn)單的SQL語(yǔ)句即可實(shí)現(xiàn)數(shù)據(jù)的批量導(dǎo)入,代碼如下:
Bulk insert test
From ‘C:\Users\Olive\Desktop\test.txt’
With
( fieldterminator=’,’,
rowterminator=’\n’
)
備注:
1) bulk insert 為Sql server 中一個(gè)批量插入的操作
2)test 為上邊定義的表,即我們的數(shù)據(jù)將要插入的表
3) ‘C:\Users\Olive\Desktop\test.txt’為數(shù)據(jù)源文件所在磁盤(pán)上的物理路徑
4)with 相當(dāng)于一些插入的附屬條件,可以起這里添加一些約束限制條件等
5) fieldterminator=’,’字段的分割符為”,”一般的txt文本數(shù)據(jù)源的字段分隔都為逗號(hào),當(dāng)然也可以為其他,比如”|”
6) rowterminator=’\n’各條信息間的分割符為’\n’,一般的txt文本數(shù)據(jù)源的信息間的分割都是換行符,即一條信息占一行,也可以用其他格式如:”|\n”
三、執(zhí)行結(jié)果
1)執(zhí)行前,test.txt文本文檔的數(shù)據(jù)如下:執(zhí)行后,sql server中數(shù)據(jù)如下
四、bulk Insert詳解
這里只是大致上講了一下bulk insert的用法,因?yàn)槲覀兯婕暗谋斫Y(jié)構(gòu)比較簡(jiǎn)單,表之間的關(guān)聯(lián)也不是很大,所有就只是簡(jiǎn)單的用了下bulk insert。事實(shí)上bulk insert的功能還是比較強(qiáng)大的。上邊講了可以在with{}條件中加入一些參數(shù)以滿足不同的需要。下面我們看一下微軟官方的關(guān)于bulk insert 的用法介紹
BULK INSERT
[ database_name . [ schema_name ] . | schema_name . ] [ table_name | view_name ]
FROM 'data_file'
[ WITH
(
[ [ , ] BATCHSIZE = batch_size ]
[ [ , ] CHECK_CONSTRAINTS ]
[ [ , ] CODEPAGE = { 'ACP' | 'OEM' | 'RAW' | 'code_page' } ]
[ [ , ] DATAFILETYPE =
{ 'char' | 'native'| 'widechar' | 'widenative' } ]
[ [ , ] FIELDTERMINATOR = 'field_terminator' ]
[ [ , ] FIRSTROW = first_row ]
[ [ , ] FIRE_TRIGGERS ]
[ [ , ] FORMATFILE = 'format_file_path' ]
[ [ , ] KEEPIDENTITY ]
[ [ , ] KEEPNULLS ]
[ [ , ] KILOBYTES_PER_BATCH = kilobytes_per_batch ]
[ [ , ] LASTROW = last_row ]
[ [ , ] MAXERRORS = max_errors ]
[ [ , ] ORDER ( { column [ ASC | DESC ] } [ ,...n ] ) ]
[ [ , ] ROWS_PER_BATCH = rows_per_batch ]
[ [ , ] ROWTERMINATOR = 'row_terminator' ]
[ [ , ] TABLOCK ]
[ [ , ] ERRORFILE = 'file_name' ]
)]
這里我們主要看with中的一些參數(shù):(部分)
1) BATCHSIZE : 指定批處理中的行數(shù)
2) CHECK_CONSTRAINTS:啟用約束檢查,指定在大容量導(dǎo)入操作期間,必須檢查所有對(duì)目標(biāo)表或視圖的約束。若沒(méi)有 CHECK_CONSTRAINTS 選項(xiàng),則忽略所有 CHECK 和 FOREIGN KEY 約束,并在該操作后將表的約束標(biāo)記為不可信。始終強(qiáng)制使用 UNIQUE、PRIMARY KEY 和 NOT NULL 約束。
3) FIRE_TRIGGERS
指定將在大容量導(dǎo)入操作期間執(zhí)行目標(biāo)表中定義的所有插入觸發(fā)器。如果為針對(duì)目標(biāo)表的 INSERT 操作定義了觸發(fā)器,則每次完成批處理操作時(shí)均激發(fā)觸發(fā)器。
4) KEEPNULLS
指定空列在大容量導(dǎo)入操作期間應(yīng)保留 Null 值,而不插入列的任何默認(rèn)值
5) ORDER ( { column [ ASC | DESC ] } [ ,...n ] )
指定如何對(duì)數(shù)據(jù)文件中的數(shù)據(jù)排序。如果根據(jù)表中的聚集索引(如果有)對(duì)要導(dǎo)入的數(shù)據(jù)排序,則可提高大容量導(dǎo)入的性能
6) ERRORFILE ='file_name'
指定用于收集格式有誤且不能轉(zhuǎn)換為 OLE DB 行集的行的文件。這些行將按原樣從數(shù)據(jù)文件復(fù)制到此錯(cuò)誤文件中。