国产成人精品亚洲777人妖,欧美日韩精品一区视频,最新亚洲国产,国产乱码精品一区二区亚洲

您的位置:首頁(yè)技術(shù)文章
文章詳情頁(yè)

講解SQL Server海量數(shù)據(jù)導(dǎo)入的最快方法

瀏覽:6日期:2023-11-05 19:47:51

這篇論壇文章(賽迪網(wǎng)技術(shù)社區(qū))詳細(xì)講解了SQL Server海量數(shù)據(jù)導(dǎo)入的最快方法,更多內(nèi)容請(qǐng)參考下文:

最近做某項(xiàng)目的數(shù)據(jù)庫(kù)分析,要實(shí)現(xiàn)對(duì)海量數(shù)據(jù)的導(dǎo)入問(wèn)題,就是最多把200萬(wàn)條數(shù)據(jù)一次導(dǎo)入sqlserver中,如果使用普通的insert語(yǔ)句進(jìn)行寫(xiě)出的話,恐怕沒(méi)個(gè)把小時(shí)完不成任務(wù),先是考慮使用bcp,但這是基于命令行的,對(duì)用戶來(lái)說(shuō)友好性太差,實(shí)際不大可能使用;最后決定使用BULK INSERT語(yǔ)句實(shí)現(xiàn),BULK INSERT也可以實(shí)現(xiàn)大數(shù)據(jù)量的導(dǎo)入,而且可以通過(guò)編程實(shí)現(xiàn),界面可以做的非常友好,它的速度也很高:導(dǎo)入100萬(wàn)條數(shù)據(jù)不到20秒中,在速度上恐怕無(wú)出其右者。

但是使用這種方式也有它的幾個(gè)缺點(diǎn):

1.需要獨(dú)占接受數(shù)據(jù)的表

2.會(huì)產(chǎn)生大量的日志

3.從中取數(shù)據(jù)的文件有格式限制

但相對(duì)于它的速度來(lái)說(shuō),這些缺點(diǎn)都是可以克服的,而且你如果愿意犧牲一點(diǎn)速度的話,還可以做更精確的控制,甚至可以控制每一行的插入。

對(duì)與產(chǎn)生占用大量空間的日志的情況,我們可以采取在導(dǎo)入前動(dòng)態(tài)更改數(shù)據(jù)庫(kù)的日志方式為大容量日志記錄恢復(fù)模式,這樣就不會(huì)記錄日志了,導(dǎo)入結(jié)束后再恢復(fù)原來(lái)的數(shù)據(jù)庫(kù)日志記錄方式。

具體的一個(gè)語(yǔ)句我們可以這樣寫(xiě):

alter database taxi

set RECOVERY BULK_LOGGED

BULK INSERT taxi..detail FROM 'e:out.txt'

WITH (

?? DATAFILETYPE = 'char',

?? FIELDTERMINATOR = ',',

?? ROWTERMINATOR = 'n',

?TABLOCK

)

alter database taxi

set RECOVERY FULL

這個(gè)語(yǔ)句將從e:out.txt導(dǎo)出數(shù)據(jù)文件到數(shù)據(jù)庫(kù)taxi的detail表中。

主站蜘蛛池模板: 河北省| 昭平县| 荃湾区| 赣榆县| 台中市| 左云县| 宁化县| 沐川县| 桐城市| 军事| 汉沽区| 体育| 延寿县| 山阴县| 西华县| 即墨市| 斗六市| 启东市| 水富县| 乌鲁木齐县| 七台河市| 大冶市| 株洲市| 新田县| 开平市| 云梦县| 七台河市| 友谊县| 华池县| 北流市| 灌云县| 庆城县| 呈贡县| 嘉荫县| 遂宁市| 巴彦淖尔市| 称多县| 锡林浩特市| 舟山市| 德化县| 射阳县|