ITPub博客

首页 > Linux操作系统 > Linux操作系统 > 用dts导入多个文件数据到sql server中(转)

用dts导入多个文件数据到sql server中(转)

原创 Linux操作系统 作者:jcszjswkzhou 时间:2019-05-29 22:30:07 0 删除 编辑
在我们工作中,经常需要将保存在文件中的数据导入到sql serve的表中。有时可能需要同时从相同或不相同的文件目录中导入多个文件的数据到sql server中。这里我们将讨论如何使用批处理文件和dts从一个特定的文件目录中,导入多个文件的数据到sqlserver中。
试验环境
  我们先创建整个试验的环境。创建文件目录“c:myimport”,和三个文件a.csv、b.csv和c.csv,文件内容如下。同时,在sql server中创建一个表用来存放导入的数据。
    c:myimporta.csv
    1, mak, a9411792711, 3400.25
    2, claire, a9411452711, 24000.33
    3, sam, a5611792711, 1200.34
    4, wright, a5611792711, 1200.34
    5, richard, g561d792755, 1223.34
    6, valarie, b5611792788, 1240.32
    c:myimport.csv
    11, rubon, 9671792711, 400.14
    22, mike, 9418952711, 4000.56
    39, hsu, 75611792511, 1230.00
    c:myimportc.csv
    69, lucy, 8411992710, 305.11
    45, grace, 3413452713, 246.52
    33, saint, 5461795716, 1278.70
    
    create database bank
    go
    use bank
    go
    create table account([id] int, name varchar(100),
    accountno varchar(100), balance money)
    go
    create table logtable (id int identity(1,1),
   status varchar(500),
   importeddate datetime default getdate())
    go
    use master
    go
    sp_addlogin ’importuser’,’import’,’bank’
    go
    use bank
    go
    sp_adduser ’importuser’
    go
    sp_addrolemember ’db_datareader’,’importuser’
    go
    sp_addrolemember ’db_datawriter’,’importuser’
    go
  创键dts
  1、在dts中创建3个全局变量,filename、servername和databasename。
  
  
  2、创建text file (source) 和sql server连接,并创建数据转换任务,如下图所示。
  
  3、设置数据转换的对应关系如下图。
  

  4、创建动态属性任务(dynamic tasks):连接inputfile中,设置catalog的值为全局变量databasename,datasource的值为全局变量filename;连接sqlserver中,设置datasource的值为全局变量servername。
  

  
  5、增加一个“成功时”的工作流在动态属性任务和连接inputfile之间。
  
  6、如下图那样,创建一个执行sql任务,来保存数据导入的记录。
  sql为insert into logtable (status) values (?)
  
  
  点击参数,来设置参数,设置参数1为全局变量filename。

  
  7、增加一个“成功时”的工作流在连接sqlserver和执行sql任务之间。
  
  8、将dts包保存成结构化存储文件。你也可以保存在sql server中,但我们这里只讨论保存成结构化存储文件的方式。
  
  创建批处理文件
 如下所示创建批处理文件c:myimportimport.bat。
    rem type: batch file
    rem created by: digjim
    rem import all csv files to sql server using dts

    rem export dir listing to c:myimportdirlist.txt
    dir c:myimport*.csv /b > c:myimportdirlist.txt

    rem execute dts package for every file name in the dirlist.txt

    for /f "tokens=1,2,3" %%i in (c:myimportdirlist.txt) do "c:program filesmicrosoft sql server80 oolsinndtsrun.exe" -f "c:myimportmyimportdts1.dts" -u importuser -p import ╟a "servername"="digjim" -a "filename"="c:myimport\%%i" -a "databasename"="bank"

    rem rename all the files with "old" as suffix
    ren c:myimport*.csv *.oldcsv
  执行批处理文件
  当批处理文件被执行以后,他会在c:myimport目录下产生一个dirlist.txt的文件,这个文件会包含所有c:myimport下扩展名为csv的文件,这些文件名会和其他必须的参数一气传输给dtsrun.exe。在这个例子里,dirlist.txt的内容如下:
    c:myimportdirlist.txt
    acsv
    b.csv
    c.csv
  注意,在批处理文件中,根据你自己的情况设置servername,filename和databasename参数。

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/10294527/viewspace-122655/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2007-08-29

  • 博文量
    2820
  • 访问量
    2075849