博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
《PowerShell V3——SQL Server 2012数据库自动化运维权威指南》——2.20 使用BULK INSERT实施批量导入...
阅读量:6301 次
发布时间:2019-06-22

本文共 3441 字,大约阅读时间需要 11 分钟。

本节书摘来自异步社区出版社《PowerShell V3—SQL Server 2012数据库自动化运维权威指南》一书中的第2章,第2.20节,作者:【加拿大】Donabel Santos,更多章节内容可以访问云栖社区“异步社区”公众号查看。

2.20 使用BULK INSERT实施批量导入

本方案描述了如何用PowerShell和BULK INSERT将CSV文件导入SQL Server。

2.20.1 准备

为了做导入测试,我们首先需要创建一个Person表,类似于AdventureWorks2008R2数据库的Person.Person表,简单地修改一下。

我们将在Test架构下创建,并移除一些约束,保持表简单且独立。

为了创建本练习中需要的表,我们打开SSMS,运行如下代码。

CREATE SCHEMA [Test]GOCREATE TABLE [Test].[Person]( [BusinessEntityID] [int] NOT NULL PRIMARY KEY, [PersonType] [nchar](2) NOT NULL, [NameStyle] [dbo].[NameStyle] NOT NULL, [Title] [nvarchar](8) NULL, [FirstName] [dbo].[Name] NOT NULL, [MiddleName] [dbo].[Name] NULL, [LastName] [dbo].[Name] NOT NULL, [Suffix] [nvarchar](10) NULL, [EmailPromotion] [int] NOT NULL, [AdditionalContactInfo] [xml] NULL, [Demographics] [xml] NULL, [rowguid] [uniqueidentifier] ROWGUIDCOL NOT NULL, [ModifiedDate] [datetime] NOT NULL)GO

在本方案中,我们将导入AdventureWorks2008R2.Person.Person.csv文件,Packt网站提供了可下载资源。保存在目录C:TempExports下。

或者,创建一个CSV文件,像在使用bcp实施批量导出方案中所提到的,替换文件名。

2.20.2 如何做…

1.通过“Start | Accessories | Windows PowerShell | Windows PowerShell ISE”打开PowerShell控制台。

2.首先添加一些辅助函数。输入如下并执行。

Import-Module SQLPS -DisableNameCheckingfunction Import-Person {<# .SYNOPSIS    Very simple function to get number    of records in Test.Person .NOTES    Author   : Donabel Santos .LINK    http://www.sqlmusings.com#> param([string]$instanceName,[string]$dbName)$query = @"TRUNCATE TABLE Test.PersonGOBULK INSERT AdventureWorks2008R2.Test.Person  FROM 'C:\Temp\Exports\AdventureWorks2008R2.Person.Person.csv'  WITH     (      FIELDTERMINATOR ='|',      ROWTERMINATOR ='\n'    )SELECT COUNT(*) AS NumRecordsFROM AdventureWorks2008R2.Test.Person"@;#check number of recordsInvoke-Sqlcmd -Query $query `-ServerInstance "$instanceName" `-Database $dbName}

3.现在在同一个会话中调用该函数。

$instanceName = "KERRIGAN"$dbName = "AdventureWorks2008R2"Import-Person $instanceName $dbName

2.20.3 如何实现…

使用BULK INSERT命令,从CSV或文本文件中将记录导入到SQL Server表,需要创建BULK INSERT T-SQL语句,并使用Invoke-Sqlcmd执行以下语句。

Invoke-Sqlcmd -Query $query `-ServerInstance "$instanceName" `-Database $dbName

然而,我们的做法不同于之前的方案。在本方案中,我们首先创建了一个函数,将所有核心导入任务括起来。

创建函数时,我们首先需要创建函数头部。

function Import-Person {

函数头部以function开始,然后跟随着函数名,以动词-名词的形式。函数体通过一对大括号括起来。

在函数头部后面,创建了注释信息,对头部进行注释。

<# .SYNOPSIS    Very simple function to get number   of records in Test.Person .NOTES    Author   : Donabel Santos .LINK    http://www.sqlmusings.com#>

在PowerShell中,块注释以<#开始,以#>结束。此外,这是一个特别类型的块注释,可以在Get-Help中显示函数的注释。现在我们输入:

Get-Help Import-Person

你得到的结果与从其他的cmdlet中获得的帮助类似。

image

在函数头部和注释后面是参数。Import-Person函数接受两个参数:instance name和database name。

param([string]$instanceName,[string]$dbName)

参数定义之后是函数定义。我们创建一个字符串,保存T-SQL语句。

$query = @"TRUNCATE TABLE Test.PersonGOBULK INSERT AdventureWorks2008R2.Test.Person  FROM 'C:\Temp\Exports\AdventureWorks2008R2.Person.Person.csv'  WITH     (      FIELDTERMINATOR ='|',      ROWTERMINATOR ='\n'    )SELECT COUNT(*) AS NumRecordsFROM AdventureWorks2008R2.Test.Person"@;

在创建查询后,我们将其传递给Invoke-Sqlcmd cmdlet,让它在SQL Server实例中执行。

Invoke-Sqlcmd -Query $query `-ServerInstance "$instanceName" `-Database $dbName

在PowerShell中,函数默认是本地域范围,但是当通过ISE运行时,将保持一个全局域范围。在我们的方案中,一旦你运行第一部分含有函数定义的脚本,你可以在当前会话中的任何时候调用函数。我们可以看到该函数简化了导入记录,我们只需要明确实例名、数据库名和Import-Person函数。

$instanceName = "KERRIGAN"$dbName = "AdventureWorks2008R2"Import-Person $instanceName $dbName

如果你使用Shell,想要函数能在全局域范围内访问,保存该脚本为.ps1文件,并点号加载它。另一个方法是添加函数名和global。

function global:Import-Person {

2.20.4 请参阅…

执行查询语句/SQL脚本方案

使用bcp实施批量导入。

转载地址:http://izzxa.baihongyu.com/

你可能感兴趣的文章
静态代码块与构造代码块
查看>>
冲刺第七天
查看>>
UART中的硬件流控RTS与CTS DTR DSR DTE设备和DCE设备【转】
查看>>
阿里云:双十一350亿交易额的幕后英雄
查看>>
Python实战(1)
查看>>
hdu 1106 排序
查看>>
2017.12.24 web测试作业第一次小组例会
查看>>
二.第一个自动化demo,打开APP-如何获取包名和activity。(真机)
查看>>
MVP模式
查看>>
HDU-1003 Max Sum
查看>>
R语言笔记001——读取csv格式数据
查看>>
[UVALive 2678] Subsequence
查看>>
https基础
查看>>
css3 canvas之刮刮卡效果
查看>>
并查集模板
查看>>
jq ajax之beforesend(XHR)
查看>>
RESTful Mongodb
查看>>
BZOJ3237:[AHOI2013]连通图(线段树分治,并查集)
查看>>
如何提高Ajax性能
查看>>
SQL中的注释语句
查看>>