SQL Server中数据行批量插入脚本的存储实现

   2016-01-15 0
核心提示:这篇文章主要介绍了SQL Server中数据行批量插入脚本的存储实现 的相关资料,需要的朋友可以参考下

无意中看到朋友写的一篇文章“将表里的数据批量生成INSERT语句的存储过程的实现”。我仔细看文中的两个存储代码,自我感觉两个都不太满意,都是生成的单行模式的插入,数据行稍微大些性能会受影响的。所在公司本来就存在第二个版本的类似实现,但是是基于多行模式的,还是需要手工添加UNAION ALL来满足多行模式的插入。看到这篇博文和基于公司数据行批量脚本的存储的缺点,这次改写和增强该存储的功能。

   本存储运行于SQL Server 2005或以上版本,T-SQL代码如下:

 IF OBJECT_ID(N'dbo.usp_GetInsertSQL', 'P') IS NOT NULL
 BEGIN
  DROP PROCEDURE dbo.usp_GetInsertSQL;
 END
 GO
 --==================================
 -- 功能: 获取数据表记录插入的SQL脚本
 -- 说明: 具体实现阐述 
 -- 作者: XXX
 -- 创建: yyyy-MM-dd
 -- 修改: yyyy-MM-dd XXX 修改内容描述
 --==================================
 CREATE PROCEDURE dbo.usp_GetInsertSQL 
 (
  @chvnTable NVARCHAR(),   -- 数据表名称(建议只使用表名称,不要带有分隔符[])
  @chvnWhere NVARCHAR() = N'', -- where查询条件(不带WHERE关键字)
  @bitIsSingleRow BIT =     -- 是否单行模式,默认为单行模式(单行模式为单行INSERT INTO VALUES格式;非单行模式(多行模式)为多行INSERT INTO SELECT格式)
 )
  --$Encode$--
 AS
 BEGIN
  SET NOCOUNT ON;
  SET @bitIsSingleRow = ISNULL(@bitIsSingleRow, );
  DECLARE
   @intTableID AS INT,
   @chvnSchemaTableName NVARCHAR();/*格式:[schema].[table]--++++++(各部分对应字符数)*/
  SELECT
   @intTableID = ,
   @chvnSchemaTableName = N'';
  SELECT
   @intTableID = object_id
   ,@chvnSchemaTableName = QUOTENAME(SCHEMA_NAME(schema_id)) + N'.' + QUOTENAME(@chvnTable) /*组合架构名称和表名称的连接*/
  FROM sys.objects
  WHERE name = @chvnTable
   AND type = 'U';
  DECLARE
   @chvnColumnNames NVARCHAR(),    -- 字段列名集,多个以逗号','分隔,格式如:[column_name],[column_name],...
   @chvnColumnValues AS NVARCHAR(MAX);    -- 字段列值集,多个以逗号','分隔 
  DECLARE 
   @chvnTSQL AS NVARCHAR(MAX),      -- TSQL脚本变量
   @chvnInsertIntoBoday AS NVARCHAR();   -- InsertInto主体变量
  SELECT
   @chvnTSQL = N'',
   @chvnInsertIntoBoday = N'';
  SELECT
   @chvnColumnNames = ISNULL(@chvnColumnNames + N',', N'') + QUOTENAME(T.column_name)
   ,@chvnColumnValues = ISNULL(@chvnColumnValues + N' + '','' + ', N'') + CAST(T.column_value AS NVARCHAR())
  FROM (SELECT 
     name AS column_name /*字段列名*/
     /*字段列值*/
     ,column_value = CASE
      WHEN system_type_id IN (, , , , , , , , , , ) /*数字数据类型:整数数据类型(bit、tinyint、smallint、int、bigint),带精度和小数的数据类型(decimal、numeric)和货币数据类型(monery和smallmoney*/       
        THEN 'CASE WHEN '+ name + ' IS NULL THEN ''NULL'' ELSE CAST(' + name + ' AS VARCHAR) END'
      WHEN system_type_id IN (, , , , ) /*日期和时间数据类型:datetime、smalldatetime(兼容sql server 新增 date、datetime和time)*/
        THEN 'CASE WHEN '+ name + ' IS NULL THEN ''NULL'' ELSE '''''''' + REPLACE(CONVERT(VARCHAR(), ' + name + ', ), '' ::.'', '''') + '''''''' END'
      WHEN system_type_id IN () /*字符串数据类型:varchar*/
        THEN 'CASE WHEN '+ name + ' IS NULL THEN ''NULL'' ELSE '''''''' + REPLACE(' + name + ', '''''''', '''''''''''') + '''''''' END'
      WHEN system_type_id IN () /*Unicode字符串数据类型:nvarchar*/
        THEN 'CASE WHEN '+ name + ' IS NULL THEN ''NULL'' ELSE ''N'''''' + REPLACE(' + name + ', '''''''','''''''''''') + '''''''' END'
      WHEN system_type_id IN () /*字符串数据类型:char*/
        THEN 'CASE WHEN '+ name + ' IS NULL THEN ''NULL'' ELSE '''''''' + CAST(REPLACE(' + name + ', '''''''' ,'''''''''''') AS CHAR(' + CAST(max_length AS VARCHAR) + ')) + '''''''' END'
      WHEN system_type_id IN () /*nicode字符串数据类型:nchar*/
        THEN 'CASE WHEN '+ name + ' IS NULL THEN ''NULL'' ELSE ''N'''''' + CAST(REPLACE(' + name + ', '''''''' ,'''''''''''') AS CHAR(' + CAST(max_length AS VARCHAR) + ')) + '''''''' END'
      ELSE '''NULL''' END
    FROM sys.columns 
    WHERE object_id = @intTableID
  ) AS T;
  SET @chvnInsertIntoBoday = N'''INSERT INTO '+ @chvnSchemaTableName + N' (' + @chvnColumnNames + N')'''; 
  -- 方式一、代码格式使用了GOTO和Label
  --BEGIN
  -- IF @bitIsSingleRow = /*多行模式*/
  -- BEGIN 
  --  SET @chvnTSQL = N'SELECT ''SELECT '' + ' + @chvnColumnValues + ' AS RowData, ROW_NUMBER() OVER(ORDER BY (SELECT NULL)) AS RowNum FROM ' + @chvnSchemaTableName
 
  --  -- 此处不能使用GOTO WhereCondition;,因为之后的代码不会被执行
  --  IF @chvnWhere > ''
  --  BEGIN
  --   SET @chvnTSQL = @chvnTSQL + ' WHERE ' + @chvnWhere;
  --  END
  --  -- 处理多行模式,需要使用ROW_NUMBER窗口函数  
  --  SET @chvnTSQL = N'SELECT CASE WHEN T.rownum = THEN REPLICATE(N'' '', LEN(N''UNION ALL '') + ) + T.RowData ELSE N''UNION ALL '' + T.RowData END' +
  --      N' FROM (' + @chvnTSQL + N') AS T';
  --  SET @chvnTSQL = N'SELECT '+ @chvnInsertIntoBoday + N';' +
  --      @chvnTSQL;
  --  GOTO MultiRow;
  -- END
  -- ELSE IF @bitIsSingleRow = /*当行模式*/
  -- BEGIN
  --  SET @chvnTSQL = N'SELECT ' + @chvnInsertIntoBoday + 
  --      N' + ''VALUES('' + ' + @chvnColumnValues + ' + '');'' FROM ' + @chvnSchemaTableName;
  --  GOTO WhereCondition;
  -- END
  -- -- where查询条件
  -- WhereCondition:
  -- IF @chvnWhere > ''
  -- BEGIN
  --  SET @chvnTSQL = @chvnTSQL + ' WHERE ' + @chvnWhere;
  -- END
 
  -- MultiRow:/*多行模式GOTO的Label空标记*/
  --END
  -- 方式二、存在部分代码的冗余
  BEGIN
   IF @bitIsSingleRow = /*多行模式*/
   BEGIN 
    SET @chvnTSQL = N'SELECT ''SELECT '' + ' + @chvnColumnValues + ' AS RowData, ROW_NUMBER() OVER(ORDER BY (SELECT NULL)) AS RowNum FROM ' + @chvnSchemaTableName 
    IF @chvnWhere > ''
    BEGIN
     SET @chvnTSQL = @chvnTSQL + ' WHERE ' + @chvnWhere;
    END
    -- 多行模式特殊代码,需要使用ROW_NUMBER窗口函数 
    SET @chvnTSQL = N'SELECT CASE WHEN T.rownum = THEN REPLICATE(N'' '', LEN(N''UNION ALL '') + ) + T.RowData ELSE N''UNION ALL '' + T.RowData END' +
        N' FROM (' + @chvnTSQL + N') AS T';
    SET @chvnTSQL = N'SELECT '+ @chvnInsertIntoBoday + N';' +
        @chvnTSQL;
   END
   ELSE IF @bitIsSingleRow = /*单行模式*/
   BEGIN
    SET @chvnTSQL = N'SELECT ' + @chvnInsertIntoBoday + 
        N' + ''VALUES('' + ' + @chvnColumnValues + ' + '');'' FROM ' + @chvnSchemaTableName;
    IF @chvnWhere > ''
    BEGIN
     SET @chvnTSQL = @chvnTSQL + ' WHERE ' + @chvnWhere;
    END
   END
  END
  PRINT @chvnTSQL;  
  EXEC(@chvnTSQL);
 END
 GO 

    为了测试以上存储的效果,下面准备一个有数据的数据表,T-SQL代码如下:

 IF OBJECT_ID(N'dbo.UserLoginInfo', N'U') IS NOT NULL
 BEGIN
  DROP TABLE dbo.UserLoginInfo;
 END
 GO
 -- create testing table UserLoginInfo
 CREATE TABLE dbo.UserLoginInfo (
  ID INT IDENTITY(, ) PRIMARY KEY,
  Name VARCHAR() NOT NULL,
  LoginTime DATETIME NOT NULL
 );
 GO
 -- insert testing data
 INSERT dbo.UserLoginInfo (Name, LoginTime) VALUES 
 ('zhang', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::')
 ,('zhang', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::')
 ,('zhang', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::')
 ,('zhang', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::')
 ,('zhang', '-- ::')
 ,('li', '-- ::')
 ,('li', '-- ::')
 ,('li', '-- ::')
 ,('li', '-- ::')
 ,('li', '-- ::')
 ,('li', '-- ::')
 ,('li', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::')
 ,('zhang', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::')
 ,('zhang', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::')
 ,('zhang', '-- ::')
 ,('li', '-- ::')
 ,('wang', '-- ::');
 GO 
 
先测试单行模式的效果,相应的T-SQL代码如下:
 
 EXEC dbo.usp_GetInsertSQL
  @chvnTable = N'UserLoginInfo',   -- nvarchar()
  @chvnWhere = N'',      -- nvarchar()
  @bitIsSingleRow = ;     -- bit
 GO 

执行后的查询结果如下:

SQL Server中数据行批量插入脚本的存储实现 

 再测试多行模式的效果,相应的T-SQL代码如下:

 EXEC dbo.usp_GetInsertSQL
  @chvnTable = N'UserLoginInfo',   -- nvarchar()
  @chvnWhere = N'',      -- nvarchar()
  @bitIsSingleRow = ;     -- bit
 GO

执行后的查询效果如下:

SQL Server中数据行批量插入脚本的存储实现 

注意:多行模式,还需要将以上的两个结果前后合并在一个文件就可以啦。

以上内容是小编给大家分享的SQL Server中数据行批量插入脚本的存储实现,希望大家喜欢。

 
反对 0举报 0 评论 0
 

免责声明:本文仅代表作者个人观点,与乐学笔记(本网)无关。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
    本网站有部分内容均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责,若因作品内容、知识产权、版权和其他问题,请及时提供相关证明等材料并与我们留言联系,本网站将在规定时间内给予删除等相关处理.

  • sql:mysql:函数:TIMESTAMPDIFF函数实现TimeStamp字段相减,求得时间差
    sql:mysql:函数:TIMESTAMPDIFF函数实现TimeS
     函数内指定是minute,则最终结果value值的单位是分钟,如果函数内指定为hours,则最终结果value值单位为小时。//UPLOAD_TIME 减去 CREATE_DTTM 求得时间差,以分钟数计时select avg(TIMESTAMPDIFF(MINUTE,CREATE_DTTM,UPLOAD_TIME)) value,LEFT(CREATE_DTTM
    03-08
  • 去重复的sql(Oracle) 去重复的英文
    1.利用group by 去重复2.可以利用下面的sql去重复,如下  1) select id,name,sex from (select a.*,row_number() over(partition by a.id,a.set order by name) su from test a ) where su=1  2)select id,name,sex from (select a.*,row_number() over(p
    02-10
  • Oracle SQL七次提速技巧
    以下SQL执行时间按序号递减。1,动态SQL,没有绑定变量,每次执行都做硬解析操作,占用较大的共享池空间,若共享池空间不足,会导致其他SQL语句的解析信息被挤出共享池。create or replace procedure proc1as beginfor i in 1..100000 loop    execute imme
    02-10
  • Oracle\SQL  Server等及其他基本语句写法
    Oracle\SQL Server等及其他基本语句写法
    Oracle\SQL  Server等及其他基本语句写法目录一.Excel相关 11.Excel中写脚本范例: 12.提取字节 23. 提取单元格内字符 24.VLOOKUP函数: 2二.SQL语句汇总 21.建表: 22.增 33.删 44.查 65.改 236.Alter的应用 24三.数据库备份与恢复脚本 261. Oracle: 2
    02-10
  • SQL ORACLE case when函数用法
    case when 用法(1)简单case函数:格式:  case 列名   when 条件值1 then 选项1  when 条件值1 then 选项2......  else 默认值 end例如:  select   case job_level  when '1' then '1111'  when '2' then '2222'   when '3' then '3333
    02-10
  • mysql下如何执行sql脚本 执行SQL脚本
    1.编写sql脚本,假设内容如下:  create database dearabao;  use dearabao;  create table niuzi (name varchar(20));  保存脚本文件,假设我把它保存在F盘的hello world目录下,于是该文件的路径为:F:\hello world\niuzi.sql2.执行sql脚本,可以有2种方法: 
    02-10
  • MySQL 5.7版本sql_mode=only_full_group_by问题
    用到GROUP BY 语句查询时com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Expression #2 of SELECT list is not in GROUP BY clause and contains nonaggregated column 'col_user_6.a.START_TIME' which is not functionally dependent on colu
    02-10
  • Oracle迁移到MySQL性能下降的注意点 oracle数据
    背景:最近有较多的客户系统由原来由Oracle改造到MySQL后出现了性能问题CPU 100%,或是后台的CRM系统复杂SQL在业务高峰的时候出现堆积导致业务故障。在我的记忆里面淘宝最初从Oracle迁移到MySQL期间也遇到了很多SQL的性能问题,记忆最为深刻的子查询,当初的
    02-10
  • ORACLE中通过SQL语句(alter table)来增加、删除
    1.添加字段:alter table  表名  add (字段  字段类型)  [ default  '输入默认值']  [null/not null]  ;2.添加备注:comment on column  库名.表名.字段名 is  '输入的备注';  如: 我要在ers_data库中  test表 document_type字段添加备注  comm
    02-10
  • MySQL与Oracle 差异比较之六触发器
    触发器编号类别ORACLEMYSQL注释1创建触发器语句不同create or replace trigger TG_ES_FAC_UNIT  before insert or update or delete on ES_FAC_UNIT  for each rowcreate trigger `hs_esbs`.`TG_INSERT_ES_FAC_UNIT` BEFORE INSERT on `hs_esbs`.`es_fac_u
    02-10
点击排行