如何使用批量插入csv到SQL Server,并正确处理日期时间格式?

3

我想使用批量插入文件CSV插入到SQL Server 2012中。同一列具有日期时间,但使用批量插入日期时间格式无法工作,并且我不使用SSIS。

示例创建表:

CREATE TABLE [dbo].[scanindex_test](
    [request_no] [varchar](13) NOT NULL,
    [request_date] [datetime] NULL,
    [id_card] [varchar](20) NULL,
    [firstname] [varchar](100) NULL,
    [surname] [varchar](100) NULL
)

查询 Sql Server 2012:

declare 
    @path      varchar(255),
    @sql       varchar(5000)           

SET @path = 'C:\Test\TESTFILE.csv'    

set @sql = 'BULK INSERT [dbo].[scanindex_test] FROM ''' + @path + ''' 
      ' + '     WITH (      
                CODEPAGE=''RAW'',           
                FIELDTERMINATOR = '','', 
                ROWTERMINATOR = ''\n''
                ) '
print @sql
exec (@sql)

当我运行查询时,出现错误:
Msg 4864, Level 16, State 1, Line 1
Bulk load data conversion error (type mismatch or invalid character for the specified codepage) for row 11, column 2 (request_date).
Msg 4865, Level 16, State 1, Line 1
Cannot bulk load because the maximum number of errors (10) was exceeded.
Msg 7399, Level 16, State 1, Line 1
The OLE DB provider "BULK" for linked server "(null)" reported an error. The provider did not give any information about the error.
Msg 7330, Level 16, State 2, Line 1
Cannot fetch a row from OLE DB provider "BULK" for linked server "(null)".

CSV文件中的示例数据

request_no | request_date  | id_card  | firstname    | surname
1          | 12/7/2017     | 1122     | AA           | BB
2          | 12/7/2017     | 4399     | SS           | EE
3          | 13/7/2017     | 5599     | QQ           | KK     

运行查询时的结果:

request_no | request_date            | id_card  | firstname | surname
1          | 2017-12-07 00:00:00.000 | 1122     | AA        | BB
2          | 2017-12-07 00:00:00.000 | 4399     | SS        | EE
3  >> Error, because it's look datetime format: 2017-13-07 (yyyy-mm-dd)

但我希望结果日期时间格式(YYYY-MM-DD)是正确的:

request_no | request_date            | id_card | firstname | surname
1          | 2017-07-12 00:00:00.000 | 1122    | AA        | BB
2          | 2017-07-12 00:00:00.000 | 4399    | SS        | EE
3          | 2017-07-13 00:00:00.000 | 5599    | QQ        | KK

请帮我。提前感谢;)

首先,SQL Server的导入和ETL工具是SSIS,而不是bcp或BULK INSERT。这些工具适用于快速批量操作。日期解析或任何类型的解析都不是快速的。在这种情况下,您可以使用格式文件(如使用格式文件批量导入数据所示),并指定与日期格式匹配的日期字段排序规则。 - Panagiotis Kanavos
如果那样做不起作用,您就必须将文件导入到分段表中并解析日期字段。但是,如果您使用SSIS,则不必这样做。 - Panagiotis Kanavos
2个回答

2

您需要将DATEFORMAT更改为DMY。在脚本顶部添加以下内容即可:

SET DATEFORMAT DMY;

因此,您的完整脚本应该是:

SET DATEFORMAT DMY;

declare 
    @path      varchar(255),
    @sql       varchar(5000)           

SET @path = 'C:\Test\TESTFILE.csv'    

set @sql = 'BULK INSERT [dbo].[scanindex_test] FROM ''' + @path + ''' 
      ' + '     WITH (      
                CODEPAGE=''RAW'',           
                FIELDTERMINATOR = '','', 
                ROWTERMINATOR = ''\n''
                ) '
print @sql
exec (@sql)

1
据我所知,DATEFORMAT 与 BULK INSERT 不兼容。 - Bacon Bits

0

它可以与批量插入一起使用:

SET DATEFORMAT DMY
BULK INSERT [dbo].[TRX]
        FROM 'C:\..\trx2.txt'
            WITH
    (           
                FIELDTERMINATOR = '\t',
                ROWTERMINATOR = '\n',
                FIRSTROW = 2
    )
PRINT 'BULK INSERT [TRX2]'
GO

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接