基于SQL Server的CSV导入

1) CSV文件数据之间可能有，(逗号)(例如: 描述)，那么我如何才能使导入处理这些数据?

解决方案

如果使用，(逗号)作为分隔符，则无法区分作为字段结束符的逗号和数据中的逗号。我会使用不同的FIELDTERMINATOR，如||。代码看起来就像。这将完美地处理逗号和单斜杠。

2)如果客户端从excel中创建了csv，那么有数据 逗号被括在"…(双引号)[如下所示 那么导入如何处理这个问题呢?

解决方案

如果你使用BULK插入，那么没有办法处理双引号，数据将 用双引号插入行。 在将数据插入表后，您可以将这些双引号替换为"。

update table
set columnhavingdoublequotes = replace(columnhavingdoublequotes,'"','')

3)我们如何跟踪某些行是否有坏数据，哪些导入被跳过? 导入会跳过不可导入的行吗?

解决方案

处理由于无效数据或格式而未加载到表中的行，可以是 使用ERRORFILE属性，指定错误文件名，它将写入行 有错误到错误文件。代码应该像这样。

BULK INSERT SchoolsTemp
    FROM 'C:\CSVData\Schools.csv'
    WITH
    (
    FIRSTROW = 2,
    FIELDTERMINATOR = ',',  --CSV field delimiter
    ROWTERMINATOR = '\n',   --Use to shift the control to next row
    ERRORFILE = 'C:\CSVDATA\SchoolsErrorRows.csv',
    TABLOCK
    )

如上所述，您需要添加FORMAT和FIELDQUOTE选项来批量将. csv数据插入SQL Server。对于你的case, SQL语句是这样的:

BULK INSERT SchoolsTemp
FROM 'C:\CSVData\Schools.csv'
WITH
(
    FORMAT = 'CSV', 
    FIELDQUOTE = '""',
    FIRSTROW = 2,
    FIELDTERMINATOR = ',',
    ROWTERMINATOR = '\n',
    TABLOCK
)

虽然SSMS中的BULK INSERT非常适合一次性导入作业，但根据您的用例，您可能需要SSMS内部或使用第三方的其他选项。下面是一个详细的指南，描述了将CSV文件导入SQL Server的各种选项，包括自动化(我的意思是计划)过程和为CSV位置指定FTP或文件存储的方法。

2)如果客户端从excel中创建了csv，那么有数据 逗号被括在"…(双引号)[如下所示 那么导入如何处理这个问题呢?

你应该使用FORMAT = 'CSV'， FIELDQUOTE = '"'选项:

BULK INSERT SchoolsTemp
FROM 'C:\CSVData\Schools.csv'
WITH
(
    FORMAT = 'CSV', 
    FIELDQUOTE = '"',
    FIRSTROW = 2,
    FIELDTERMINATOR = ',',  --CSV field delimiter
    ROWTERMINATOR = '\n',   --Use to shift the control to next row
    TABLOCK
)

我知道有公认的答案，但我仍然想分享我的场景，也许能帮助人们解决他们的问题 工具

ASP。网 Ef码优先法 地对地导弹 EXCEL

场景 我正在加载数据集，它是CSV格式的，稍后将在视图中显示 我试图使用散装装载，但我无法装载散装装载正在使用

FIELDTERMINATOR = ','

Excel细胞也在使用， 然而，我也不能直接使用平面文件源，因为我使用的是代码优先的方法，并且只在SSMS DB中制作模型，而不是在我后来必须使用属性的模型中。

解决方案

我使用平面文件源，并从CSV文件制作DB表(右键单击SSMS中的DB ->导入平面文件->选择CSV路径，并按照指示进行所有设置) 在Visual Studio中创建模型类(你必须保持所有的数据类型和名称与sql中加载的CSV文件相同) 在NuGet包控制台使用Add-Migration 更新数据库

从2013-11-05如何使用SQL Server Management Studio将CSV文件导入到数据库中:

First create a table in your database into which you will be importing the CSV file. After the table is created: Log into your database using SQL Server Management Studio Right click on your database and select Tasks -> Import Data... Click the Next > button For the Data Source, select Flat File Source. Then use the Browse button to select the CSV file. Spend some time configuring how you want the data to be imported before clicking on the Next > button. For the Destination, select the correct database provider (e.g. for SQL Server 2012, you can use SQL Server Native Client 11.0). Enter the Server name; Check Use SQL Server Authentication, enter the User name, Password, and Database before clicking on the Next > button. On the Select Source Tables and Views window, you can Edit Mappings before clicking on the Next > button. Check the Run immediately check box and click on the Next > button. Click on the Finish button to run the package.

以下是我的解决方法:

只需将您的CSV文件保存为excel中的XLS表(通过这样做，您不必担心分隔符。Excel的电子表格格式将被读取为一个表，并直接导入到SQL表中) 使用SSIS导入文件 在导入管理器中编写一个自定义脚本，以省略/修改您正在寻找的数据。(或者运行一个主脚本来仔细检查要删除的数据)

祝你好运。