时间戳

首页 > 解决方案 > 使用php批量加载到天蓝色

php - 使用php批量加载到天蓝色

问题描述

我正在尝试使用 PHP 将 CSV 加载到 Azure 网络服务器数据库。每个 CSV 文件有 2000 行。我让它工作了，但是当我在网页上运行文件时，数据库只更新了 479 个条目，我不知道为什么。该网页需要很长时间才能处理，然后它会显示页面说它已完成。这是我对插入语句的内容。

try {
    $connection = new PDO("sqlsrv:server = tcp:".$SrvName.",1433; Database = ".$DBName, $SQL_USER, $SQL_PASS);
    if (($handle = fopen("personal.csv", "r")) !== FALSE) {
        while (($data = fgetcsv($handle, 1000, ",")) !== FALSE) {
            $num = count($data);
            $sql = "INSERT INTO personal (clientId, lastname, ssn)
                    VALUES ($data[0], $data[1],$data[2])";
            $statement = $connection->prepare($sql);
            $statement->execute();
        }
        fclose($handle);
    }

} catch(PDOException $error) {
    echo $sql . "<br>" . $error->getMessage();
}

非常感谢任何帮助！

标签： phpsql-serverazuresqlsrv

解决方案

我认为我们有两个解决方案：

解决方案
1 如何：将数据作为流发送：Microsoft Drivers for PHP for SQL Server 利用 PHP 流将大对象发送到服务器。

解决方案2
设计一个存储过程，将文件名作为参数传递。
示例代码：

SET ANSI_NULLS ON
GO

SET QUOTED_IDENTIFIER ON
GO

CREATE PROCEDURE [dbo].[spBulkInsert]  @FileName varchar(255)
AS
declare @sql varchar(max)
BEGIN Try
set @sql =  
'INSERT into  ext.customer_Staging with (TABLOCK) (customer, age, gender)
   SELECT * FROM OPENROWSET(
   BULK '+ @FileName + ',
   DATA_SOURCE = ''MyDataSource'',
   FORMAT = ''CSV'',
   FORMATFILE_DATA_SOURCE = ''MyDataSource''
   ) AS DataFile;
   go'

 exec(@sql)
END TRY 

BEGIN CATCH
    PRINT ERROR_MESSAGE()
END CATCH

GO

然后用php调用这个sqlserver存储过程实例。

但不要直接将BULK INSERT 插入到您的真实表中。

  • 我总是会从 CSV 文件中插入临时表 ext.customer_Staging（没有 IDENTITY 列）
  • 可能编辑/清理/操作您导入的数据
  • 然后使用以下 T-SQL 语句将数据复制到真实表中：
INSERT into  ext.customer_Staging with (TABLOCK) (customer, age, gender)
   SELECT * FROM OPENROWSET(
   BULK 'bs140513_032310-demo.csv',
   DATA_SOURCE = 'MyDataSource',
   FORMAT = 'CSV',
   FORMATFILE_DATA_SOURCE = 'MyDataSource'
   ) AS DataFile;
   go

INSERT INTO ext.customer(Name, Address) 
   SELECT customer, age, gender
   FROM ext.customer_Staging

推荐阅读