PDO et LOAD DATA LOCAL INFILE ne fonctionne pas

2019 Modifier

7 ans plus tard Sammitch ici pour vous dire que ma réponse est brut. Je ne peux même pas comprendre ce que le diable, je parlais avec "fgetcsv() de l'utilisation des ressources". Il est possible que il y a 7 ans PHP manquait un peu de l'OI flux optimisations qui est d'aujourd'hui, mais je suis prêt à être qu'il était de contraintes de ressources, sans rapport avec PHP.

Jay Dhameliya la réponse ci-dessous est probablement la façon dont vous voulez aller. LOAD DATA INFILE devrait blast les données directement dans mySQL aussi vite que possible.

Par souci d'exhaustivité, en supposant qu'il n'y est quelque chose de prévention de la consommation de LOAD DATA INFILE [comme l'énorme trou de sécurité a récemment découvert] et que vous voulez charger efficacement de données à partir d'un fichier, vous aurez probablement envie de l'effet de levier des opérations par lots IO index et de l'écrit. Par exemple:

$fname = 'myfile.csv';

if( ! $fh = fopen($myfile, 'r') ) {
    throw new Exception("Could not open $fname for reading.");
}

$dbh = new PDO(...);
$dbh->beginTransaction();
$stmt = $dbh->prepare('INSERT INTO table VALUES (?,?,?,...)')
try {
    while( $params = fgetcsv($fh) ) {
        $stmt->execute($params);
    }
} catch( \PDOException $e ) {
    $dbh->rollBack();
    throw $e;
}
$dbh->commit();

Avoir tout groupées en une seule transaction est toujours une partie de la raison avec LOAD DATA INFILE est si rapide, ainsi que probablement une grande partie de @Benjamin suggestion de l'utilisation des insertions étendues.

Original Brut Réponse

1. LOAD DATA LOCAL INFILE interdit en PHP...
2. Assurez-vous que la base de données mySQL et www les utilisateurs ont accès au fichier en question.

Alternative: Utiliser fgetcsv() et de créer les inserts de la programmation.

edit:

Pour éviter l'utilisation de la ressource de problèmes avec fgetcsv() [parce qu'il essaie de lire le fichier en entier à la fois] vous pouvez créer une boucle similaire à ci-dessous pour lire/insérer des morceaux gérables.

<?php
$fname = 'myfile.csv';
$chunksize = 50;

if( ! $fh = fopen($myfile, 'r') ) {
    throw new Exception("Could not open $fname for reading.");
}

$i=0;
$buffer = array()
while(!feof($fh)) {
    $buffer[] = fgets($fh);
    $i++;
    if( ($i % $chunksize) == 0 ) {
        commit_buffer($buffer);
        //run inserts
        $buffer = array(); //blank out the buffer.
    }
}

//clean out remaining buffer entries.
if( count($buffer) ) { commit_buffer($buffer); }

function commit_buffer($buffer) {
    foreach( $buffer as $line ) {
        $fields = explode(',', $line);
        //create inserts
    }
    //run inserts
    $buffer = array(); //blank out the buffer.
}

De cette façon seulement $chunksize lignes sont conservés en mémoire à un moment donné.

Vous aurez probablement besoin de plus de code pour gérer les choses comme encapsulé chaînes contenant des virgules et des sauts de ligne, mais si vous ne pouvez pas obtenir LOAD DATA LOCAL INFILE de travail je ne vois pas beaucoup d'autres choix.

OriginalL'auteur Sammitch

J'ai eu le même problème. Mon serveur MySQL a le droit local-infile conf, PHP/PDO avait le droit PDO::MYSQL_ATTR_LOCAL_INFILE conf trop.
La solution a été de (ré)installer php5-mysqlnd.

$> apt-get update
$> apt-get install php5-mysqlnd

...et cela a fonctionné 🙂

OriginalL'auteur Marc Necker