Itérer sur chaque ligne dans une chaîne de caractères en PHP

J'ai un formulaire qui permet à l'utilisateur de télécharger un fichier texte ou copier/coller le contenu du fichier dans un textarea. Je peux facilement la différence entre les deux et mis selon un, ils sont entrés dans une variable de type string, mais où dois-je aller à partir de là?

J'ai besoin de faire une itération sur chaque ligne de la chaîne (de préférence de ne pas se soucier des retours à la ligne sur des machines différentes), assurez-vous qu'il a exactement un jeton (pas d'espaces, des tabulations, des virgules, etc.), désinfecter les données, puis de générer une requête SQL basé sur toutes les lignes.

Je suis un assez bon programmeur, donc je sais que l'idée générale sur la façon de le faire, mais il a été si longtemps depuis que j'ai travaillé avec PHP que je suis à la recherche pour les mauvaises choses, et donc à venir avec des informations inutiles. La clé du problème, je vais avoir, c'est que je veux lire le contenu de la chaîne, ligne par ligne. Si c'était un fichier, il serait très facile.

Je recherche surtout utile pour les fonctions de PHP, pas un algorithme pour savoir comment faire. Des suggestions?

  • Vous pouvez normaliser les retours à la ligne en premier. La méthode s($myString)->normalizeLineEndings() est disponible avec github.com/delight-im/PHP-Str (bibliothèque sous Licence MIT) qui a beaucoup d'autres outils de la chaîne des aides. Vous pouvez prendre un coup d'oeil au code source.
InformationsquelleAutor Topher Fangio | 2009-09-22
  1. 163

    preg_split la variable contenant le texte, et de parcourir le tableau retourné:

    foreach(preg_split("/((\r?\n)|(\r\n?))/", $subject) as $line){
    //do stuff with $line
}
    • Sera-ce la poignée ^M en plus \n\r ?
    • Je ne sais pas si le code ascii du caractère retour chariot est converti \r une fois qu'il est placé à l'intérieur d'une variable. Si non, vous pouvez toujours utiliser un split()/exlope() avec la valeur ascii au lieu-ch(13)
    • Il va traiter les CR+LF (Windows et divers protocoles de l'Internet) et LF (Unix) formes. Il ne gère pas les plaine de CR (Mac) ou LF+CR (je ne connais pas du tout ce qui les utilise). Mais les crochets dans les regexp sont inutiles.
    • Une meilleure regexp est /((\r?\n)|(\r\n?))/.
    • Pour correspondre à Unix LF (\n), MacOS<9 CR (\r), Windows CR+LF (\r\n) et de rares LF+CR (\n\r), il devrait être: /((\r?\n)|(\n?\r))/
    • que dire de la simple '/\r\n|\r|\n/'?
    • Il est probable que cette bombe invalidante pour multi-octets de données.
    • Expression régulière est terminée exagéré ici, lente et gourmande en mémoire. Aussi, avez-vous fixé une limite à la taille du fichier texte?
    • pourquoi pas (\r?\n?) travail?
    • peut correspondre à '' (la chaîne vide), qui consistera essentiellement à diviser la chaîne en caractères.
    • Si vous voulez quelque chose de court, CodeAngry montre que /[\r\n]+/ œuvres. J'ai ajouter l'avertissement que cela va correspondre à un seul ou de plusieurs retours à la ligne sans discernement, qui peut être indésirable. Bien sûr, bon retour à la ligne de fractionnement ne doit pas être fait à l'aide de regexp (pour des raisons de performances).

    InformationsquelleAutor Kyril
  2. 135

    Je voudrais proposer un significativement plus rapide (et de mémoire efficace) alternative: strtok plutôt que preg_split.

    $separator = "\r\n";
$line = strtok($subject, $separator);

while ($line !== false) {
    # do something with $line
    $line = strtok( $separator );
}

    De tester les performances, j'ai répété 100 fois sur un fichier de test avec 17 de milliers de lignes: preg_split a pris de 27,7 secondes, alors que strtok a 1,4 secondes.

    Noter que bien que le $separator est défini comme "\r\n", strtok seront séparés sur un des personnages - et de PHP4.1.0, sauter des lignes vides/jetons.

    Voir le strtok la saisie manuelle:
    http://php.net/strtok

    • Merci! Je vais essayer de voir si on peut l'accélérer. Bien que, nous sommes habituellement seulement environ 200 lignes, de sorte que la vitesse n'est généralement pas un problème 🙂
    • +1 pour les facteurs de performance lorsque vous traitez avec de la ligne à grande jeux.
    • Bien que cette fonction api est un désordre total (appel avec des paramètres différents) c'est la meilleure solution. Ni prey_split ni explode doit être utilisé pour la production structuré fragments de chaîne. C'est comme visant à une mouche avec un bazooka.
    • Si vous cochez l'utilisation de la mémoire, tandis que l'application est en cours d'exécution, puis vous verrez la magie. Il tire en fait le fichier que vous êtes en train de lire dans la mémoire dans le cas où vous boucle sur chacune des lignes, et, il maintient votre jeton d'emplacement. Vous aurez envie de couleur que pour être vraiment efficace en terme de mémoire. php.net/strtok#103051
    • note rapide, à l'aide de strtok() sur quelque chose d'autre à l'intérieur qui while boucle de casser des choses. J'ai été également l'utiliser pour saisir tout dans une chaîne de caractères jusqu'au premier espace (stackoverflow.com/a/2477411/1767412) et m'a pris une minute pour comprendre pourquoi les choses n'allaient pas comme prévu
    • doit être accepté de répondre, sans doute la solution la plus rapide de toutes les options.
    • Je suis ridicule, l'utilisation de la mémoire utilisation de cette méthode pour une raison quelconque. Juste courir environ 20 Url, c'était épuisant 134 millions de dollars de la mémoire. explode a très bien fonctionné.
    • Peut-être, @zen, vous n'êtes pas à la segmentation jusqu'à la fin, ou ont fait l'objet de la chaîne de rester dans la mémoire?

    InformationsquelleAutor Erwin Wessels
  3. 93

    Si vous devez gérer les retours à la ligne dans différents systèmes que vous pouvez simplement utiliser le PHP constante prédéfinie, PHP_EOL (http://php.net/manual/en/reserved.constants.php) et utilisez simplement exploser pour éviter la surcharge du moteur d'expression régulière.

    $lines = explode(PHP_EOL, $subject);
    • Méfiez-vous: Il fonctionnera sur les différents systèmes d' mais il ne marche pas bien, avec des cordes à partir de différents systèmes. Le Manuel PHP les états qui PHP_EOL (string) est La bonne "Fin De Ligne" symbole de ce plate-forme.
    • est droit! Si vous êtes un traitement de texte Windows fichier sur un serveur Unix, il échouera.
    • Méfiez-vous que, selon la longueur de vos lignes, on peut manger de très grandes quantités de mémoire pour les grandes chaînes.
    • Notez que si la dernière ligne contient un terminateur de ligne, alors ce sera également le retour d'une autre chaîne vide après.
    InformationsquelleAutor FerCa
  4. 18

    C'est trop compliqué et laid, mais à mon avis, c'est le chemin à parcourir:

    $fp = fopen("php://memory", 'r+');
fputs($fp, $data);
rewind($fp);
while($line = fgets($fp)){
  //deal with $line
}
fclose($fp);
    • +1 et vous pouvez également utiliser php://temp pour stocker plus de données de fichier de disque temporaire.
    • Vous pouvez exécuter un test de performance contre preg_split?
    • Il convient de noter que cela permet de détecter des lignes vides, contrairement à la strtok() solution. La documentation est dans le php.net/manual/en/...
    InformationsquelleAutor pguardiario
  5. 4
    foreach(preg_split('~[\r\n]+~', $text) as $line){
    if(empty($line) or ctype_space($line)) continue; //skip only spaces
    //if(!strlen($line = trim($line))) continue; //or trim by force and skip empty
    //$line is trimmed and nice here so use it
}

    ^ c'est une façon de briser les lignes correctement, multi-plateforme compatible avec Regexp 🙂

    InformationsquelleAutor CodeAngry
  6. 4

    Kyril de réponse est meilleur en considérant que vous avez besoin pour être en mesure de gérer les retours à la ligne sur des machines différentes.

    "Je recherche surtout utile pour les fonctions de PHP, pas un algorithme pour combien de
    de le faire. Des suggestions?"

    - Je utiliser ces beaucoup:

    • explode() peut être utilisée pour découper une chaîne en un tableau, donné un
      seul délimiteur.
    • implode() est exploser sa contrepartie, à aller à partir de la matrice de chaînes de caractères.
    InformationsquelleAutor Joe Kiley
  7. 3

    Éventuels problèmes de mémoire avec strtok:

    Depuis l'une des solutions proposées utilise strtok, malheureusement, il n'a pas un potentiel problème de mémoire (si elle prétend être efficace en terme de mémoire). Lors de l'utilisation de strtok selon le manuel, l':

    Noter que seul le premier appel à strtok utilise l'argument chaîne.
    Chaque appel ultérieur à strtok seulement besoin de jeton à utiliser, comme il
    conserve la trace de l'endroit où il est dans le courant de la chaîne.

    Il le fait par le chargement d'un fichier dans la mémoire. Si vous utilisez des fichiers volumineux, vous devez rincer si vous êtes fait une boucle dans le fichier.

    <?php
function process($str) {
    $line = strtok($str, PHP_EOL);

    /*do something with the first line here...*/

    while ($line !== FALSE) {
        //get the next line
        $line = strtok(PHP_EOL);

        /*do something with the rest of the lines here...*/

    }
    //the bit that frees up memory
    strtok('', '');
}

    Si vous êtes concernés par les fichiers physiques (par exemple. datamining):

    Selon le manuel de l', pour l'upload de fichier, vous pouvez utiliser le file commande:

     //Create the array
 $lines = file( $some_file );

 foreach ( $lines as $line ) {
   //do something here.
 }
    InformationsquelleAutor AbsoluteƵERØ