Traitement de fichiers JSON volumineux en PHP

J'ai écrit un flux JSON pull analyseur pcrov/JsonReader pour PHP 7, avec une api basée sur XMLReader.

Il diffère sensiblement de cas basée sur des analyseurs en ce qu'au lieu de créer des rappels et de laisser l'analyseur faire sa chose, vous appeler des méthodes sur l'analyseur de bouger ou de récupérer des données comme vous le souhaitez. Trouvé souhaitée bits et que vous voulez arrêter l'analyse? Alors arrêter de l'analyse (et appel close() parce que c'est la bonne chose à faire.)

(Pour un peu plus de vue d'ensemble de la traction vs basés sur des événements, des analyseurs de voir Lecteur XML modèles: SAX rapport à XML pull analyseur.)

---

Exemple 1:

Lire chaque objet comme un tout à partir de votre JSON.

use pcrov\JsonReader\JsonReader;

$reader = new JsonReader();
$reader->open("data.json");

$reader->read(); //Outer array.
$depth = $reader->depth(); //Check in a moment to break when the array is done.
$reader->read(); //Step to the first object.
do {
    print_r($reader->value()); //Do your thing.
} while ($reader->next() && $reader->depth() > $depth); //Read each sibling.

$reader->close();

De sortie:

Array
(
    [property] => value
    [property2] => value2
)
Array
(
    [prop] => val
)
Array
(
    [foo] => bar
)

Des objets retournés comme stringly assortie de tableaux à cause (en partie) à bord des cas où JSON valide serait de produire des noms de propriété qui ne sont pas autorisés dans les objets PHP. Travail autour de ces conflits n'est pas la peine, une anémie objet stdClass apporte pas de valeur à un tableau simple de toute façon.

---

Exemple 2:

Lire chaque élément nommé individuellement.

$reader = new pcrov\JsonReader\JsonReader();
$reader->open("data.json");

while ($reader->read()) {
    $name = $reader->name();
    if ($name !== null) {
        echo "$name: {$reader->value()}\n";
    }
}

$reader->close();

De sortie:

property: value
property2: value2
prop: val
foo: bar

---

Exemple 3:

Lire chaque propriété d'un nom donné. Bonus: lire un chaîne de caractères au lieu d'un URI, ainsi que d'obtenir des données à partir des propriétés avec des noms identiques dans le même objet (ce qui est permis en JSON, comment s'amuser.)

$json = <<<'JSON'
[
    {"property":"value", "property2":"value2"},
    {"foo":"foo", "foo":"bar"},
    {"prop":"val"},
    {"foo":"baz"},
    {"foo":"quux"}
]
JSON;

$reader = new pcrov\JsonReader\JsonReader();
$reader->json($json);

while ($reader->read("foo")) {
    echo "{$reader->name()}: {$reader->value()}\n";
}

$reader->close();

De sortie:

foo: foo
foo: bar
foo: baz
foo: quux

---

Comment faire exactement pour mieux lire votre JSON dépend de sa structure et de ce que vous voulez faire avec elle. Ces exemples devraient vous donner un endroit pour commencer.

C'est simple, streaming analyseur pour le traitement de grandes JSON documents. L'utiliser pour l'analyse de très grands JSON documents, afin d'éviter le chargement de l'ensemble de la chose en mémoire, ce qui est la façon dont à peu près tous les autres parser JSON pour PHP fonctionne.

https://github.com/salsify/jsonstreamingparser