Dans Node.js / Express, comment puis-je “télécharger” une page et obtient son format HTML?

À l'intérieur du code, je veux la télécharger "http://www.google.com" et de le stocker dans une chaîne de caractères.
Je sais comment le faire que dans urllib en python. Mais comment voulez-vous faire dans Node.JS + Express?

Est-il un moyen facile de faire cela? Je suis l'espoir d'un bon ensemble d ' "outils" que je peux télécharger un module...
Pouvez-vous expliquer ce que vous entendez par "dans le code"?

OriginalL'auteur TIMEX | 2011-04-27

  1. 16

    À l'aide de node.js vous pouvez simplement utiliser le protocole http.la méthode de requête

    http://nodejs.org/docs/v0.4.7/api/all.html#http.request

    Cette méthode est intégrée dans le nœud, vous avez juste besoin d'exiger http.

    Si vous voulez juste faire un GET, vous pouvez utiliser le protocole http.obtenir

    http://nodejs.org/docs/v0.4.7/api/all.html#http.get

    var options = {
  host: 'www.google.com',
  port: 80,
  path: '/index.html'
};

http.get(options, function(res) {
  console.log("Got response: " + res.statusCode);
}).on('error', function(e) {
  console.log("Got error: " + e.message);
});

    (Exemple de node.js docs)

    Vous pouvez également utiliser mikeal demande du module

    https://github.com/mikeal/request

    La demande de module qui fonctionne le mieux. J'ai essayé les deux et le natif module http pend de plusieurs demandes simultanées.
    C'est vrai jusqu'à ce que vous avez à travailler avec les redirections, facultatif autorisation de base etc. npm install download fonctionne le mieux.

    OriginalL'auteur

  2. 20
    var util = require("util"),
    http = require("http");

var options = {
    host: "www.google.com",
    port: 80,
    path: "/"
};

var content = "";   

var req = http.request(options, function(res) {
    res.setEncoding("utf8");
    res.on("data", function (chunk) {
        content += chunk;
    });

    res.on("end", function () {
        util.log(content);
    });
});

req.end();

    OriginalL'auteur

  3. 3

    Simple, court et efficace du code 🙂

    var request = require("request");

request(
    { uri: "http://www.sitepoint.com" },
    function(error, response, body) {
        console.log(body);
    }
);

    doc lien : https://github.com/request/request

    OriginalL'auteur