Erreur 403 Interdit la simulation de demande via C#

J'ai fait un succès de la demande à l'aide du navigateur et à l'enregistrer dans un violon.

Les seules choses qui diffèrent de votre demande:

• mon navigateur a envoyé aucune valeur pour le sCallerURL paramètre (j'ai sCallerURL= au lieu de sCallerURL=http%3A%2F%2Fwww....)
• les identifiants de session sont différents (évidemment)
• J'ai d'autres Accept-Language: valeurs (je suis sûr que ce n'est pas important)
• la Content-Length est différente (bien évidemment)

Mise à jour

OK, je pensais que le Violoneux trace a partir de votre application. Dans le cas où vous n'êtes pas fixer des cookies sur votre demande, faites ceci:

• avant la publication des données, faire une requête GET à https://www.sefaz.rr.gov.br/sintegra/servlet/hwsintco. Si vous examinez la réponse, vous remarquerez que le site envoie deux cookies de session.
• lorsque vous faites la demande de publication, assurez-vous de joindre les cookies que vous avez obtenu à l'étape précédente

Si vous ne savez pas comment stocker les cookies et de les utiliser dans la demande autre, prendre un coup d'oeil ici.

Mise à jour 2

Les problèmes

OK, j'ai réussi à reproduire le 403, compris ce qu'il fait, et a trouvé une solution.

Ce qui se passe dans la requête POST, c'est que:

• le serveur répond avec un statut 302 (redirection temporaire) et la redirection emplacement
• le navigateur redirige (fait une requête GET) à cet emplacement, aussi poster les deux témoins.

.NET HttpWebRequest tente de faire cette redirection transparente, mais dans ce cas il y a deux questions (que je considère bugs dans le .NET mise en œuvre):

1. la requête GET après le POST(redirection) a le même type de contenu que la requête POST (application/x-www-form-urlencoded). Pour les requêtes GET, cela ne devrait pas être spécifié

2. la gestion des cookies problème (le problème le plus important) - Le site web envoie deux témoins: GX_SESSION_ID et JSESSIONID. Le second a un chemin d'accès spécifié (/sintegra), tandis que la première ne l'est pas.

Voici la différence: le navigateur assigne par défaut d'un chemin de /(root) pour le premier cookie, alors .NET affecte l'url de la requête chemin (/sintegra/servlet/hwsintco).

Pour cette raison, la dernière requête GET (après redirection) à /sintegra/servlet/hwsintpe... n'est pas la première cookie passé, que son chemin ne correspond pas.

Les correctifs

• Pour le problème de redirection (GET avec content-type), la solution est de faire la redirection manuellement, au lieu de s'appuyer sur .NET pour cela.

Pour ce faire, de lui dire de ne pas suivre les redirections:

postRequest.AllowAutoRedirect = false

et de lire ensuite les rediriger l'emplacement de la réponse POST et de faire manuellement une requête GET sur elle.

• Le cookie problème (que est arrivé à d'autres ainsi)

Pour cela, la solution que j'ai trouvé était de prendre le égaré cookie de la CookieContainer, set path correctement et l'ajouter au conteneur dans l'emplacement correct.

C'est le code pour le faire:

private void FixMisplacedCookie(CookieContainer cookieContainer)
{
    var misplacedCookie = cookieContainer.GetCookies(new Uri(Url))[0];

    misplacedCookie.Path = "/"; //instead of "/sintegra/servlet/hwsintco"

    //place the cookie in thee right place...
    cookieContainer.SetCookies(
        new Uri("https://www.sefaz.rr.gov.br/"), 
        misplacedCookie.ToString());
}

---

Voici tout le code pour le faire fonctionner:

using System;
using System.IO;
using System.Net;
using System.Text;
namespace XYZ
{
public class Crawler
{
const string Url = "https://www.sefaz.rr.gov.br/sintegra/servlet/hwsintco";
public void Crawl()
{
var cookieContainer = new CookieContainer();
/* initial GET Request */
var getRequest = (HttpWebRequest)WebRequest.Create(Url);
getRequest.CookieContainer = cookieContainer;
ReadResponse(getRequest); //nothing to do with this, because captcha is f#@%ing dumb :)
/* POST Request */
var postRequest = (HttpWebRequest)WebRequest.Create(Url);
postRequest.AllowAutoRedirect = false; //we'll do the redirect manually; .NET does it badly
postRequest.CookieContainer = cookieContainer;
postRequest.Method = "POST";
postRequest.ContentType = "application/x-www-form-urlencoded";
var postParameters =
"_EventName=E%27CONFIRMAR%27.&_EventGridId=&_EventRowId=&_MSG=&_CONINSEST=&" +
"_CONINSESTG=08775724000119&cfield=much&_VALIDATIONRESULT=1&BUTTON1=Confirmar&" +
"sCallerURL=";
var bytes = Encoding.UTF8.GetBytes(postParameters);
postRequest.ContentLength = bytes.Length;
using (var requestStream = postRequest.GetRequestStream())
requestStream.Write(bytes, 0, bytes.Length);
var webResponse = postRequest.GetResponse();
ReadResponse(postRequest); //not interested in this either
var redirectLocation = webResponse.Headers[HttpResponseHeader.Location];
var finalGetRequest = (HttpWebRequest)WebRequest.Create(redirectLocation);
/* Apply fix for the cookie */
FixMisplacedCookie(cookieContainer);
/* do the final request using the correct cookies. */
finalGetRequest.CookieContainer = cookieContainer;
var responseText = ReadResponse(finalGetRequest);
Console.WriteLine(responseText); //Hooray!
}
private static string ReadResponse(HttpWebRequest getRequest)
{
using (var responseStream = getRequest.GetResponse().GetResponseStream())
using (var sr = new StreamReader(responseStream, Encoding.UTF8))
{
return sr.ReadToEnd();
}
}
private void FixMisplacedCookie(CookieContainer cookieContainer)
{
var misplacedCookie = cookieContainer.GetCookies(new Uri(Url))[0];
misplacedCookie.Path = "/"; //instead of "/sintegra/servlet/hwsintco"
//place the cookie in thee right place...
cookieContainer.SetCookies(
new Uri("https://www.sefaz.rr.gov.br/"),
misplacedCookie.ToString());
}
}
}