zlib.erreur: -3 Erreur lors de la décompression: en-tête incorrect vérifier

J'ai un fichier gzip et je suis en train de le lire via Python comme ci-dessous:

import zlib

do = zlib.decompressobj(16+zlib.MAX_WBITS)
fh = open('abc.gz', 'rb')
cdata = fh.read()
fh.close()
data = do.decompress(cdata)

il met cette erreur:

zlib.error: Error -3 while decompressing: incorrect header check

Comment puis-je vaincre?

InformationsquelleAutor VarunVyas | 2010-06-25
  1. 3

    Mise à jour: dnozay réponse explique le problème et doivent être acceptés réponse.

    Essayer le gzip module, le code ci-dessous est directement à partir de la python docs. 

    import gzip
f = gzip.open('/home/joe/file.txt.gz', 'rb')
file_content = f.read()
f.close()
    • Même message d'erreur présenté : Traceback (most recent call last): File "<stdin>", line 1, in <module> File "/usr/lib/python2.6/gzip.py", ligne 212, à lire soi-même._en(readsize) File "/usr/lib/python2.6/gzip.py", la ligne 271, à savoir décompresser = auto.décompresser.décompresser(buf) zlib.erreur: -3 Erreur lors de la décompression: code non valide longueurs de jeu
    • désolé, je ne peux pas reproduire l'erreur. Il doit avoir quelque chose à faire avec vos données d'entrée. A votre fichier d'entrée généré à l'aide de gzip? Ne gunzip à partir de la ligne de commande décompresser correctement?
    InformationsquelleAutor Dave Bacher
  2. 96

    Vous avez ce message d'erreur:

    zlib.error: Error -3 while decompressing: incorrect header check

    Ce qui est plus probable parce que vous êtes en essayant de vérifier les en-têtes qui ne sont pas là, par exemple, vos données suit RFC 1951 (deflate format compressé) plutôt que de RFC 1950 (zlib format compressé) ou RFC 1952 (gzip format compressé).

    choix windowBits

    Mais zlib pouvez décompresser tous ces formats:

    • à (dé-)compresser deflate format, l'utilisation de wbits = -zlib.MAX_WBITS
    • à (dé-)compresser zlib format, l'utilisation de wbits = zlib.MAX_WBITS
    • à (dé-)compresser gzip format, l'utilisation de wbits = zlib.MAX_WBITS | 16

    Voir la documentation en http://www.zlib.net/manual.html#Advanced (section inflateInit2)

    exemples

    données de test:

    >>> deflate_compress = zlib.compressobj(9, zlib.DEFLATED, -zlib.MAX_WBITS)
>>> zlib_compress = zlib.compressobj(9, zlib.DEFLATED, zlib.MAX_WBITS)
>>> gzip_compress = zlib.compressobj(9, zlib.DEFLATED, zlib.MAX_WBITS | 16)
>>> 
>>> text = '''test'''
>>> deflate_data = deflate_compress.compress(text) + deflate_compress.flush()
>>> zlib_data = zlib_compress.compress(text) + zlib_compress.flush()
>>> gzip_data = gzip_compress.compress(text) + gzip_compress.flush()
>>>

    évident de test pour zlib:

    >>> zlib.decompress(zlib_data)
'test'

    test pour deflate:

    >>> zlib.decompress(deflate_data)
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
zlib.error: Error -3 while decompressing data: incorrect header check
>>> zlib.decompress(deflate_data, -zlib.MAX_WBITS)
'test'

    test pour gzip:

    >>> zlib.decompress(gzip_data)
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
zlib.error: Error -3 while decompressing data: incorrect header check
>>> zlib.decompress(gzip_data, zlib.MAX_WBITS|16)
'test'

    les données est également compatible avec gzip module:

    >>> import gzip
>>> import StringIO
>>> fio = StringIO.StringIO(gzip_data)  # io.BytesIO for Python 3
>>> f = gzip.GzipFile(fileobj=fio)
>>> f.read()
'test'
>>> f.close()

    automatique de la tête de détection (zlib ou gzip)

    ajoutant 32 à windowBits va déclencher tête de détection

    >>> zlib.decompress(gzip_data, zlib.MAX_WBITS|32)
'test'
>>> zlib.decompress(zlib_data, zlib.MAX_WBITS|32)
'test'

    à l'aide de gzip au lieu de

    ou vous pouvez ignorer zlib et l'utilisation gzip module directement; mais rappelez-vous que sous le capot, gzip utilise zlib.

    fh = gzip.open('abc.gz', 'rb')
cdata = fh.read()
fh.close()
    • ce: zlib.decompress(gzip_data, zlib.MAX_WBITS|32)
    • J'ai essayé à l'aide de la zlib.decompress(zlib_data, zlib.MAX_WBITS|32) tweak qui vous l'avez mentionné, mais il n'a pas fonctionné. J'ai toujours l' incorrect header check erreur. Si j'ai essayer d'utiliser les autres options mentionnées ci-dessus, je reçois encore des erreurs. Est-il rien d'autre qui pourrait provoquer cette erreur?
    • bien sûr, tout type de données qui n'est ni valide dégonfler, zlib ou gzip contenu échouera à la case d'en-tête.
    • zlib.MAX_WBITS | 16 a fonctionné pour moi, merci. Il est incroyablement non-trivial d'en déduire ce à partir de la documentation. Aussi, il est ennuyeux que aiohttp ne pas décoder Content-Encoding: gzip de manière transparente.
    InformationsquelleAutor dnozay
  3. 3

    Je viens de résoudre le "incorrect d'en-tête cochez la case" problème lors de la décompression de format de données.

    Vous avez besoin de régler WindowBits => WANT_GZIP à votre appel à l'inflateInit2 (2 version)

    Oui, cela peut être très frustrant. A généralement peu profondes de la lecture de la documentation présente Zlib, comme une API pour la compression Gzip, mais par défaut (ne pas utiliser le gz* méthodes), il n'est pas de créer ou décompresser le format Gzip. Vous devez envoyer cette non-très-bien en évidence documentée drapeau.

    InformationsquelleAutor user2475290
  4. 1

    Mon cas était pour décompresser les messages électroniques sont stockés dans le Corne de brume de la base de données. L'extrait de code est le suivant:

    import pyodbc
import zlib

cn = pyodbc.connect('connection string')
cursor = cn.cursor()
cursor.execute('SELECT TOP(1) userMessageID, commentsCompressed FROM BULLHORN1.BH_UserMessage WHERE DATALENGTH(commentsCompressed) > 0 ')



 for msg in cursor.fetchall():
    #magic in the second parameter, use negative value for deflate format
    decompressedMessageBody = zlib.decompress(bytes(msg.commentsCompressed), -zlib.MAX_WBITS)
    InformationsquelleAutor Yury
  5. 0

    Curieusement, j'ai eu cette erreur en essayant de travailler avec le Débordement de la Pile de l'API à l'aide de Python.

    J'ai réussi à le faire fonctionner avec la GzipFile objet de l'gzip répertoire, à peu près comme ceci:

    import gzip

gzip_file = gzip.GzipFile(fileobj=open('abc.gz', 'rb'))

file_contents = gzip_file.read()
    InformationsquelleAutor Paul D. Waite
  6. 0

    Pour décompresser incomplète format d'octets dans la mémoire, le réponse par dnozay est utile, mais il manque le zlib.decompressobj appel que j'ai trouvé pour être nécessaire:

    incomplete_decompressed_content = zlib.decompressobj(wbits=zlib.MAX_WBITS | 16).decompress(incomplete_gzipped_content)

    Noter que zlib.MAX_WBITS | 16 est 15 | 16 qui est de 31. Pour des renseignements sur les wbits, voir zlib.décompresser.

    De crédit: réponse de Yann Vernier qui note le le zlib.decompressobj appel.

    InformationsquelleAutor Acumenus
  7. -2

    Juste ajouter des en-têtes 'Accept-Encoding': 'l'identité

    import requests

requests.get('http://gett.bike/', headers={'Accept-Encoding': 'identity'})

    https://github.com/requests/requests/issues/3849

    • Si votre réponse à une de décompression question est: ne pas compresser les il pour commencer??
    • Les serveurs ne sont pas toujours respecter l'a déclaré en-tête, donc ce n'est pas fiable.
    InformationsquelleAutor Barny