trend di twitter api UnicodeDecodeError: il codec 'utf8' non può decodificare il byte 0x8b in posizione 1: byte di codice inaspettato

Question

Sto cercando di seguire il codice di esempio del libro "Mining the social web", 1-3.

So che la sua vecchia, quindi seguo il nuovo campione dalla pagina web enter link description here

Ma, a volte, io soffrirò Info errore quando a implementare il codice:

[ trend.decode('utf-8') for trend in world_trends()[0]['trends'] ] 

e le informazioni di errore è come questo:

Traceback (most recent call last): 
File "<stdin>", line 1, in <module> 
File "build/bdist.macosx-10.6-universal/egg/twitter/api.py", line 167, in __call__ 
File "build/bdist.macosx-10.6-universal/egg/twitter/api.py", line 173, in _handle_response 
File "/System/Library/Frameworks/Python.framework/Versions/2.6/lib/python2.6/encodings/utf_8.py", line 16, in decode 
return codecs.utf_8_decode(input, errors, True) 
UnicodeDecodeError: 'utf8' codec can't decode byte 0x8b in position 1: unexpected code byte 

Esso non sempre succedere, ma credo che nessun programmatore piace un caso come "random".

Quindi qualcuno mi può aiutare su questo problema? Qual è il problema e come posso risolvere questo?

Great thanks ~

Answer 1

Per decodificare default() genera un errore se incontra un byte che non sa come decodificare.

È possibile utilizzare trend.decode('utf-8', 'replace') o trend.decode('utf-8', 'ignore') per non generare un errore e ignorarlo silenziosamente.

Documentation on decode() here.

Answer 2

byte 0x8b in position 1 solito segnala che il flusso di dati viene compresso con gzip. Per problemi simili, vedere here e here.

per decomprimere il flusso di dati:

buf = StringIO.StringIO(<response object>.content) 
gzip_f = gzip.GzipFile(fileobj=buf) 
content = gzip_f.read()