python 2.7 string.join() con unicode

Question

Ho un mucchio di stringhe di byte (str, non unicode, in python 2.7) contenenti dati unicode (nella codifica utf-8).

Sto cercando di unirsi a loro (da "".join(utf8_strings) o u"".join(utf8_strings)) che getta

UnicodeDecodeError: 'ascii' codec can't decode byte 0xec in position 0: ordinal not in range(128)` 

C'è un modo di fare uso di .join() metodo per le stringhe non-ASCII? sicuro di poterli concatenare in un ciclo for, ma non sarebbe economicamente conveniente.

Answer 1

Unire stringhe di byte utilizzando ''.join() funziona correttamente; l'errore che vedete sarebbe solo appare se si mescolato unicode e str oggetti:

>>> utf8 = [u'\u0123'.encode('utf8'), u'\u0234'.encode('utf8')] 
>>> ''.join(utf8) 
'\xc4\xa3\xc8\xb4' 
>>> u''.join(utf8) 
Traceback (most recent call last): 
    File "<stdin>", line 1, in <module> 
UnicodeDecodeError: 'ascii' codec can't decode byte 0xc4 in position 0: ordinal not in range(128) 
>>> ''.join(utf8 + [u'unicode object']) 
Traceback (most recent call last): 
    File "<stdin>", line 1, in <module> 
UnicodeDecodeError: 'ascii' codec can't decode byte 0xc4 in position 0: ordinal not in range(128) 

Le eccezioni sono elevati quando si utilizza il valore Unicode u'' come il falegname, e l'aggiunta di una stringa Unicode per la lista di stringhe di unisciti, rispettivamente.

Answer 2

"".join(...) funzionerà se ogni parametro è un str (qualunque sia la codifica).

Il problema che si sta verificando probabilmente non è correlato al join, ma ai dati forniti dall'utente. Pubblica più codice in modo che possiamo vedere cosa c'è di veramente sbagliato.