2013-03-14 17 views
16

Ho creato un pacchetto usando la codifica utf-8.Notebook IPython: qual è la codifica predefinita?

Quando si chiama una funzione, restituisce un DataFrame, con una colonna codificata in utf-8.

Quando si utilizza IPython sulla riga di comando, non ho alcun problema a mostrare il contenuto di questa tabella. Quando si utilizza il notebook, si blocca con l'errore 'utf8' codec can't decode byte 0xe7. Di seguito ho allegato un traceback completo.

Qual è la codifica corretta per funzionare con Notebook?

UnicodeDecodeError      Traceback (most recent call last) 
<ipython-input-13-92c0011919e7> in <module>() 
     3 ver = verif.VerificacaoNA() 
     4 comp, total = ver.executarCompRealFisica(DT_INI, DT_FIN) 
----> 5 comp 

c:\Python27-32\lib\site-packages\ipython-0.13.1-py2.7.egg\IPython\core\displayhook.pyc in __call__(self, result) 
    240    self.update_user_ns(result) 
    241    self.log_output(format_dict) 
--> 242    self.finish_displayhook() 
    243 
    244  def flush(self): 

c:\Python27-32\lib\site-packages\ipython-0.13.1-py2.7.egg\IPython\zmq\displayhook.pyc in finish_displayhook(self) 
    59   sys.stdout.flush() 
    60   sys.stderr.flush() 
---> 61   self.session.send(self.pub_socket, self.msg, ident=self.topic) 
    62   self.msg = None 
    63 

c:\Python27-32\lib\site-packages\ipython-0.13.1-py2.7.egg\IPython\zmq\session.pyc in send(self, stream, msg_or_type, content, parent, ident, buffers, subheader, track, header) 
    557 
    558   buffers = [] if buffers is None else buffers 
--> 559   to_send = self.serialize(msg, ident) 
    560   flag = 0 
    561   if buffers: 

c:\Python27-32\lib\site-packages\ipython-0.13.1-py2.7.egg\IPython\zmq\session.pyc in serialize(self, msg, ident) 
    461    content = self.none 
    462   elif isinstance(content, dict): 
--> 463    content = self.pack(content) 
    464   elif isinstance(content, bytes): 
    465    # content is already packed, as in a relayed message 

c:\Python27-32\lib\site-packages\ipython-0.13.1-py2.7.egg\IPython\zmq\session.pyc in <lambda>(obj) 
    76 
    77 # ISO8601-ify datetime objects 
---> 78 json_packer = lambda obj: jsonapi.dumps(obj, default=date_default) 
    79 json_unpacker = lambda s: extract_dates(jsonapi.loads(s)) 
    80 

c:\Python27-32\lib\site-packages\pyzmq-13.0.0-py2.7-win32.egg\zmq\utils\jsonapi.pyc in dumps(o, **kwargs) 
    70   kwargs['separators'] = (',', ':') 
    71 
---> 72  return _squash_unicode(jsonmod.dumps(o, **kwargs)) 
    73 
    74 def loads(s, **kwargs): 

c:\Python27-32\lib\json\__init__.pyc in dumps(obj, skipkeys, ensure_ascii, check_circular, allow_nan, cls, indent, separators, encoding, default, **kw) 
    236   check_circular=check_circular, allow_nan=allow_nan, indent=indent, 
    237   separators=separators, encoding=encoding, default=default, 
--> 238   **kw).encode(obj) 
    239 
    240 

c:\Python27-32\lib\json\encoder.pyc in encode(self, o) 
    199   # exceptions aren't as detailed. The list call should be roughly 
    200   # equivalent to the PySequence_Fast that ''.join() would do. 
--> 201   chunks = self.iterencode(o, _one_shot=True) 
    202   if not isinstance(chunks, (list, tuple)): 
    203    chunks = list(chunks) 

c:\Python27-32\lib\json\encoder.pyc in iterencode(self, o, _one_shot) 
    262     self.key_separator, self.item_separator, self.sort_keys, 
    263     self.skipkeys, _one_shot) 
--> 264   return _iterencode(o, 0) 
    265 
    266 def _make_iterencode(markers, _default, _encoder, _indent, _floatstr, 

UnicodeDecodeError: 'utf8' codec can't decode byte 0xe7 in position 199: invalid continuation byte 
+0

Ho avuto questo problema quando avevo incorporato virgolette intelligenti come valori in un nome di indice o di colonna. Non so quale codifica usare per aggirare il problema, ma quando ho rimosso le virgolette intelligenti, il problema è andato via. – bdiamante

+0

Ho impostato la colonna su Latin-1 e l'errore è andato via ma la stringa mostra i caratteri sconosciuti –

+0

Puoi pubblicare un esempio di codice minimale che mostri il problema? –

risposta

11

Ho avuto lo stesso problema da poco, e in effetti l'impostazione della codifica predefinita a UTF-8 ha fatto il trucco:

import sys 
reload(sys) 
sys.setdefaultencoding("utf-8") 

Esecuzione sys.getdefaultencoding() ceduta 'ascii' sul mio ambiente (Python 2.7.3), in modo da Immagino sia il default.

Vedere anche this related question e Ian Bicking's blog post on the subject.

+1

Non è una buona idea usare setdefaultencoding, si veda ad esempio [qui] (http://stackoverflow.com/a/3580165/1661267), ad esempio, disabilita il comando 'print'. – mountrix

Problemi correlati