Come ottenere il prossimo token (int, float o stringa) da un file in Python?

Question

C'è un modo per ottenere il prossimo token da un file in Python, come ad esempio la classe Scanner fa in Java?

File file = new File("something"); 
Scanner myinput = new Scanner(file); 
double a = myinput.nextDouble(); 
String s = myinput.next(); 

vorrei ignorare gli spazi bianchi, tabulazioni, a capo e solo ottenere la prossima int/float/parola dal file. So che potrei leggere le righe e costruire qualcosa come Scanner me stesso, ma mi piacerebbe sapere se non c'è già qualcosa che potrei usare.

Ho cercato in giro ma ho potuto trovare solo metodi orientati alla linea.

Grazie!

Answer 1

Scopri i shlex modulo nella libreria standard: http://docs.python.org/library/shlex.html

import shlex 
import StringIO # use in place of files 

list(shlex.shlex(StringIO.StringIO('Some tokens. 123, 45.67 "A string with whitespace"'))) 

Non gestisce carri il modo in cui ti sembra di volere. Forse puoi estenderlo o modificarlo.

Answer 2

se il file è * i file di testo allo stesso modo .ini, è possibile utilizzare il modulo ConfigParser

C'è alcuni esempi là fuori.

http://docs.python.org/library/configparser.html

e pyparsing lo farà per altri scopi, credo. Non ho usato il pyparsing prima, quindi non ho idea in questo momento.

http://pyparsing.wikispaces.com/

Answer 3

probabilmente si può dare un'occhiata a PLY

Answer 4

Non penso che ci sia qualcosa di veramente sofisticato.

Ma si può dare un'occhiata a una delle seguenti opzioni

• use re.split(pattern, string) e ottenere ciò che si desidera, fornendo delle
• C'è da qualche parte una classe Scanner nel modulo re (ma io non credo che regex sviluppato ulteriormente)
• si potrebbe anche considerare l'utilizzo di tokenize + StringIO
• O come lei stesso ha citato: costruire uno voi stessi, donare è fare comunità e diventare famosi;)