C++ tokenize una stringa utilizzando un'espressione regolare

Question

Sto cercando di imparare un po 'di C++ da zero al momento.
Sono molto esperto in python, perl, javascript, ma ho solo incontrato C++ brevemente, in un'impostazione di classe in passato. Per favore scusami l'ingenuità della mia domanda.

Vorrei dividere una stringa utilizzando un'espressione regolare ma non ho avuto molta fortuna nel trovare un chiaro, definitivo, efficiente e completo esempio di come farlo in C++.

in Perl questo è l'azione è comune e, quindi, può essere realizzato in modo banale,

/home/me$ cat test.txt 
this is aXstringYwith, some problems 
and anotherXY line with similar issues 

/home/me$ cat test.txt | perl -e' 
> while(<>){ 
> my @toks = split(/[\sXY,]+/); 
> print join(" ",@toks)."\n"; 
> }' 
this is a string with some problems 
and another line with similar issues 

Mi piacerebbe sapere il modo migliore per realizzare l'equivalente in C++.

MODIFICA:
Penso di aver trovato quello che stavo cercando nella libreria boost, come indicato di seguito.

boost regex-token-iterator (perché sottolineatura non funzionano?)

Credo che non sapevo cosa cercare.

#include <iostream> 
#include <boost/regex.hpp> 

using namespace std; 

int main(int argc) 
{ 
    string s; 
    do{ 
    if(argc == 1) 
     { 
     cout << "Enter text to split (or \"quit\" to exit): "; 
     getline(cin, s); 
     if(s == "quit") break; 
     } 
    else 
     s = "This is a string of tokens"; 

    boost::regex re("\\s+"); 
    boost::sregex_token_iterator i(s.begin(), s.end(), re, -1); 
    boost::sregex_token_iterator j; 

    unsigned count = 0; 
    while(i != j) 
     { 
     cout << *i++ << endl; 
     count++; 
     } 
    cout << "There were " << count << " tokens found." << endl; 

    }while(argc == 1); 
    return 0; 
} 

Answer 1

Le librerie Boost sono di solito una buona scelta, in questo caso Boost.Regex. C'è anche an example per dividere una stringa in token che già fa ciò che vuoi. In sostanza si tratta di qualcosa di simile:

boost::regex re("[\\sXY]+"); 
std::string s; 

while (std::getline(std::cin, s)) { 
    boost::sregex_token_iterator i(s.begin(), s.end(), re, -1); 
    boost::sregex_token_iterator j; 
    while (i != j) { 
    std::cout << *i++ << " "; 
    } 
    std::cout << std::endl; 
} 

Answer 2

A differenza di Perl, le espressioni regolari non sono "incorporate" in C++.

È necessario utilizzare una libreria esterna, ad esempio PCRE.

Answer 3

Check out Boost.Regex. Penso che si possa trovare la risposta qui:

C++: what regex library should I use?

Answer 4

Se si vuole ridurre al minimo l'uso di iteratori, e pithify il codice, il seguente dovrebbe funzionare:

#include <string> 
#include <iostream> 
#include <boost/regex.hpp> 

int main() 
{ 
    const boost::regex re("[\\sXY,]+"); 

    for (std::string s; std::getline(std::cin, s);) 
    { 
    std::cout << regex_replace(s, re, " ") << std::endl; 
    } 

} 

Answer 5

Regex fanno parte di TR1 inclusi in Visual C++ 2008 SP1 (inclusa Express Edition) e G ++ 4.3.

L'intestazione è <regex> e lo spazio dei nomi std :: tr1. Funziona alla grande con STL.

Getting started with C++ TR1 regular expressions

Visual C++ Standard Library : TR1 Regular Expressions