Ricerca stringa in tutte le colonne e filtro di Pandas DataFrame

Question

Pensavo che sarebbe stato semplice ma aveva qualche problema nel rintracciare un modo elegante per cercare contemporaneamente tutte le colonne in un dataframe per una corrispondenza di stringa parziale. Fondamentalmente come potrei applicare df['col1'].str.contains('^') a un intero dataframe in una sola volta e filtrare verso il basso su tutte le righe che contengono record contenenti la corrispondenza?

Answer 1

Il metodo Series.str.contains prevede un modello regex (predefinito), non una stringa letterale. Pertanto str.contains("^") corrisponde all'inizio di qualsiasi stringa. Poiché ogni stringa ha un inizio, tutto corrisponde. Utilizzare invece str.contains("\^") per abbinare il letterale ^ carattere.

di controllare ogni colonna, è possibile utilizzare for col in df per scorrere i nomi delle colonne, e quindi chiamare str.contains su ogni colonna:

mask = np.column_stack([df[col].str.contains(r"\^", na=False) for col in df]) 
df.loc[mask.any(axis=1)] 

In alternativa, si potrebbe passare regex=False-str.contains per fare il test utilizzare il Python Operatore in; ma (in generale) l'uso della regex è più veloce.

Answer 2

Prova con:

df.apply(lambda row: row.astype(str).str.contains('TEST').any(), axis=1)