10
Né lo sviluppatore né la documentazione API includono alcun riferimento su quali opzioni possono essere inoltrate in DataFrame.saveAsTable o DataFrameWriter.options e potrebbero influire sul salvataggio di una tabella Hive.Spark: quali opzioni possono essere passate con DataFrame.saveAsTable o DataFrameWriter.options?
La mia speranza è che nelle risposte a questa domanda possiamo aggregare le informazioni che sarebbero utili agli sviluppatori Spark che desiderano un maggiore controllo su come Spark salva le tabelle e, forse, fornire una base per migliorare la documentazione di Spark.
Questo è un po 'vago e indeterminato per SO, però. Che cosa sta cercando? Come salvare l'alveare? –
@JustinPihony Vedo come qualcuno potrebbe fraintendere il titolo. L'ho aggiornato per renderlo più esplicito. Grazie per il tuo commento. Per essere chiari, la domanda non riguarda il modo in cui salvare una tabella Hive. Riguarda le opzioni non documentate che possono essere passate quando si salva una tabella Hive. – Sim
Proverò a approfondire questo aspetto più avanti, ma da una prospettiva Hive, sembra che le opzioni non vengano mai utilizzate (oltre al percorso). Jdbc ne utilizza un numero, anche se –