hadoop-partitioning

6calore

1risposta

Comprendere un algoritmo di ridimensionamento della mappa per il calcolo della sovrapposizione

Desidero aiuto per la comprensione dell'algoritmo. Ho incollato prima la spiegazione dell'algoritmo e poi i miei dubbi. Algoritmo :(Per calcolare la sovrapposizione tra coppie di record) Dato un param

5calore

3risposta

Posso raggruppare per/bucket una tabella creata tramite "CREATE TABLE AS SELECT ....." in Hive?

Sto cercando di creare una tabella in Hive CREATE TABLE BUCKET_TABLE AS SELECT a.* FROM TABLE1 a LEFT JOIN TABLE2 b ON (a.key=b.key) WHERE b.key IS NUll CLUSTERED BY (key) INTO 1000 BUCKETS; Quest

11calore

5risposta

Come vengono suddivisi i dati in Hadoop

L'Hadoop suddivide i dati in base al numero di mapper impostati nel programma? Cioè, avendo un set di dati di dimensioni 500 MB, se il numero di mappatori è 200 (supponendo che il cluster Hadoop conse