Java ORM per Hbase

Question

Chiunque conosce una buona implementazione Java ORM per HBase. Questo sembra davvero bello per Ruby

http://www.stanford.edu/~sqs/rhino/doc/

Ma non riusciva a trovare uno per Java.

Grazie.

Answer 1

C'è pigi e parhely e non ho usato nessuno di loro. IMO HBase è un motore veloce per la memorizzazione di chiavi/valori, ma se hai bisogno di un altro livello di astrazione, dovresti controllarli.

Answer 2

Il punto di forza di HBase, secondo me, è nel mantenere le colonne dinamiche in famiglie di colonne statiche. Dalla mia esperienza nello sviluppo di applicazioni con HBase, trovo che non è così semplice come SQL determinare i qualificatori e i valori delle celle.

Ad esempio, un libro come molti autori, a seconda dei modelli di accesso, delle modifiche dell'autore, dell'implementazione della cache a livello di app che potresti voler scegliere di salvare l'intero autore nella tabella del libro (cioè l'autore risiede nella tabella 2, autore tavolo e tabella del libro) o solo l'id dell'autore. Inoltre, la raccolta dell'autore può essere salvata in una cella come XML/JSON o singole celle per singoli autori.

Con questa intesa ho concluso che scrivere un ORM in piena regola, come Hibernate, non solo sarà molto difficile potrebbe non essere in realtà conclusivo. Quindi ho adottato un approccio diverso, molto più simile a quello di ibasia per ibernazione.

• mio mini-quadro: http://github.com/smart-it/smart-dao [smart-HBase]
• Usage: https://github.com/smart-it/smart-cms [modulo content-spi-impl ha gli usi]
• Usage: https://github.com/smart-it/jetty-session-hbase [modulo HBase-impl ha gli usi]

Lasciami provare a spiegare come funziona. Per questo userò i codici sorgente da here e here.

1. Il primo e più importante compito è quello di implementare un'interfaccia ObjectRowConverter, in questo caso SessionDataObjectConverter. La classe astratta racchiude le migliori pratiche di base come discusso e appreso dalla comunità HBase. L'estensione ti dà fondamentalmente il controllo del 100% su come convertire il tuo oggetto in una riga HBase e viceversa. Per questa unica restrizione dell'API è che gli oggetti dominio devono implementare l'interfaccia PersistentDTO che viene utilizzata internamente per creare Put, Delete, do byte [] all'oggetto id e viceversa.
2. L'attività successiva consiste nel collegare le dipendenze come fatto in HBaseImplModule. Per favore fatemi sapere se siete interessati che farò le iniezioni di dipendenza.

E questo è tutto. Come sono utilizzati sono disponibili here. Fondamentalmente utilizza CommonReadDao, CommonWriteDao per leggere e scrivere dati da e verso HBase. Il comune read dao implementa la conversione multithreaded di righe su oggetti su query, il multithreading get by ids, ottiene con id e ha i suoi Hibernate Criteria come API per interrogare a HBase tramite Scan (nessuna funzione di aggregazione disponibile). Common write dao implementa codice comune di scrittura con alcune funzioni aggiuntive, come blocco ottimistico/pessimistico, override/controllo di unione entità (non) -esistenza su salvataggio, aggiornamento, eliminazione, ecc.

Questo ORM è stato sviluppato per il nostro scopo interno e sono stato al mio collo e quindi non posso ancora fare qualche documentazione.Ma se sei interessato fammi sapere e io prendi tempo per la documentazione con priorità.

Answer 3

Come su DataNucleus: è possibile utilizzare JPA o JDO come API e HBase come il negozio di back-end: http://www.datanucleus.org/plugins/store.hbase.html

Answer 4

Stiamo usando HBase ORM - Surus https://github.com/mushkevych/surus/wiki

Probabilmente vale la pena menzionare

• lo stiamo usando pesantemente con la mappa Hadoop/riduci
• ha un modulo aggiuntivo che ti permette di pompare i dati HBase dallo stream JSON (nel nostro caso proviene dal codice Python)

Answer 5

Recentemente una nuova versione di kundera-2.0.4 che è ORM su Hbase. Essa fornisce un'ampia altre cose che sono molto utili, come indicizzazione, croce archivio dati persistenza ecc

suggerisco fare un tentativo https://github.com/impetus-opensource/Kundera

jar eseguibile è:

https://github.com/impetus-opensource/Kundera

Answer 6

Hibernate OGM è una soluzione eccellente per database non SQL. Provalo.

http://www.hibernate.org/subprojects/ogm.html

Answer 7

si può provare questo: http://code.google.com/p/hbase-ormlite/. Questo è un orm per HBase in Java.