Creazione di un array tipizzato da una matrice di byte memorizzato come nodo Buffer

Question

Dal nodo docs sulla creazione di array tipizzati da buffer: memoria

del tampone viene interpretato come una matrice, non una matrice di byte. Che è , new Uint32Array(new Buffer([1,2,3,4])) crea un elemento 4 Uint32Array con elementi [1,2,3,4], non un Uint32Array con un unico elemento [0x1020304] o [0x4030201].

Ciò contrasta a JavaScript pianura, dove si crea una vista matrice tipizzata da un'ArrayBuffer utilizza la memoria del ArrayBuffer come byte (come un reinterpret_cast in C++). Ho bisogno di questo comportamento nel nodo quando si opera su Buffer di nodo.

Potrei convertire il buffer in un ArrayBuffer, ma questo è troppo lento per la mia applicazione. (Ho provato molti metodi - ma sono tutti O (n).) (Modifica: il metodo più veloce che ho trovato è this, che è un singolo memmove op e abbastanza veloce, ma ha ancora almeno un momentaneo 2x consumo di memoria fino al rilascio del riferimento al buffer originale.

C'è un modo (veloce/O (1) per ottenere un array tipizzato da un buffer, utilizzando il contenuto del buffer come byte anziché elementi? (La dimensione dell'elemento dell'array tipizzato richiesto è> 1 byte, manco a dirlo.)

Answer 1

Per quanto ne so, non è possibile farlo senza fare una copia dei dati in memoria. Anche l'esempio new Uint32Array(new Buffer([1,2,3,4])) esegue internamente questo (ovvero non è O (1)).

Nota che digitato le matrici sono solo vista di un ArrayBuffer (non Buffer, questo non è possibile). new Uint32Array(array) crea un ArrayBuffer di 4 * array.length byte. Puoi accedervi con uint32Array.buffer. Il costruttore considera il tuo Buffer diverso da un normale Array.

La soluzione migliore che conosco è the one you already found.

Un altro problema con l'utilizzo di Uint32Array per quello che si tenta di fare è che è depends on platform byte order. È possibile eseguire iterazioni su Buffer come this o utilizzare DataView se si desidera essere sicuri.

Answer 2

A partire dal nodo 4.0, buffer sono Uint8Arrays e nuovi punti di vista può essere costruito su di loro direttamente:

var b = new Buffer([1,2,3,4]); 
new Uint32Array(b.buffer, b.byteOffset); 

Questo mini-esempio presuppone che b è maggiore di ~ 4096 (la soglia per un buffer possedere una propria pezzo di memoria contro la condivisione di un pezzo più grande). Vedere Convert a binary NodeJS Buffer to JavaScript ArrayBuffer per maggiori informazioni - in genere è necessario chiamare b.slice() per operare solo sulla memoria che si possiede.