Perdita di memoria in Express.js con EventSource

Question

penso che sono in esecuzione in una perdita di memoria con una app espresso quando si collega un numero x di EventSource client ad esso. Dopo aver collegato i client e inviato loro x messaggi e disconnettendoli, l'app Express Express rilascia solo una piccola parte dell'heap/RSS allocato.

Per confermare questo ho salvato un Heapdump all'avvio del server e uno dopo aver collegato 7000 client ad esso e l'invio di messaggi x a ciascun client. Ho aspettato un po 'di tempo per dare al GC la possibilità di ripulire prima di prendere l'istantanea dell'heap.

Per confrontare queste istantanee di heap, le ho caricate nella vista Profilo Strumenti di sviluppo Chrome e ho scelto la modalità "Confronto".

Le mie domande sono:

1) Come interpretare questi numeri? (per riferimento vedere il mucchio allegata un'istantanea screenshot.)

2) Per esempio Sembra che il Socket oggetti non quasi senza alcun oggetto a tutti, è corretto?

3) Potete darmi altri suggerimenti per indagare il problema?

Answer 1

si può essere liberi da perdita di memoria e come bonus evitare il garbage collector. Tutto quello che devi fare è il polling degli oggetti.

Si potrebbe fare qualcosa di simile

var clientsPool = new Array(1000); 
var clientsConnected = []; 

Quando un nuovo client si connette, si fa

var newClient = clientsPool.pop(); 
//set your props here 
clientsConnected.push(newClient); 

Questo è un modo fantastico per evitare il Garbage Collector e prevenire perdita di memoria. Certo, c'è un po 'di lavoro in più e dovrai gestirlo con attenzione, ma vale assolutamente la pena per le prestazioni.

C'è un discorso impressionante a questo proposito, qui si va https://www.youtube.com/watch?v=RWmzxyMf2cE

Answer 2

Per quanto riguarda il mio commento ...

Javascript non può chiarire una sezione di memoria dovrebbe essere nulla che indica esso circa 2 anni fa qualcuno ha trovato un exploit ed è stato subito chiuso così e funziona così

var someData = ["THIS IS SOME DATA SAY IT WAS THE SIZE OF A SMALL APPLICATION"]; 
var somePointer = someData[0]; 
delete someData; 

hanno poi iniettato un'applicazione in somePointer come è stato un riferimento a una posizione di memoria quando non vi erano dati ora. hey presto ti ha iniettato memoria.

Quindi, se v'è un riferimento come sopra somePointer = someData[0]; non puoi liberare la memoria fino a quando non delete someData quindi è necessario rimuovere tutti i riferimenti a tutto quello che vuoi pulizia nel vostro caso ALL_CLIENTS.push(this); sulla linea 64 è fare memoria di sistema accessibile attraverso ALL_CLIENTS, così che cosa si può fare è

linea 157

_.each(ALL_CLIENTS, function(client, i) { 
        var u; // holds a undefined value (null, empty, nothing) 
        client.close(); 
        //delete ALL_CLIENTS[i]; 
        ALL_CLIENTS[i] = u; 
        ALL_CLIENTS.unused++; 
       }); 

In un'altra nota questa non è una perdita di memoria una perdita di memoria è dire aveste questo server si chiude, se la memoria non liberare dopo che si è usciti esso allora hai una perdita di memoria, se lo fa pulire la memoria dietro di sé non è una perdita è solo una cattiva gestione della memoria

Grazie a @Magus per aver sottolineato che l'eliminazione non è la cosa migliore che si possa usare, tuttavia non consiglierei mai di implementare una struttura limitante, ma si potrebbe provare

linea 27: ALL_CLIENTS.unused = 0;

linea 64:

var u; 
if(ALL_CLIENTS.unused > 0){ 
    for(var i = 0; i < ALL_CLIENTS.length; i++){ 
     if(ALL_CLIENTS[i] == u){ 
      ALL_CLIENTS[i] = this; 
      ALL_CLIENTS.unused--; 
      i = ALL_CLIENTS.length; 
     } 
    } 
}else{ 
    ALL_CLIENTS.push(this); 
}