2012-07-11 15 views
9

Esiste un pacchetto statistico python che supporta il calcolo della covarianza ponderata (vale a dire, ogni osservazione ha un peso)? Sfortunatamente numpy.cov non supporta i pesi.Pacchetto Python che supporta il calcolo della covarianza ponderata

Preferibilmente lavorando in framework numpy/scipy (cioè, in grado di utilizzare array numpy per accelerare il calcolo).

Grazie mille!

+0

http://www-pcmdi.llnl.gov/svn/repository/cdat/trunk/Packages/genutil/Lib/statistics.py - prova quello? –

+0

statsmodels ha quasi lo – user333700

risposta

6

statsmodels ha pesato il calcolo della covarianza in stats.

Ma possiamo ancora calcolare direttamente anche:

# -*- coding: utf-8 -*- 
"""descriptive statistic with case weights 

Author: Josef Perktold 
""" 

import numpy as np 
from statsmodels.stats.weightstats import DescrStatsW 


np.random.seed(987467) 
x = np.random.multivariate_normal([0, 1.], [[1., 0.5], [0.5, 1]], size=20) 
weights = np.random.randint(1, 4, size=20) 

xlong = np.repeat(x, weights, axis=0) 

ds = DescrStatsW(x, weights=weights) 

print 'cov statsmodels' 
print ds.cov 

self = ds #alias to use copied expression 
ds_cov = np.dot(self.weights * self.demeaned.T, self.demeaned)/self.sum_weights 

print '\nddof=0' 
print ds_cov 
print np.cov(xlong.T, bias=1) 

# calculating it directly 
ds_cov0 = np.dot(self.weights * self.demeaned.T, self.demeaned)/\ 
       (self.sum_weights - 1) 
print '\nddof=1' 
print ds_cov0 
print np.cov(xlong.T, bias=0) 

Questo stampa:

cov statsmodels 
[[ 0.43671986 0.06551506] 
[ 0.06551506 0.66281218]] 

ddof=0 
[[ 0.43671986 0.06551506] 
[ 0.06551506 0.66281218]] 
[[ 0.43671986 0.06551506] 
[ 0.06551506 0.66281218]] 

ddof=1 
[[ 0.44821249 0.06723914] 
[ 0.06723914 0.68025461]] 
[[ 0.44821249 0.06723914] 
[ 0.06723914 0.68025461]] 

nota editoriale

La risposta iniziale sottolineato un bug in statsmodels che è stato risolto nel frattempo.

+0

Sembra che il bug di statsmodels sia stato [riparato nel 2013] (https://github.com/statsmodels/statsmodels/issues/370#issuecomment-15357376). – drevicko

+0

@ Mayou36 Grazie per la modifica. Era già stato rifiutato quando l'ho visto. Ho aggiornato la mia risposta per riflettere la corretta versione di statsmodels – user333700

Problemi correlati