Suddivisione di file Excel/Csv di grandi dimensioni su più file su PHP o Javascript

Question

Ho un file excel (file.xls)/csv (file.csv) che contiene/conterrà centinaia di migliaia di voci, anche milioni immagino. È possibile dividere questo in più file? Come file.xls in file1.xls, file2.xls, file3.xls e così via.

Esistono librerie da utilizzare? È possibile su PHP? o che ne dici di javascript? Dove posso specificare quante righe includere in ogni file?

Grazie

Answer 1

Sì, è possibile farlo in PHP e con i file CSV. In pratica, esegui iterazioni sul file di grandi dimensioni e metti a pezzo ogni riga X, inoltrandole a un altro file.

a trovare le informazioni su come aprire il file CSV di grandi dimensioni come un iteratore in questa risposta qui:

• Answer to "how to extract data from csv file in php"

allora avete bisogno di pezzo l'iteratore ogni x righe parti. Ciò può essere fatto come contorno qui:

• Answer to "Need some advice with PHP loop"

Basta invece di emettere in multipla <ul>...</ul> elenchi HTML, si copiano sopra in un nuovo file. Che funziona praticamente come descritto in:

• Answer to "How can I split a CSV file in PHP?"

Tuttavia questa volta si desidera utilizzare il SplFileObject::fputcsv method. Fai attenzione a usare l'ultimo PHP stabile per questo, altrimenti devi fare qualcosa di diverso, vedi fputcsv().

Se la prima riga del file originale contiene colonna-headers, potrebbe essere così interessato al seguente:

• Answer to "Process CSV Into Array With Column Headings For Key"

mostra solo alcuni modi per estendere/processo del file in entrata. Potresti non aver bisogno dell'astrazione completa fatta lì, solo mantenere la prima linea potrebbe farlo già.

Answer 2

modo rapido e sporco di dividere un file CSV in diversi file CSV

$inputFile = 'input.csv'; 
$outputFile = 'output'; 

$splitSize = 10000; 

$in = fopen($inputFile, 'r'); 

$rowCount = 0; 
$fileCount = 1; 
while (!feof($in)) { 
    if (($rowCount % $splitSize) == 0) { 
     if ($rowCount > 0) { 
      fclose($out); 
     } 
     $out = fopen($outputFile . $fileCount++ . '.csv', 'w'); 
    } 
    $data = fgetcsv($in); 
    if ($data) 
     fputcsv($out, $data); 
    $rowCount++; 
} 

fclose($out);