Astuces Excel
  1. Astuces Excel
  3. Diviser Exporter de gros files CSV via Powershell
Intereting Posts
Obtenez des images à partir de plusieurs liens téléchargez et renommez-les (en utilisant Excel) VBA comment ouvrir un file Excel et indiquer sa date de création créez l'index de colonne lorsque la même cellule de ligne d'une autre colonne a la date d'aujourd'hui Comment calculer une moyenne, sauter des blancs Ajouter VALUES + INDEX à ActiveX ComboBox dans Excel avec VBA Compte Excel, match partiel VBA vers Oracle Variables multiples dans une colonne Comment créer une boîte VB qui a une valeur déroulante et un button de clic Décalage de sorting VBA non sortingé, bouclage imprévisible Pourquoi cette requête d'access prend-elle si longtime? Synchroniser les trancheuses Copier-Coller en fonction des valeurs de cellule en deux plages Requête pour exécuter des strings sur une list et extraire des données Autoriser uniquement le sous-exécution à exécuter après l'exécution d'un autre VBA vba end si sans bloc si

Diviser Exporter de gros files CSV via Powershell

Comme tout le monde le sait, Excel a obtenu des lignes maximales 1048574. Ma question est la suivante: lorsque la ligne maximale est atteinte, passez à un nouveau file CSV. J'ai essayé quelque chose, pas de chance, je ne peux pas le comprendre. 

$RootFolder = Get-Content "c:\DRIVERS\myfile.txt" foreach ($arrayOfPaths in $RootFolder){ $csv = $arrayofPaths -replace '^\\\\[^\\]+\\([^\\]+)\\([^\\]+).*', 'C:\output\Company_name_${1}_${2}.csv' Get-ChildItem $arrayOfPaths -Recurse | Where-Object {$_.mode -match "d"} | ForEach-Object { $path = $_.FullName Get-Acl $path | Select-Object -Expand Access | Select-Object @{n='Path';e={$path}}, IdentityReference, AccessControlType, FileSystemRights | Export-Csv $csv -Append -NoType } }

Dernière mise à jour : 

 $RootFolder = Get-Content "c:\DRIVERS\myfile.txt" foreach ($arrayOfPaths in $RootFolder){ $csv = $arrayofPaths -replace '^\\\\[^\\]+\\([^\\]+)\\([^\\]+).*', 'C:\output\Company_name_${1}_${2}.csv' $csvIndex = 1 $maxRows = 1000000 $rowsLeft = $maxRows Get-ChildItem $arrayOfPaths -Recurse | Where-Object {$_.mode -match "d"} | ForEach-Object { #$csv = $_.FullName -replace '^\\\\[^\\]+\\([^\\]+)\\([^\\]+).*', 'C:\output\Company_name_${1}_${2}.csv'# <- construct CSV path here $path = $_.FullName $thisCSV = Get-Acl $path | Select-Object -Expand Access | Select-Object @{n='Path';e={$path}}, IdentityReference, AccessControlType, FileSystemRights | ConvertTo-Csv if ($thisCSV.count -lt $rowsLeft) { $thisCSV | Export-Csv $csv -append -noType $rowsLeft -= $thisCSV.count } else { $thisCSV[0..($rowsLeft - 1)] | Export-Csv $csv -append -noType $csvIndex++ $csv = $csv -replace '\.csv$', "$csvIndex.csv" if ($thisCSV.count -gt $rowsLeft) { $thisCSV[$rowsLeft..($thisCSV.count - 1)] | Export-Csv $csv -append -noType } $rowsLeft = $maxRows - ($thisCSV.count - $rowsLeft) } } }

Do ConvertTo-Csv dans une variable temporaire, additionnez sa propriété .Count jusqu'à ce que le sharepoint partage soit atteint, puis divisez le tableau CSV sur un nouveau file avec un nouveau nom qui sera utilisé à partir de ce point.

Voici un exemple simplifié qui suppose qu'aucun CSV ne peut dépasser 1000000 lignes. 

 $csv = ............. $csvIndex = 1 $maxRows = 1000000 $rowsLeft = $maxRows ........... $thisCSV = Select-Object ........ | ConvertTo-Csv if ($thisCSV.count -lt $rowsLeft) { $thisCSV | Export-Csv $csv -append -noType $rowsLeft -= $thisCSV.count } else { $thisCSV[0..($rowsLeft - 1)] | Export-Csv $csv -append -noType $csvIndex++ $csv = $csv -replace '\.csv$', "$csvIndex.csv" if ($thisCSV.count -gt $rowsLeft) { $thisCSV[$rowsLeft..($thisCSV.count - 1)] | Export-Csv $csv -append -noType } $rowsLeft = $maxRows - ($thisCSV.count - $rowsLeft) }