La fusion de plusieurs fichiers CSV en un seul à l'aide de PowerShell

Cela va ajouter tous les fichiers ensemble les lire une à une:

get-childItem "YOUR_DIRECTORY\*.txt" 
| foreach {[System.IO.File]::AppendAllText
 ("YOUR_DESTINATION_FILE", [System.IO.File]::ReadAllText($_.FullName))}

# Placed on seperate lines for readability

Celui-ci aura lieu une nouvelle ligne à la fin de chaque entrée du fichier si vous en avez besoin:

get-childItem "YOUR_DIRECTORY\*.txt" | foreach
{[System.IO.File]::AppendAllText("YOUR_DESTINATION_FILE", 
[System.IO.File]::ReadAllText($_.FullName) + [System.Environment]::NewLine)}

Sauter la première ligne:

$getFirstLine = $true

get-childItem "YOUR_DIRECTORY\*.txt" | foreach {
    $filePath = $_

    $lines =  $lines = Get-Content $filePath  
    $linesToWrite = switch($getFirstLine) {
           $true  {$lines}
           $false {$lines | Select -Skip 1}

    }

    $getFirstLine = $false
    Add-Content "YOUR_DESTINATION_FILE" $linesToWrite
    }

OriginalL'auteur kemiller2002

Votre fichier de commandes est assez inefficace! Essayez celui-ci (vous allez être surpris 🙂

@echo off
ECHO Set working directory
cd /d %~dp0
Deleting existing combined file
del summary.txt
setlocal
for %%i in (*.csv) do set /P "header=" < "%%i" & goto continue
:continue

(
   echo %header%
   for %%i in (*.csv) do (
      for /f "usebackq skip=1 delims=" %%j in ("%%i") do echo %%j
   )
) > summary.txt

Comment ce est une amélioration

1. for /f ... in ('type "%%i"') nécessite de charger et d'exécuter cmd.exe pour l'exécution de la commande type, la capture de sa sortie dans un fichier temporaire, puis lire les données à partir d'elle, et cela se fait avec chaque fichier d'entrée. for /f ... in ("%%i") lire directement les données à partir du fichier.
2. La >> redirection ouvre le fichier, ajoute des données à la fin et ferme le fichier, et c'est fait avec chaque sortie **. Le > redirection conserve le fichier est ouvert tout le temps.

OriginalL'auteur Aacini

J'ai trouvé les solutions précédentes tout à fait inefficace pour les grandes csv fichiers en termes de performances, voici donc une performant alternative.

Voici une alternative qui ajoute simplement les fichiers:

cmd /c copy  ((gci "YOUR_DIRECTORY\*.csv" -Name) -join '+') "YOUR_OUTPUT_FILE.csv" 

Par la suite, vous voudrez probablement de se débarrasser des multiples csv en-têtes.

OriginalL'auteur davidhigh

Ici est une version aussi à l'aide de Système.IO.Fichier,

$result = "c:\temp\result.txt"
$csvs = get-childItem "c:\temp\*.csv" 
#read and write CSV header
[System.IO.File]::WriteAllLines($result,[System.IO.File]::ReadAllLines($csvs[0])[0])
#read and append file contents minus header
foreach ($csv in $csvs)  {
    $lines = [System.IO.File]::ReadAllLines($csv)
    [System.IO.File]::AppendAllText($result, ($lines[1..$lines.Length] | Out-String))
}

OriginalL'auteur Jan Chrbolka

$pathin = 'c:\Folder\With\CSVs'
$pathout = 'c:\exported.txt'
$list = Get-ChildItem -Path $pathin | select FullName
foreach($file in $list){
    Import-Csv -Path $file.FullName | Export-Csv -Path $pathout -Append -NoTypeInformation
}

OriginalL'auteur Dan Arseneau

de type *.csv >> dossier\combinés.csv

OriginalL'auteur Kent