代码之家 › 专栏 › 技术社区 › Patrick Burwell

Powershell阵列:如何进行重复数据消除输出

duplicates powershell arrays

Patrick Burwell · 技术社区 · 7 年前

当我在contacts.xml上运行这个解析器脚本时(它显示每个用户一行),我得到了相同数据的多个实例。我只想为相同的数据创建一个条目。如何在数据写入CSV之前消除重复数据?

#https://stackoverflow.com/questions/29999682/powershell-parsing-a-text-file
$input = Get-Content $env:USERPROFILE\Downloads\contacts.xml\Downloads\contacts.xml
$array = @()
$input | % {
    $writeobj = $false
    $obj = New-Object System.Object
    if ($_ -match 'email*') {
        $Email = ($_ -split ':')[1]
    }
    if ($_ -match 'FN*') {
        $NAME = ($_ -split ':')[1]
        $writeobj = $true
    }
    if ($writeobj) {
        $obj | Add-Member -Type NoteProperty -Name Email -Value $Email
        $obj | Add-Member -Type NoteProperty -Name Name -Value $NAME
        $array += $obj
    }
    Write-Host $Name, $email
}
$array | Export-Csv -Path C:\scripts\reports\test.csv -NoTypeInformation

我希望这会产生单个条目,但我会得到重复的条目(而且它们也排列不正确)。 (是的,我检查了XML文件中的单个条目)

2 回复 | 直到 7 年前

Ansgar Wiechers 7 年前

Select 唯一的对象。

$array |
    Select-Object -Property * -Unique |
    Export-Csv -Path 'C:\scripts\reports\test.csv' -NoType

作为补充说明,您可能希望避免在循环中附加到数组,因为这样做的性能肯定很差。管好你的 ForEach-Object Export-Csv

mklement0 7 年前

我想出来了。 $writeobj=$true “跟FN比赛,看,别再被骗了。是不是很奇怪?

#https://stackoverflow.com/questions/29999682/powershell-parsing-a-text-file
$input = Get-Content $env:USERPROFILE\Downloads\contacts.xml $array =
@() $input | % {
    $writeobj = $false
    $obj = New-Object System.Object
    If ($_ -match 'email') {
        $Email = ($_ -split ':')[1]
        $writeobj = $true
    }
    If ($_ -match 'FN') {
        $NAME = ($_ -split ':')[1]
        $writeobj = $true # <-- right here
    }
    If ($writeobj){
        $obj | Add-Member -type NoteProperty -name Email -value **$NAME**
        $obj | Add-Member -type NoteProperty -name Name -value **$Email**
        $array += $obj
    }
    Write-Host $Name, $email } $array | Export-Csv -path C:\scripts\reports\test.csv -NoTypeInformation

推荐文章

Miaka3 · MS EXCEL-用唯一标识符识别和附加范围/列表中的重复值

1 年前

Bapholin · 插入时检查可能的重复数据

2 年前

ghost_of_the_code · 用空字符串替换平面数组的重复值

2 年前

Della · Polars在对列进行重复数据消除后是否保证能维持秩序?

2 年前

peterW · 如何在跳过另一个字段中重复的行的同时执行pandas cumsum?

2 年前

Tariq335 · 在SAS中将数据从一行复制到具有相同键值的其他行

2 年前

apple · 跨行重新排序值,并将重复项转换为R中的NA

2 年前

Tatchy · 如何删除两列中的重复项,适用于每个单元格中都有唯一值的情况

2 年前

James Black · 如何基于列删除CSV文件中重复的行

2 年前

James Black · append()函数在试图删除json文件中的重复项时不起作用-Python

2 年前