代码之家 › 专栏 › 技术社区 › Jonathan Allen Grant

当某些值包含分隔符作为值的一部分时,如何将“key=value,key=value,…”转换为csv?

data-cleaning csv python

Jonathan Allen Grant · 技术社区 · 7 年前

我有一个格式的数据集 key1=value1, key2=value2, key3=value3... 其中每个键值对由一个 ", " .

但是,有些值是长字符串,包含 ", " 作为价值的一部分。

如何正确地浏览这些数据并将其转换为csv?

我试过使用 csv.reader ,但它不起作用。

 data = row.lstrip('(').rstrip(')\n')                               
 reader = csv.reader(StringIO(data))                                
 for row2 in reader:                                                
     my_dict = {}                                                   
     for d in row2:                                                 
         my_dict[d.split('=')[0].lstrip()] = d.split('=', 1)[1]

1 回复 | 直到 7 年前

Ajax1234 7 年前

你可以用 re.findall 具有 itertools.groupby :

import re, itertools as it
def get_vals(d):
   r = [(a, list(b)) for a, b in it.groupby(re.findall('\w+\=|[^\s,]+', d), key=lambda x:x[-1] == '=')]
   return {r[i][-1][0][:-1]:', '.join(r[i+1][-1]) for i in range(0, len(r), 2)}

tests = ['key1=value1, key2=value2, key3=value3', 'key1=va, lue1, key2=valu, e2, test, key3=value3']
print(list(map(get_vals, tests)))

输出:

[{'key1': 'value1', 'key2': 'value2', 'key3': 'value3'}, 
{'key1': 'va, lue1', 'key2': 'valu, e2, test', 'key3': 'value3'}]

James Brown 7 年前

使用@Ajax1234的样本, re.split() 展望未来:

import re
str="key1=value1, key2=value2, key3=value3, key1=va, lue1, key2=valu, e2, test, key3=value3"
re.split(", (?=[^ ]+=)",str)
['key1=value1', 'key2=value2', 'key3=value3', 'key1=va, lue1', 'key2=valu, e2, test', 'key3=value3']

推荐文章

SD_ · 使用CLI将由文件分隔符控制字符(FS/ASCII28/UTF-8 0x1C)分隔的csv文件读取到duckdb中

1 年前

ViSa · 如何在python中分隔存储在变量中的文本以创建数据帧?

2 年前

S K · 需要在Powershell中使用2个变量为CSV文件创建foreach循环

2 年前

Kavya shree · 将TSV文件数据转换为可推送到数据库的数据帧

2 年前

Joan Lopez · 从csv中提取的数据获得平均值

2 年前

Chinmaya Tewari · 创建新csv文件时权限被拒绝

2 年前

Parker Clark · 通过Bash操作csv中的特定列?

2 年前

Rasec Malkic · 如何根据第1列和第3列中的条件删除重复项?

2 年前

James Black · 如何基于列删除CSV文件中重复的行

2 年前

James Black · 将json文件转换为具有更多列的csv文件-Python

2 年前