代码之家 › 专栏 › 技术社区 › M.Ali

将API响应转换为数据帧

urllib dataframe pandas python

M.Ali · 技术社区 · 4 年前

req = urllib.request.Request(url, body, headers)

try:
    response = urllib.request.urlopen(req)
    string = response.read().decode('utf-8')
    json_obj = json.loads(string)

返回以下内容:

{"forecast": [17.588294043898163, 17.412641963452206], 
    "index": [
            {"SaleDate": 1629417600000, "Type": "Type 1"}, 
            {"SaleDate": 1629504000000, "Type": "Type 2"}
        ]
}

Forecast                 SaleDate     Type
17.588294043898163       2021-08-16   Type 1
17.412641963452206       2021-08-17   Type 1

3 回复 | 直到 4 年前

mozway 4 年前

您可以使用以下命令。它使用 pandas.Series 将字典转换为列和 pandas.to_datetime

d = {"forecast": [17.588294043898163, 17.412641963452206], 
    "index": [
            {"SaleDate": 1629417600000, "Type": "Type 1"}, 
            {"SaleDate": 1629504000000, "Type": "Type 2"}
        ]
}

df = pd.DataFrame(d)
df = pd.concat([df['forecast'], df['index'].apply(pd.Series)], axis=1)
df['SaleDate'] = pd.to_datetime(df['SaleDate'], unit='ms')

输出:

    forecast   SaleDate    Type
0  17.588294 2021-08-20  Type 1
1  17.412642 2021-08-21  Type 2

sushanth 4 年前

list comprehension 将数据展平。

import pandas as pd

flatten = [
    {"forecast": j, **resp['index'][i]} for i, j in enumerate(resp['forecast'])
]

pd.DataFrame(flatten)

    forecast       SaleDate    Type
0  17.588294  1629417600000  Type 1
1  17.412642  1629504000000  Type 2

推荐文章

user8584384 · python urllib-在标题中发送#输入文本并提交

8 年前

blonc · python urllib。错误HTTPError(HTTP错误)

8 年前

Edgaras · Python-使用BeautifulSoup和Urllib进行抓取

8 年前

Nathan123 · 用于刮取结果的脚本似乎不起作用?

8 年前

Hojat Taheri · 在python 3中从页面提取链接

8 年前

Harry Moreno · 在Python中绘制通过url检索的图像网格

8 年前

Roman · urllib:html到csv错误

8 年前

Richard Smith · 从文本文件复制数据并将其插入URL

8 年前

gosatriani · 如何在python中将变量值传递给urllib

8 年前

Jorge Galán · 使用BeautifulSoup分析错误

8 年前