使用Python将JSON文件分割成多个文件

本文档详细介绍了如何使用Python将一个包含多个JSON对象的JSON文件分割成多个独立的JSON文件。通过使用json库，我们可以轻松地读取JSON数据，并将其分割成单独的文件，每个文件包含原始JSON数组中的一个JSON对象。本文提供了完整的代码示例，并解释了关键步骤，帮助读者理解和应用该技术。

读取JSON数据

首先，我们需要使用Python的json库来读取JSON文件。json库提供了load()函数，可以将JSON文件加载到Python数据结构中（通常是一个列表或字典）。

import json

# 假设JSON文件名为 "data.json"
with open("data.json", "r") as f_in:
    data = json.load(f_in)

在这个例子中，我们打开名为data.json的文件，并使用json.load()函数将其内容加载到名为data的变量中。 假设data.json包含一个JSON数组，数组中的每个元素都是一个JSON对象。

分割JSON数据并写入多个文件

接下来，我们需要遍历data列表，并将每个JSON对象写入到单独的文件中。我们可以使用enumerate()函数来同时获取列表中元素的索引和值。

立即学习“Python免费学习笔记（深入）”；

import json

with open("data.json", "r") as f_in:
    data = json.load(f_in)

    for i, d in enumerate(data, 1):
        with open(f"data_out_{i}.json", "w") as f_out:
            json.dump(d, f_out, indent=4)

这段代码做了以下几件事：

Find JSON Path Online

Easily find JSON paths within JSON objects using our intuitive Json Path Finder

30

查看详情

1. enumerate(data, 1): enumerate()函数用于遍历data列表，并返回每个元素的索引和值。1作为enumerate的第二个参数，指定起始索引为1，这使得生成的文件名更直观（例如，data_out_1.json，data_out_2.json等）。
2. with open(f"data_out_{i}.json", "w") as f_out:: 对于列表中的每个元素，我们创建一个新的JSON文件。文件名使用f-string格式化，将索引i插入到文件名中。"w"模式表示以写入模式打开文件。
3. json.dump(d, f_out, indent=4): 使用json.dump()函数将当前的JSON对象d写入到文件中。indent=4参数表示使用4个空格进行缩进，使JSON文件更易于阅读。

例如，如果data列表的第二个元素是：

{
    "dia": 24,
    "mes": 1,
    "any": 2023,
    "mes_referencia": 12,
    "any_referencia": 2022,
    "calendari_nom": "CCC"
}

那么，data_out_2.json文件将包含以下内容：

{
    "dia": 24,
    "mes": 1,
    "any": 2023,
    "mes_referencia": 12,
    "any_referencia": 2022,
    "calendari_nom": "CCC"
}

处理JSON字符串

如果JSON数据不是直接来自文件，而是存储在一个字符串变量中，可以使用json.loads()函数将字符串解析为Python数据结构。

import json

json_output = """
[
{"any": 2023},
{
"dia": 24,
"mes": 1,
"any": 2023,
"mes_referencia": 12,
"any_referencia": 2022,
"calendari_nom": "CCC"
},
{
"dia": 4,
"mes": 12,
"any": 2023,
"mes_referencia": 10,
"any_referencia": 2023,
"calendari_nom": "FFF"
},
{
"dia": 4,
"mes": 1,
"any": 2023,
"mes_referencia": 0,
"any_referencia": 2022,
"calendari_nom": "GAS",
"periode_ref": "TT"
},
{
"dia": 3,
"mes": 10,
"any": 2023,
"mes_referencia": 0,
"any_referencia": 2023,
"calendari_nom": "GAS",
"periode_ref": "22"
}
]
"""

data = json.loads(json_output)

for i, d in enumerate(data, 1):
    with open(f"data_out_{i}.json", "w") as f_out:
        json.dump(d, f_out, indent=4)

这段代码与前面的示例类似，但它首先使用json.loads()函数将json_output字符串解析为Python列表。然后，它以相同的方式遍历列表，并将每个JSON对象写入到单独的文件中。

注意事项

• 文件路径: 确保你有写入目标文件夹的权限。如果需要，可以使用绝对路径来指定输出文件的位置。
• 异常处理: 在实际应用中，应该添加适当的异常处理机制，以处理文件读取或写入过程中可能出现的错误。
• 内存占用: 如果JSON文件非常大，一次性加载到内存可能会导致内存不足。在这种情况下，可以考虑使用流式处理或增量解析技术。
• 编码: 确保输入和输出文件的编码一致，通常推荐使用UTF-8编码。

总结

本文档介绍了如何使用Python的json库将一个包含多个JSON对象的JSON文件分割成多个独立的文件。 通过使用json.load()或json.loads()读取JSON数据，然后使用json.dump()将每个JSON对象写入到单独的文件中，可以轻松实现JSON文件的分割。 记住要处理异常情况，并根据实际情况调整代码以适应不同的JSON数据结构和文件大小。

以上就是使用Python将JSON文件分割成多个文件的详细内容，更多请关注php中文网其它相关文章！