Python多个JSON合并

在数据处理和分析中，我们经常需要合并多个JSON文件以进行进一步的处理。Python提供了很多方法来合并JSON文件，本文将介绍一些常用的方法和技巧。

1. 什么是JSON

JSON（JavaScript Object Notation）是一种轻量级的数据交换格式，易于阅读和编写。它由键值对组成，并用大括号包围。例如：

{
  "name": "John",
  "age": 30,
  "city": "New York"
}

在Python中，我们可以将JSON数据转换为字典格式进行处理。

2. 合并两个JSON文件

首先，我们将介绍如何合并两个JSON文件。假设我们有两个JSON文件，分别为file1.json和file2.json，内容如下：

# file1.json
{
  "name": "John",
  "age": 30,
  "city": "New York"
}

# file2.json
{
  "occupation": "Engineer",
  "salary": 5000
}

我们可以使用json模块的load函数将JSON文件加载为Python字典：

import json

with open("file1.json") as file1:
    data1 = json.load(file1)

with open("file2.json") as file2:
    data2 = json.load(file2)

然后，我们可以使用update方法将两个字典合并：

data1.update(data2)

最后，我们可以将合并后的字典保存为新的JSON文件：

with open("merged.json", "w") as outfile:
    json.dump(data1, outfile)

这样，我们就成功地将两个JSON文件合并为一个新的文件merged.json。

3. 合并多个JSON文件

现在，我们来介绍如何合并多个JSON文件。假设我们有三个JSON文件，分别为file1.json、file2.json和file3.json，内容如下：

# file1.json
{
  "name": "John",
  "age": 30,
  "city": "New York"
}

# file2.json
{
  "occupation": "Engineer",
  "salary": 5000
}

# file3.json
{
  "hobby": "Reading",
  "education": "Bachelor"
}

我们可以使用一个循环来依次合并每个JSON文件：

data = {}

files = ["file1.json", "file2.json", "file3.json"]

for file in files:
    with open(file) as f:
        temp_data = json.load(f)
        data.update(temp_data)

最后，我们可以将合并后的字典保存为新的JSON文件：

with open("merged.json", "w") as outfile:
    json.dump(data, outfile)

这样，我们就成功地将多个JSON文件合并为一个新的文件merged.json。

4. 使用Pandas合并JSON文件

除了使用Python的字典和循环来合并JSON文件，我们还可以使用Pandas库进行更高效的处理。

首先，我们需要安装Pandas库：

pip install pandas

然后，我们可以使用pandas.concat函数来合并多个JSON文件。假设我们有三个JSON文件，分别为file1.json、file2.json和file3.json，内容如下：

# file1.json
{
  "name": "John",
  "age": 30,
  "city": "New York"
}

# file2.json
{
  "occupation": "Engineer",
  "salary": 5000
}

# file3.json
{
  "hobby": "Reading",
  "education": "Bachelor"
}

我们可以使用以下代码来合并这些JSON文件：

import pandas as pd

files = ["file1.json", "file2.json", "file3.json"]

dataframes = []

for file in files:
    df = pd.read_json(file)
    dataframes.append(df)

merged_df = pd.concat(dataframes, axis=1)

merged_df.to_json("merged.json")

这样，我们就成功地使用Pandas库将多个JSON文件合并为一个新的文件merged.json。

5. 总结

本文介绍了如何使用Python合并多个JSON文件。我们首先介绍了使用Python字典和循环的方法，然后介绍了使用