python - конвертирует pandas dataframe в json или dict, а затем обратно в df с неуникальными столбцами

Question

Мне нужно отправить фрейм данных из бэкэнда во внешний интерфейс, поэтому сначала нужно преобразовать его либо в объект, сериализуемый JSON, либо непосредственно в JSON. Проблема в том, что у меня есть некоторые кадры данных, которые не имеют уникальных столбцов. Я посмотрел в orient параметр, to_json(), to_dict() а также from_dict() методы, но до сих пор не могу заставить его работать...

Цель состоит в том, чтобы иметь возможность преобразовать df в нечто, сериализуемое json, а затем обратно в исходное состояние.

Я также с трудом копирую его с помощью pd.read_clipboard, поэтому в качестве изображения я включил образец df, вызывающий проблемы (извините!).

Answer 1

Я нашел способ заставить это работать.

Вот простой воспроизводимый пример:

import pandas as pd
import json

# create simple df with two identical named columns
df = pd.DataFrame([[1, 2, 3, 4]], columns=['col1', 'col2', 'col1', 'col2'])

# orient='split' conservers order
jsonized_df = df.to_json(orient='split')

# suppose the df is part of a bigger data structure being sent to another app
random_dict = {'foo': 'bar'}
all_data = [random_dict, jsonized_df]
data_to_frontend = json.dumps(jsonized_df)

# then from the other app
all_data = json.loads(data_to_frontend)
final_df = pd.read_json(all_data[1], orient='split') #important to remember to include the orient parameter when reading the json df as well!

Final_df будет идентичным исходному_df с сохранением порядка!