Фрейм данных pandas не может получить значение
У меня есть фрейм данных pandas, который имеет следующую структуру:
id, @text, values
0, ....., "{'organizations':['sdfsf','sfdsf','sdfs'],'content':'some text'}"
Я пытаюсь получить значение "некоторый текст" в поле "содержание"
Expected output is:
"some text"
Я попробовал следующее, сохранив "{'organization': ['sdfsf', 'sfdsf', 'sdfs'], 'content': 'some text'}» в json-документе, но получил 'циклическую ошибку ссылки'
import json
json_data = pandas_dataframe.get(["value"][0])
with open('/pddata.json', 'w') as fp:
json.dump(json_data, fp)
Ответы 2
Используйте ast.literal_eval()
Пример:
import ast
df = pd.DataFrame([123, 'abc', "{'organizations':['sdfsf','sfdsf','sdfs'],'content':'some text'}"]).T
df.columns = ['id', 'text', 'values']
df
# id text values
# 0 123 abc {'organizations':['sdfsf','sfdsf','sdfs'],'con...
to_fetch = ast.literal_eval(df.iloc[0,2])
type(to_fetch)
# dict
to_fetch['content']
# 'some text'
Вы можете использовать pd.Series.map дважды, сначала с ast.literal_eval, затем с operator.itemgetter:
from ast import literal_eval
from operator import itemgetter
df['content'] = df['values'].map(literal_eval).map(itemgetter('content'))
print(df)
id text values content
0 123 abc {'organizations':['sdfsf','sfdsf','sdfs'],'con... some text
literal_eval преобразует строку в словарь, itemgetter извлекает значение, заданное ключевым аргументом. pd.Series.map применяет функцию к каждому значению в серии.
Или с map + lambda, анонимной пользовательской функцией:
df['content'] = df['values'].map(lambda x: literal_eval(x)['content'])
Выглядит очень питонично! :) Можете ли вы также добавить некоторые пояснения к строке кода, чтобы помочь нам лучше понять.
Спасибо! Цените это :) Это должен был быть принятый ответ (на мой взгляд), поскольку он применяется к нескольким строкам в более крупном фрейме данных.
каков ваш ожидаемый результат. Вы можете проиллюстрировать это на примере