python - 如何将 Pandas DataFrame 转换为三层嵌套字典?
问题描述
如何使用列名将 Pandas DataFrame 转换为三层嵌套字典?
这些列不是前三列,我希望它按列artist
分组,然后按列分组album
,我需要它不区分大小写,最好不使用 defaultdict。
这是一个最小的可重现示例:
from collections import defaultdict
from itertools import product
from pandas import DataFrame
tree = defaultdict(lambda: defaultdict(dict))
columns = {'a': str(), 'b': str(), 'c': str(), 'd': int(), 'e': int(), 'f': int()}
df = DataFrame(columns, index=[])
for i, j, k in product('abcd', repeat=3):
tree[i][j][k] = list(map('abcd'.index, (i, j, k)))
df.loc[len(df)] = [i, j, k, *list(map('abcd'.index, (i, j, k)))]
如何获得类似于tree
from的嵌套字典df
?
我真的很抱歉我可以提供任何实际的例子,因为它们不会是最小的。
我尝试使用.groupby()
,但我只看到它与一列一起使用,我真的不知道如何处理pandas.core.groupby.generic.DataFrameGroupBy
它返回的对象,我今天才开始使用它。
目前我可以这样做:
tree1 = dict()
for index, row in df.iterrows():
if not tree1.get(row['a'].lower()):
tree1[row['a'].lower()] = dict()
if not tree1[row['a'].lower()].get(row['b'].lower()):
tree1[row['a'].lower()][row['b'].lower()] = dict()
tree1[row['a'].lower()][row['b'].lower()][row['c'].lower()] = [row['d'], row['e'], row['f']]
我实际上实现了不区分大小写str
,dict
但为了简洁起见(它们很长),我不会在这里使用它。
但是根据这个答案https://stackoverflow.com/a/55557758/16383578这种方法不好,有什么更好的方法?
解决方案
我可能会这样做:
cols = ['a', 'b', 'c']
for col in cols:
df[col] = df[col].str.casefold()
tree = {}
for (a, b, c), values in (df.set_index(cols).T.to_dict(orient='list')
.items()):
tree.setdefault(a, {}).setdefault(b, {})[c] = values
或者
...
for (a, b, c), values in (df.set_index(cols).apply(list, axis=1)
.to_dict()).items():
tree.setdefault(a, {}).setdefault(b, {})[c] = values
这会产生相同的结果(当包含折叠的第一部分时)
def to_dict(df):
return df.set_index(df.columns[0]).iloc[:, 0].to_dict()
df['values'] = df[['d', 'e', 'f']].apply(list, axis=1)
df = df[['a', 'b', 'c', 'values']]
tree = (df.set_index(['a', 'b'])
.groupby(['a', 'b']).apply(to_dict)
.reset_index('b')
.groupby('a').apply(to_dict)
.to_dict())
但我认为这有点太令人费解了。
结果:
{'a': {'a': {'a': [0, 0, 0], 'b': [0, 0, 1], 'c': [0, 0, 2], 'd': [0, 0, 3]},
'b': {'a': [0, 1, 0], 'b': [0, 1, 1], 'c': [0, 1, 2], 'd': [0, 1, 3]},
'c': {'a': [0, 2, 0], 'b': [0, 2, 1], 'c': [0, 2, 2], 'd': [0, 2, 3]},
'd': {'a': [0, 3, 0], 'b': [0, 3, 1], 'c': [0, 3, 2], 'd': [0, 3, 3]}},
'b': {'a': {'a': [1, 0, 0], 'b': [1, 0, 1], 'c': [1, 0, 2], 'd': [1, 0, 3]},
'b': {'a': [1, 1, 0], 'b': [1, 1, 1], 'c': [1, 1, 2], 'd': [1, 1, 3]},
'c': {'a': [1, 2, 0], 'b': [1, 2, 1], 'c': [1, 2, 2], 'd': [1, 2, 3]},
'd': {'a': [1, 3, 0], 'b': [1, 3, 1], 'c': [1, 3, 2], 'd': [1, 3, 3]}},
'c': {'a': {'a': [2, 0, 0], 'b': [2, 0, 1], 'c': [2, 0, 2], 'd': [2, 0, 3]},
'b': {'a': [2, 1, 0], 'b': [2, 1, 1], 'c': [2, 1, 2], 'd': [2, 1, 3]},
'c': {'a': [2, 2, 0], 'b': [2, 2, 1], 'c': [2, 2, 2], 'd': [2, 2, 3]},
'd': {'a': [2, 3, 0], 'b': [2, 3, 1], 'c': [2, 3, 2], 'd': [2, 3, 3]}},
'd': {'a': {'a': [3, 0, 0], 'b': [3, 0, 1], 'c': [3, 0, 2], 'd': [3, 0, 3]},
'b': {'a': [3, 1, 0], 'b': [3, 1, 1], 'c': [3, 1, 2], 'd': [3, 1, 3]},
'c': {'a': [3, 2, 0], 'b': [3, 2, 1], 'c': [3, 2, 2], 'd': [3, 2, 3]},
'd': {'a': [3, 3, 0], 'b': [3, 3, 1], 'c': [3, 3, 2], 'd': [3, 3, 3]}}}
推荐阅读
- php - 如何隐藏数据库的数据但将其显示为交互式可视化?
- angular - 找不到 Angular 5 的 html 模板文件
- android - 当调试器关闭但在打开时运行
- facebook-opengraph - 在路径(对象)和“属性”中发现冲突的 og:类型
- ios - CardPlayer 卡未加载
- mongoose - 使用填充时执行了多少个数据库查询?
- laravel - Laravel 5.7 OpenSSL SSL_connect:SSL_ERROR_SYSCALL 连接到 graph.facebook.com:443
- android - 带有条件的Android firebase列表视图
- c# - C#.net 中的添加在某些情况下不起作用
- javascript - Yii2 想象 PHP