【问题标题】:Combine dictionary of dataframes into 1 single dataframe将数据帧字典合并为 1 个单个数据帧
【发布时间】:2018-02-27 01:56:30
【问题描述】:

我正在寻找一种解决方案,将我在字典中的所有数据帧放入 1 个单一的巨型数据帧中。我对 Python 比较陌生,所以我无法理解如何遍历字典并将所有数据帧放入 1。到目前为止我实现的代码如下:

import sys
from ftplib import FTP
import os
import socket
import time
import pandas as pd
import numpy as np
from glob import glob

path = 'path_to_file'

files = glob(path + '/*Mail*.xlsx')

print files

get_df = lambda f: pd.read_excel(f, sheetname=None)

dodf = {f: get_df(f) for f in files}  ### dictionary of dataframes

现在,我需要将所有不同的数据帧放入 1 个数据帧中,然后对其进行操作。任何建议将不胜感激。

我试过了,

for df in dodf:
pd.concat(dodf.values(), ignore_index=True)

但它似乎无法正常工作。

【问题讨论】:

    标签: python pandas dictionary


    【解决方案1】:

    我认为需要 concat 与 dict 理解:

    dodf = {f: pd.read_excel(f, sheet_name=None) for f in files}
    df = pd.concat([v for k,v in dodf.items()])
    

    或者:

    dodf = {f: pd.read_excel(f, sheet_name=None) for f in files}
    df = pd.concat([pd.concat(v) for k,v in dodf.items()])
    

    【讨论】:

    • 已经试过了,但一直报错:“无法连接非 NDFrame 对象”
    • 很高兴能帮上忙 ;) 美好的一天!
    • sheetname 现在是 sheet_name 根据文档:pandas.pydata.org/pandas-docs/stable/reference/api/…
    • 我在我自己的 DataFrames 字典上试过这个并得到这个错误:TypeError: first argument must be an iterable of pandas objects, you passed an object of type "DataFrame"
    • @MyCarta - 有sheet_name=None 吗?它用于获取 DataFrames 的 orderdict 中的所有 sheetnames。
    【解决方案2】:
    df_list = [ v for k,v in dodf.items()] 
    df = pd.concat(df_list ,axis=1)
    

    这行得通吗? 它还取决于 concat 是按列还是按行...

    【讨论】:

      猜你喜欢
      • 2016-01-31
      • 2020-08-10
      • 1970-01-01
      • 2020-03-03
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2019-08-13
      • 1970-01-01
      相关资源
      最近更新 更多