python用于循环＆＃x2B;熊猫附加

Question

我正在尝试在循环中读取文件，并将它们全部附加到一个数据集中。但是，我的代码似乎正在以罚款读取数据，但是循环没有将数据附加到数据框架上。相反，它仅使用导入的数据集之一（Final_access HR DataFrame）。

我的循环怎么了？为什么要附加我的循环文件？ 我的DataFrame Access_hr_attestaion有77个记录，当我在3个文件中阅读时，我期望有2639个记录。

for file in files_path:
    mainframe_access_HR = pd.read_pickle(file)
    mainframe_access_HR = mainframe_access_HR.astype(str)
    
    if mainframe_access_HR.shape[0]: 
        
        application = mainframe_access_HR['Owner'].unique()[0]
    

        filtered_attestation_data = attestation_data[attestation_data['cleaned_MAL_CODE']==application]


        final_access_hr = pd.DataFrame()
        column_list = pd.DataFrame(['HRACF2']) 
        for column in range(len(column_list)):
            mainframe_access_HR_new = mainframe_access_HR.copy()

            #Drop rows containing NAN for column c_ACF2_ID for new merge
            mainframe_access_HR_new.dropna(subset=[column_list.iloc[column,0]], inplace = True)
        
            #Creating a new column for merge
            mainframe_access_HR_new['ID'] = mainframe_access_HR_new[column_list.iloc[column,0]]
            
            #case folding
            mainframe_access_HR_new['ID'] = mainframe_access_HR_new['ID'].str.strip().str.upper()
        
            #Merge data
            merged_data = pd.merge(filtered_attestation_data, mainframe_access_HR_new, how='right', left_on=['a','b'], right_on =['a','b'])

        
            #Concatinating all data together
            final_access_hr = final_access_hr.append(merged_data)

        #Remove duplicates
        access_HR_attestaion = final_access_hr.drop_duplicates()

Answer 1

我认为错误是因为您正在初始化final_access_hr，以供您阅读的每个文件。因此，这将重置您阅读的每个文件。

您可以按线沿files_path的循环移动：

final_access_hr = pd.DataFrame()

如果它解决了您的问题，请发表评论吗？