it-swarm.dev

كيفية إضافة بيانات الباندا إلى ملف CSV موجود؟

أرغب في معرفة ما إذا كان من الممكن استخدام دالة pandas to_csv() لإضافة dataframe إلى ملف csv موجود. يحتوي ملف csv على نفس بنية البيانات المحملة.

156
Samatix

يمكنك إلحاق إلى ملف CSV عن طريق فتح الملف في وضع إلحاقي:

with open('my_csv.csv', 'a') as f:
    df.to_csv(f, header=False)

إذا كان هذا هو ملف CSV الخاص بك ، foo.csv:

,A,B,C
0,1,2,3
1,4,5,6

إذا قرأت ذلك ثم قمت بإلحاقه ، على سبيل المثال ، df + 6:

In [1]: df = pd.read_csv('foo.csv', index_col=0)

In [2]: df
Out[2]:
   A  B  C
0  1  2  3
1  4  5  6

In [3]: df + 6
Out[3]:
    A   B   C
0   7   8   9
1  10  11  12

In [4]: with open('foo.csv', 'a') as f:
             (df + 6).to_csv(f, header=False)

يصبح foo.csv:

,A,B,C
0,1,2,3
1,4,5,6
0,7,8,9
1,10,11,12
208
Andy Hayden

يمكنك تحديد وضع الكتابة بيثون في الباندا to_csv وظيفة. لإلحاقها "أ".

في حالتك:

df.to_csv('my_csv.csv', mode='a', header=False)

الوضع الافتراضي هو 'w'.

361
tlingf

وظيفة مساعد صغيرة أستخدمها مع بعض إجراءات التحقق من الرأس لمعالجة كل شيء:

def appendDFToCSV_void(df, csvFilePath, sep=","):
    import os
    if not os.path.isfile(csvFilePath):
        df.to_csv(csvFilePath, mode='a', index=False, sep=sep)
    Elif len(df.columns) != len(pd.read_csv(csvFilePath, nrows=1, sep=sep).columns):
        raise Exception("Columns do not match!! Dataframe has " + str(len(df.columns)) + " columns. CSV file has " + str(len(pd.read_csv(csvFilePath, nrows=1, sep=sep).columns)) + " columns.")
    Elif not (df.columns == pd.read_csv(csvFilePath, nrows=1, sep=sep).columns).all():
        raise Exception("Columns and column order of dataframe and csv file do not match!!")
    else:
        df.to_csv(csvFilePath, mode='a', index=False, sep=sep, header=False)
17
KCzar
with open(filename, 'a') as f:
    df.to_csv(f, header=f.tell()==0)
  • إنشاء ملف ما لم يكن موجودا ، وإلا إلحاق
  • أضف رأسًا إذا كان الملف قيد الإنشاء ، وإلا تخطاه
8
DeveScie

متأخرة قليلاً للحفلة ولكن يمكنك أيضًا استخدام مدير السياق ، إذا كنت تقوم بفتح الملف وإغلاقه عدة مرات ، أو تسجيل البيانات والإحصائيات ، إلخ.

from contextlib import contextmanager
import pandas as pd
@contextmanager
def open_file(path, mode):
     file_to=open(path,mode)
     yield file_to
     file_to.close()


##later
saved_df=pd.DataFrame(data)
with open_file('yourcsv.csv','r') as infile:
      saved_df.to_csv('yourcsv.csv',mode='a',header=False)`
3
ai-shwarya

في البداية بدءًا من قواعد بيانات pyspark - حصلت على أخطاء في تحويل النوع (عند التحويل إلى pandas df's ثم إلحاق csv) مع إعطاء أنواع المخططات/الأعمدة في dataframes الخاصة بي

حل المشكلة عن طريق إجبار جميع الأعمدة في كل مدافع على أن تكون من نوع السلسلة ثم إلحاقها بـ csv كما يلي:

with open('testAppend.csv', 'a') as f:
    df2.toPandas().astype(str).to_csv(f, header=False)
2
Grant Shannon