文章詳情頁
python對8000行csv添加列
瀏覽:105日期:2022-07-12 17:13:40
問題描述
想要對已有的8000多列csv,添加2000多列,由于文件過大,不能一次性加載到內存中,所以想一列一列的寫入到已有的csv中,試了很多中方法,都不行,請問該怎么解決
問題解答
回答1:按行讀入,然后加入這些列啊。CSV一般都是逗號分隔的文本文件,按照文本文件的處理方法處理就行。一般流程就是:1.讀入一行2.以逗號切分字符串為數組3.給數組加上你想要的列元素4.以逗號為分隔連接數組5.將這行寫入新文件6.一直到文件結尾即可。
回答2:pandas有分塊讀取,示例代碼
import pandas as pdreader = pd.read_csv(’a.csv’, iterator=True)header = Truetry: df = reader.get_chunk(10000) #循環加添新列到df df[’新列’] = ’值’ #把記錄追加到新csv df.to_csv(’b.csv’, mode=’a’, index=False, header=header)#文件頭只寫一次 header = Falseexcept StopIteration: pass
相關文章:
1. javascript - 百度echarts series數據更新問題2. javascript - node服務端渲染的困惑3. html5 - h5寫的app用的webview,用手機瀏覽器打開不顯示?4. javascript - webpack --hot 熱重載無效的問題5. php - 第三方支付平臺在很短時間內多次異步通知,訂單多次確認收款6. python - django 按日歸檔統計訂單求解7. 請教一個python字符串處理的問題?8. Mysql && Redis 并發問題9. mysql scripts提示 /usr/bin/perl: bad interpreter10. mysql - 一個表和多個表是多對多的關系,該怎么設計
排行榜
