python對(duì)8000行csv添加列
問(wèn)題描述
想要對(duì)已有的8000多列csv,添加2000多列,由于文件過(guò)大,不能一次性加載到內(nèi)存中,所以想一列一列的寫入到已有的csv中,試了很多中方法,都不行,請(qǐng)問(wèn)該怎么解決
問(wèn)題解答
回答1:按行讀入,然后加入這些列啊。CSV一般都是逗號(hào)分隔的文本文件,按照文本文件的處理方法處理就行。一般流程就是:1.讀入一行2.以逗號(hào)切分字符串為數(shù)組3.給數(shù)組加上你想要的列元素4.以逗號(hào)為分隔連接數(shù)組5.將這行寫入新文件6.一直到文件結(jié)尾即可。
回答2:pandas有分塊讀取,示例代碼
import pandas as pdreader = pd.read_csv(’a.csv’, iterator=True)header = Truetry: df = reader.get_chunk(10000) #循環(huán)加添新列到df df[’新列’] = ’值’ #把記錄追加到新csv df.to_csv(’b.csv’, mode=’a’, index=False, header=header)#文件頭只寫一次 header = Falseexcept StopIteration: pass
相關(guān)文章:
1. sql語(yǔ)句 - mysql中關(guān)聯(lián)表查詢問(wèn)題2. css - chrome下a標(biāo)簽嵌套img 顯示會(huì)多個(gè)小箭頭?3. javascript - 如何將一個(gè)div始終固定在某個(gè)位置;無(wú)論屏幕和分辨率怎么變化;div位置始終不變4. html - vue項(xiàng)目中用到了elementUI問(wèn)題5. javascript - iframe 為什么加載網(wǎng)頁(yè)的時(shí)候滾動(dòng)條這樣顯示?6. python - django models 為生成的html元素添加樣式。7. javascript - vscode alt+shift+f 格式化js代碼,通不過(guò)eslint的代碼風(fēng)格檢查怎么辦。。。8. javascript - 有什么比較好的網(wǎng)頁(yè)版shell前端組件?9. mysql updtae追加數(shù)據(jù)sql語(yǔ)句10. javascript - 原生canvas中如何獲取到觸摸事件的canvas內(nèi)坐標(biāo)?
