Python實現(xiàn)文本文件拆分寫入到多個文本文件的方法
將一個txt文本文件中的內(nèi)容行拆分固定的行數(shù),自動分批寫入到多個文本文件。比如:一個源txt文件有5100行數(shù)據(jù),每1000行插入到一個txt文件,最后獲得6個txt文件(5個文本文件有1000行數(shù)據(jù),第6個文本文件有100行數(shù)據(jù))。
步驟1、先建立一個目錄用于存放分割后的txt文件(這里的目錄名為:dataText)2、修改拆分的數(shù)目(這里是每5000行數(shù)據(jù)存入一個txt文件)3、運(yùn)行python文件,查看生成的txt文件
代碼open_diff = open(’data.txt’, ’r’) # 源文本文件diff_line = open_diff.readlines()line_list = []for line in diff_line: line_list.append(line)count = len(line_list) # 文件行數(shù)print(’源文件數(shù)據(jù)行數(shù):’,count)# 切分diffdiff_match_split = [line_list[i:i+5000] for i in range(0,len(line_list),5000)]# 每個文件的數(shù)據(jù)行數(shù)# 將切分的寫入多個txt中for i,j in zip(range(0,int(count/5000+1)),range(0,int(count/5000+1))): # 寫入txt,計算需要寫入的文件數(shù) with open(’./dataText/ImageData%d.txt’% j,’w+’) as temp:for line in diff_match_split[i]: temp.write(line)print(’拆分后文件的個數(shù):’,i+1)結(jié)果


將txt文件中的數(shù)據(jù)拆分成多個文本文件,可以解決由于文本文件數(shù)據(jù)過大而無法導(dǎo)入某些軟件的問。
這里是將一個url文本文件(約15M)導(dǎo)入idm下載url中的內(nèi)容,但由于文本文件過大,數(shù)據(jù)量過多,就拆分成多個文本文件分批次導(dǎo)入idm。
注意:1、程序中的5000為寫入每個文件的數(shù)據(jù)行數(shù),最后一個文件的行數(shù)不足5000,也用一個文本文件存儲。2、根據(jù)需要,修改存儲數(shù)據(jù)的行數(shù)(兩個地方的5000都需要修改)。
到此這篇關(guān)于Python實現(xiàn)文本文件拆分寫入到多個文本文件的方法的文章就介紹到這了,更多相關(guān)Python 文本文件拆分內(nèi)容請搜索好吧啦網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持好吧啦網(wǎng)!
相關(guān)文章:
1. Python安裝并操作redis實現(xiàn)流程詳解2. 網(wǎng)頁中img圖片使用css實現(xiàn)等比例自動縮放不變形(代碼已測試)3. 部署vue+Springboot前后端分離項目的步驟實現(xiàn)4. Python常用擴(kuò)展插件使用教程解析5. idea設(shè)置自動導(dǎo)入依賴的方法步驟6. AspNetCore&MassTransit Courier實現(xiàn)分布式事務(wù)的詳細(xì)過程7. vue組件庫的在線主題編輯器的實現(xiàn)思路8. ajax post下載flask文件流以及中文文件名問題9. AJAX實現(xiàn)數(shù)據(jù)的增刪改查操作詳解【java后臺】10. PHP字符串前后字符或空格刪除方法介紹

網(wǎng)公網(wǎng)安備