python怎麼批次讀取txt檔案為DataFrame格式

php中世界最好的语言
發布: 2018-04-09 10:08:57
原創
7685 人瀏覽過

這次帶給大家python怎麼批次讀取txt檔案為DataFrame格式,python批次讀取txt檔案為DataFrame格式的注意事項有哪些,以下就是實戰案例,一起來看一下。

我們有時候會批次處理同一個資料夾下的文件,並且希望讀取到一個文件裡面便於我們計算操作。比方我有下圖一系列的txt文件,我該如何把它們寫入一個txt文件中並且讀取為DataFrame格式呢?

首先我們要用到glob模組,這個python內建的模組可以說是非常的好用。

glob.glob('*.txt')
登入後複製

得到以下結果:

#all.txt是我最後得到的結果檔案。可以見返回的是一個包含txt文件名稱的列表,當然如果你的資料夾下面只有txt文件,那麼你用os.listdir()可以得到一個一樣的列表

然後讀取的時候只要注意txt檔案的編碼格式(可以用notepad 打開記事本查看)和間隔符的形式就好了,完整的程式碼如下:

import os
import pandas
import codecs
import glob
import pandas as pd
os.getcwd()
os.chdir('D:\AAAASXQ\python study\data preprocessing')
def txtcombine():
 
 files = glob.glob('*.txt')
 
 all = codecs.open('all.txt','a')
 
 for filename in flist: 
 print(filename) 
 fopen=codecs.open(filename,'r',encoding='utf-8') 
 lines=[] 
 lines=fopen.readlines() 
 fopen.close() 
 i=0 
 for line in lines: 
  for x in line: 
  all.write(x)
 #读取为DataFrame格式
 all1 = pd.read_csv('all.txt',sep=' ',encoding='GB2312')
 #保存为csv格式
 all1.to_csv('all.csv',encoding='GB2312')
 
if name == 'main': 
 txtcombine()
登入後複製

相信看了本文案例你已經掌握了方法,更多精彩請關注php中文網其它相關文章!

推薦閱讀:

python字串如何轉換為二維陣列

JS的EventEmitter使用步奏詳解

以上是python怎麼批次讀取txt檔案為DataFrame格式的詳細內容。更多資訊請關注PHP中文網其他相關文章!

相關標籤:
來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板