Python에서 대용량 txt 파일을 한 줄씩 분할하는 방법 소개

本文通过代码给大家介绍了Python 逐行分割大txt文件的方法，在文中给大家提到了Python从txt文件中逐行读取数据的方法，需要的朋友参考下吧

代码如下所示：

# -*- coding: <encoding name> -*-
import io
LIMIT = 150000
file_count = 0
url_list = []
with io.open(&#39;D:\DB_NEW_bak\DB_NEW_20171009_bak.sql&#39;,&#39;r&#39;,encoding=&#39;utf-16&#39;) as f:
  for line in f:
    url_list.append(line)
    if len(url_list) < LIMIT:
      continue
    file_name = str(file_count)+".sql"
    with io.open(file_name,&#39;w&#39;,encoding=&#39;utf-16&#39;) as file:
      for url in url_list[:-1]:
        file.write(url)
      file.write(url_list[-1].strip())
      url_list=[]
      file_count+=1
if url_list:
  file_name = str(file_count) + ".sql"
  with io.open(file_name,&#39;w&#39;,encoding=&#39;utf-16&#39;) as file:
    for url in url_list:
      file.write(url)
print(&#39;done&#39;)

Python从txt文件中逐行读取数据

非常的简单，提供三种方法：

方法一：

f = open("foo.txt")       # 返回一个文件对象 
line = f.readline()       # 调用文件的 readline()方法 
while line: 
  print line,         # 后面跟 ',' 将忽略换行符 
  # print(line, end = '')　　　# 在 Python 3中使用 
  line = f.readline() 
 
f.close()

方法二：

for line in open("foo.txt"): 
  print line,

方法三：

f = open("c:\\1.txt","r") 
lines = f.readlines()#读取全部内容 
for line in lines 
  print line

总结

위 내용은 Python에서 대용량 txt 파일을 한 줄씩 분할하는 방법 소개의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!