如何在.NET中高效讀取大文本檔？

在.NET 中高效讀取大型文字檔案

處理大量文字檔案時，逐行讀取效能變得至關重要。本文討論在 .NET 中讀取 1 GB 文字檔案的最佳方法。

使用 StreamReader

在 .NET 中讀取文字檔案的廣泛使用的方法是 StreamReader .ReadLine。但是，對於大檔案來說，這並不是最佳方法，因為它將整個檔案讀取到記憶體中，這可能會佔用大量資源。

大檔案的記憶體對映檔案

In .NET 4.0 及更高版本，請考慮使用 MemoryMappedFile。此類專為高效處理大文件而設計。它允許您創建記憶體映射文件，這使得文件的一部分可以從記憶體存取。這避免了將整個文件讀入記憶體的開銷，從而顯著提高了效能。

程式碼範例

以下程式碼示範如何使用讀取大型文字檔案MemoryMappedFile:

using System.IO.MemoryMappedFiles;

// Create a memory-mapped file object
MemoryMappedFile mmf = MemoryMappedFile.CreateFromFile(filePath, FileMode.Open, "MyMappedFile");

// Create a memory-mapped view to the file contents
MemoryMappedViewAccessor view = mmf.CreateViewAccessor();

// Read the file line by line using a byte array
byte[] buffer = new byte[1024];
int bytesRead;
while ((bytesRead = view.Read(buffer, 0, buffer.Length)) != 0)
{
    // Convert the buffer to a string
    string line = System.Text.Encoding.UTF8.GetString(buffer, 0, bytesRead);

    // Process the line as needed
}

結論結論

結論結論雖然StreamReader.ReadLine可以滿足較小的文字文件，但 MemoryMappedFiles 為大文件提供明顯更好的效能。透過避免將整個檔案載入到記憶體中的開銷，它可以實現更快、更有效率的處理。

以上是如何在.NET中高效讀取大文本檔？的詳細內容。更多資訊請關注PHP中文網其他相關文章！