Bagaimanakah saya dapat membaca fail teks besar dalam C# menggunakan aliran?

Mengoptimumkan Pembacaan Strim C# untuk Fail Teks Besar

Pengenalan:

Memproses fail teks besar (melebihi 100MB) dengan cekap dalam C# memerlukan pertimbangan yang teliti. Hanya menggunakan StreamReader.ReadToEnd() boleh menyebabkan kesesakan prestasi yang ketara. Artikel ini menggariskan pendekatan bacaan yang lebih cekap dan tersusun menggunakan strim.

Strategi Membaca Dipertingkat:

Untuk prestasi optimum dengan fail besar, kami mengesyorkan yang berikut:

1. Gunakan BufferedStream untuk membalut FileStream. Langkah penting ini menyimpan data cache, meminimumkan operasi I/O cakera.
2. Laksanakan urutan pekerja latar belakang untuk membaca fail dalam bahagian yang boleh diurus.
3. Sepadukan bar kemajuan dalam pekerja latar belakang untuk mengesan kemajuan bacaan secara visual.
4. Sertakan mekanisme pembatalan untuk membolehkan proses pembacaan terganggu jika perlu.
5. Kembalikan data terkumpul (disimpan dalam StringBuilder) ke urutan utama setelah selesai.

Memanfaatkan BufferedStream:

BufferedStream mempercepatkan bacaan dengan ketara dengan menyimpan data dalam memori. Kaedah Read dan Writenya mengendalikan pengurusan penimbal secara automatik.

Mengoptimumkan StringBuilder:

Pra-saiz StringBuilder dengan panjang strim yang diketahui (jika ada) menghalang pengagihan semula berulang, meningkatkan lagi kecekapan.

Penambahbaikan Selanjutnya:

• Selepas memuatkan, kenal pasti aksara penamat baris fail.
• Untuk fail yang sangat besar, pertimbangkan corak pengeluar-pengguna dengan tugasan berasingan untuk membaca dan memproses, memaksimumkan keselarian.

Pertimbangan Platform:

• Pendapatan prestasi daripada menggunakan BufferedStream secara amnya lebih ketara dalam .NET 3.x (32-bit) berbanding dalam .NET 4.5 (64-bit).
• Dalam aplikasi tertentu, seperti menstrim fail CSV yang besar dalam ASP.NET MVC, BufferedStream menyediakan peningkatan prestasi yang ketara.

Atas ialah kandungan terperinci Bagaimanakah saya dapat membaca fail teks besar dalam C# menggunakan aliran?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!