Bagaimanakah saya boleh mengisi pangkalan data MySQL dengan cekap dengan senarai kamus menggunakan kaedah executemany() Python?

Linda Hamilton
Lepaskan: 2024-11-09 19:32:02
asal
247 orang telah melayarinya

How can I efficiently populate MySQL databases with lists of dictionaries using Python's executemany() method?

Mengisi Pangkalan Data MySQL dengan Senarai Kamus Menggunakan Executemany dalam Python secara berkesan

Memasukkan set data yang besar ke dalam pangkalan data MySQL selalunya boleh menyebabkan ketidakcekapan dan potensi pangkalan data lokap. Untuk menangani isu ini apabila bekerja dengan data yang diwakili sebagai senarai kamus, pertimbangkan untuk menggunakan kaedah executemany().

Dalam senario yang dibentangkan, pendekatan asal melibatkan memasukkan secara manual setiap baris jadual ke dalam pangkalan data, yang boleh menjadi rumit dan terdedah kepada kesilapan. Untuk mengoptimumkan proses ini, executemany() menyediakan cara yang mudah untuk melaksanakan berbilang pernyataan SQL dengan satu panggilan fungsi.

Untuk menggunakan executemany() dengan berkesan, susun semula data dengan mengekstrak nilai daripada kamus dan mencipta senarai daripada tupel. Setiap tuple mewakili baris jadual, yang mengandungi nilai yang sepadan untuk setiap lajur.

itemBank = []
for row in rows:
    itemBank.append((
        tempRow2['Item_Name'],
        tempRow1['Item_Price'],
        tempRow3['Item_In_Stock'],
        tempRow4['Item_Max'], 
        getTimeExtra
        )) #append data
Salin selepas log masuk

Seterusnya, buat pertanyaan SQL dengan ruang letak untuk nilai parameter, yang akan digantikan dengan nilai daripada tupel dalam fungsi executemany().

q = """ insert ignore into TABLE1 (
        Item_Name, Item_Price, Item_In_Stock, Item_Max, Observation_Date ) 
        values (%s,%s,%s,%s,%s)           
    """
Salin selepas log masuk

Akhir sekali, laksanakan fungsi executemany() dengan data yang diubah suai dan pertanyaan SQL.

try:
    x.executemany(q, itemBank)
    conn.commit()
except:
    conn.rollback()
Salin selepas log masuk

Pendekatan ini meningkatkan kecekapan dengan ketara dengan melaksanakan berbilang baris dalam operasi tunggal, mengurangkan overhed yang dikaitkan dengan sisipan baris individu. Selain itu, ia menghalang kemungkinan lokap pangkalan data dengan mengagihkan beban ke atas urus niaga yang lebih sedikit.

Dengan menggunakan executemany() untuk memasukkan senarai kamus ke dalam pangkalan data MySQL, pembangun boleh menyelaraskan proses pemasukan data mereka, meningkatkan prestasi pangkalan data dan meminimumkan risiko lokap.

Atas ialah kandungan terperinci Bagaimanakah saya boleh mengisi pangkalan data MySQL dengan cekap dengan senarai kamus menggunakan kaedah executemany() Python?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

sumber:php.cn
Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn
Artikel terbaru oleh pengarang
Tutorial Popular
Lagi>
Muat turun terkini
Lagi>
kesan web
Kod sumber laman web
Bahan laman web
Templat hujung hadapan