Memalsukan Lawatan Penyemak Imbas dengan Permintaan Python dan Menjana Ejen Pengguna
Dalam senario tertentu, anda mungkin menghadapi tapak web yang bertindak balas secara berbeza apabila diakses melalui penyemak imbas berbanding pendekatan berasaskan skrip. Untuk mengatasi isu ini dan mensimulasikan lawatan penyemak imbas, anda boleh menggunakan perpustakaan Permintaan Python untuk menyediakan pengepala Ejen Pengguna.
Pengepala Ejen Pengguna mengenal pasti penyemak imbas dan sistem pengendalian yang digunakan untuk mengakses tapak web. Dengan menyediakan Ejen Pengguna yang sesuai, anda boleh menipu pelayan untuk berfikir bahawa permintaan itu datang daripada penyemak imbas sebenar, seperti Firefox atau Chrome.
Begini cara melakukannya:
import requests url = 'http://example.com/page.html' headers = {'User-Agent': 'Mozilla/5.0 ...'} response = requests.get(url, headers=headers) print(response.content)
Anda boleh mendapatkan senarai lengkap rentetan Ejen Pengguna dengan membuat pertanyaan di web. Selain itu, anda boleh menggunakan pakej pihak ketiga "fake-useragent" untuk menjana rentetan Agen Pengguna secara rawak berdasarkan data dunia sebenar.
Atas ialah kandungan terperinci Bagaimanakah saya boleh mensimulasikan lawatan penyemak imbas menggunakan Permintaan Python dan pengepala Ejen Pengguna?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!