Perangkak web - modul permintaan python3.4.1 melaporkan ralat objek 'senarai' tidak mempunyai atribut 'dapat'

Saya menggunakan Python untuk menulis perangkak yang merangkak alamat IP Memandangkan tapak web itu anti-perangkak, saya menulis ejen dan menggunakan kumpulan benang untuk membuka 10 utas untuk merangkak alamat IP Walau bagaimanapun, objek 'senarai' tidak mempunyai atribut '. get' telah dilaporkan s...

世界只因有你 2017-06-12 09:24:16 0  3  3492

redis - Apabila menjalankan perangkak python, versi MySQL ialah 5.7 dan ralat sentiasa dilaporkan

Semasa menjalankan perangkak python, versi MySQL ialah 5.7 dan ralat sentiasa dilaporkan {kod...}. Bagaimana untuk menyelesaikannya?

扔个三星炸死你 2017-06-12 09:19:42 0  2  914

Perangkak web-Pengenalan kepada perangkak Python

Saya akan menjadi pelajar tahun kedua, saya telah belajar Python sendiri, dan saya tahu tatabahasa asas. Saya ingin belajar merangkak, tetapi saya merasakan bahawa ia melibatkan banyak pengetahuan Adakah sesiapa yang pernah mengalaminya dan boleh merumuskan apa yang mereka tahu, atau bagaimana untuk...

欧阳克 2017-07-05 10:34:11 0  3  1188

Bagaimanakah perangkak PHP mengakses ejen perangkak dinamik?

Bagaimanakah perangkak php mengakses ejen perangkak Adakah anda menggunakan python sebelum ini? Adakah kaedah akses yang sama seperti php?

Laical 2020-03-13 17:10:19 0  0  1099

python - Soalan mengenai imej merangkak?

Perangkak hari ini biasanya menghuraikan imej daripada HTML, tetapi masalahnya ialah beberapa laluan imej ditulis dalam JS. Bagaimana untuk memanjat ini? Saya tahu bahawa anda boleh melihat imej di dalam sumber dengan membuka titik f12 dalam penyemak imbas, tetapi bagaimanakah anda menggunakan peran...

我想大声告诉你 2017-06-28 09:25:40 0  2  1034

php - snoopy crawler melaporkan ralat 405 Tidak Dibenarkan

Kod $httpClass = new Snoopy();$httpClass->fetch('https://v.qq.com/');$url = $httpClass->results;print_r($url);die(); Apabila merangkak https://www.baidu.com/, ia terus melaporkan ralat 405 Merangkak https://v.qq.com/ adalah operasi biasa...

高洛峰 2017-05-16 12:58:40 0  2  613

node.js - perangkak nod, bagaimana untuk menggunakan kolam IP untuk mengelakkan anti-merangkak?

Masalahnya ialah ini saya seorang pemula yang baru mula belajar nod. Kemudian saya sedang membaca novel baru-baru ini, tetapi terdapat terlalu banyak iklan di laman web novel percuma tersebut, jadi saya bercadang untuk menulis perangkak untuk merangkak keseluruhan novel Namun, bilangan permintaan ur...

为情所困 2017-06-05 11:13:33 0  1  1228

java - Masalah dengan imej merangkak?

Saya baru mengubahsuai POM Anda boleh memuat turun semula kod sumber Ini adalah alamat projek crawler yang saya tulis selalunya tidak lengkap, seperti berikut: Ini adalah kod teras untuk memuat turun imej Seperti berikut: {kod...} Selepas pertanyaan data, saya rasa skopnya adalah...

天蓬老师 2017-06-23 09:12:30 0  1  842

Perangkak web - python meminta masalah perangkak

Apabila saya menggunakan perangkak permintaan, masalah timbul Selepas saya menyerahkan akaun dan kata laluan saya, halaman web tidak akan diserahkan terlebih dahulu, sebaliknya, akan ada tanda anti-leret, dan URL tidak akan berubah. data halaman web akan dihantar ke halaman lain, sila beritahu saya ...

仅有的幸福 2017-05-27 17:39:37 0  1  562

Perangkak web - Alamat IP proksi perangkak requests.get Python tidak berubah

Kerja itu memerlukan maklumat merangkak di Amazon, tetapi anti-crawler Amazon terlalu berkuasa, dan alamat IP yang sama akan disekat. Versi Python: 3.6, IDE: Pycharm 2017.1 Saya menyemak banyak maklumat di Internet dan membaca manual perpustakaan permintaan, tetapi semuanya adalah kaedah yang sama: ...

typecho 2017-06-12 09:24:11 0  1  1200

Python - Menyimpan kandungan perangkak ke dalam fail teks Isu pengekodan

Uji perangkak yang sangat mudah yang menyimpan kandungan teks halaman web yang sangat minimalis ke komputer setempat anda. Akhirnya ralat berlaku: {code...} Kod adalah seperti berikut: {code...}

欧阳克 2017-06-12 09:26:21 0  1  859

Perangkak web - Perangkak Java telah memperoleh pautan imej tetapi tidak boleh memuat turun imej

Kod src sumber imej yang sepadan yang diperolehi oleh perangkak dalam HTML adalah seperti berikut Tetapi apabila sumber itu ditukar kepada pautan melalui kod untuk memuat turun imej, ralat 400 dilaporkan, saya menggunakan krom untuk menguji sama ada pautan wujud. Didapati bahawa pelayan laman web pi...

黄舟 2017-05-17 10:01:58 0  2  584

Perangkak web - perangkak node.js Fungsi panggilan luaran tidak boleh mendapatkan nilai berubah

Baru-baru ini saya ingin menulis perangkak untuk membaca beberapa novel, tetapi saya menghadapi beberapa kesukaran console.log(catalogUrl) boleh mencetak URL yang diperlukan, tetapi apa yang saya harapkan ialah saya boleh mendapatkan katalogUrl dengan memanggil fungsi var xxx = getCatalogUrl. (buku)...

習慣沉默 2017-05-16 13:25:17 0  2  531

python - semakan perangkak csdn

https://github.com/xchaoinfo/fuck-login/blob/master/015%20CSDN/csdn.py Menurut komen pada baris 87-88, mengapakah ia perlu ditukar kepada pautan ini apabila menggunakan perangkak untuk komen pada artikel csdn Ini Bagaimana anda mendapat pautan saya melihat kod halaman web dan tiada pautan yang berka...

仅有的幸福 2017-05-18 10:53:42 0  2  858

Seorang pemula ingin meminta nasihat tentang cara menulis gelung dict ke dalam fail csv dalam python3 (masalah yang dihadapi semasa merangkak)?

Selepas perangkak menjana dict, saya ingin menulisnya ke dalam fail csv, tetapi ralat berlaku menggunakan notebook jupyter dan persekitaran tetingkap. Kod khusus adalah seperti berikut {code...} Apabila menjalankan kod di atas, mesej ralat ialah ValueError: terlalu banyak nilai untuk dibongkar (dija...

我想大声告诉你 2017-05-18 10:49:20 0  3  1430

selenium - Tanya tentang alat perangkak Python

1) Apa yang saya ingin tangkap ialah peminat bintang tertentu di Instagram 2) Tapak PC Instagram menggunakan banyak rendering js 3) Saya tidak pernah menulis perangkak, dan bos akan memerlukan data itu esok saya sedang menggunakan BeautifulSoup , selenium dan phantomjs mungkin ialah { Kod...} Soalan...

阿神 2017-06-28 09:22:20 0  1  1000

node.js - perangkak nod, meminta untuk menetapkan proksi, sentiasa melaporkan ralat untuk mendapatkan bantuan

Saya menggunakan permintaan untuk merangkak imej Untuk mengelakkan alamat IP daripada disekat, saya menggunakan proksi Namun, selepas menggunakan proksi, saya sentiasa melaporkan ralat. nodejs menggunakan permintaan dan modul async {code...} muat turun(item,cb), cb ialah fungsi panggil balik proses ...

学习ing 2017-06-21 10:12:18 0  2  1060

Bagaimana untuk menggunakan perangkak PHP untuk mengumpul Amazon?

Memandangkan peningkatan terakhir tapak web Amazon menyebabkan perangkak menutup telefon, dasar anti-poket Amazon kini lebih ketat. Akibatnya, kutipan biasa tidak dapat dilakukan. Adakah terdapat strategi pemerolehan baharu?

Laical 2020-03-26 17:20:49 0  0  1212

angular.js - Bagaimanakah perangkak Baidu mengendalikan simbol "#"?

Oleh kerana penggunaan Angular, keseluruhan laman web dimuatkan dalam Ajax, yang sangat memudaratkan SEO. SEO untuk sudut Baidu telah menjadi masalah. Sekarang saya ingin bertanya bagaimana perangkak Baidu mengendalikan simbol # dalam URL

高洛峰 2017-05-15 16:54:39 0  2  605

python爬虫 - scrapy使用redis的时候，redis需要进行一些设置吗？

用scrapy+redis+mongodb写了个爬虫，运行时不能爬取所有符合规则的网址，猜想是不是redis需要进行设置之类的，求高手解答。

巴扎黑 2017-04-24 09:12:00 0  1  489