python - Scrapy读取数据库中的url进行爬去

比如我爬去了豆瓣的Top100页面，将每本书的详情页面的URL存入MongoDB中，然后我用Redis去重。然后从Redis中获取url去爬详细的数据。现在有个问题 在Scrapy中，怎么处理MongoDB中url字段的...

daripada [Pythonkumpulan perbincangan] 2017-04-18 10:15:29 0  1  929

python - 关于tornado中websocket模块报 Can "Upgrade" only to "WebSocket"，

在tornado中使用websocket实现长轮询，打开页面控制台发现出现了“Failed to load resource: the server responded with a status of 400 (Bad...

daripada [Pythonkumpulan perbincangan] 2017-04-17 17:04:05 0  1  929

python print语句后怎么去掉自动输出的空格

最近利用python的时候发现一个下细节 然后一直不知道怎么解决 例如下面一段代码 {代码...} 会输出这样一段** ** * ** * * ** * * * *正如你看到的每个*后面有个空格，我想应该是print语句...

daripada [Pythonkumpulan perbincangan] 2017-04-17 10:58:48 0  5  929

请大家推荐一款Python的IDE

我经常在windows环境下 学习python，请大家推荐一款IDE 好用的。我现在用的是自带的Python GUI。版本是2.7 谢谢！

daripada [Pythonkumpulan perbincangan] 2017-04-17 13:20:12 0  18  928

Adakah terdapat salinan proses utama dalam ingatan subproses windows python?

Apabila melihat dokumentasi berbilang proses, saya melihat penerangan bahawa terdapat salinan pada mekanisme t...

daripada [Pythonkumpulan perbincangan] 2017-06-12 09:23:56 0  1  927

python - perpustakaan tweepy menyambung ke API Twitter dan melaporkan ralat

Persekitaran: python 2.7.10 tweepy:3.5.0 Ralat: tweepy.error.TweepError: Gagal menghantar permintaan: [SSL: UN...

daripada [Pythonkumpulan perbincangan] 2017-05-24 11:35:03 0  1  927

python2.7 - python：ImportError: No module named coockielib

使用mac自带的python环境，python版本是2.7.10 运行后出现了如下信息： {代码...} 在终端输入easy_install cookielib 得到： {代码...} easy_install应该是没有...

daripada [Pythonkumpulan perbincangan] 2017-04-18 09:26:53 0  2  927

python2.7 - python 中 getattr 使用 为什么这样报错?

{代码...} line 17, in play room = getattr(self, next) TypeError: getattr(): attribute name must be string 请问这是为什...

daripada [Pythonkumpulan perbincangan] 2017-04-17 14:52:41 0  2  927

Python mendapat sebahagian daripada data daripada teks?

Saya ingin mengalih keluar key:value sebelum perpuluhan pertama dalam setiap baris dan mengalih keluar kekunci...

daripada [Pythonkumpulan perbincangan] 2017-07-05 10:35:28 0  2  926

python2.7 urllib2 memperoleh paparan halaman web yang tidak lengkap

Saya menggunakan modul urllib2 dalam python2.7 untuk menulis kod yang sangat mudah untuk mendapatkan kod sumbe...

daripada [Pythonkumpulan perbincangan] 2017-05-18 11:01:12 0  1  926

python - 求修改正则匹配，匹配bbs中楼层回复者

文本：回 3楼(游客) 的帖子回 某某游客A 的帖子回 208游客2 的帖子需要剔除掉 3楼 与 括号我写的正则，思路是先提取两个空格之间的内容然后分组进行后续处理：但…………完全没用 {代码...} 求指点

daripada [Pythonkumpulan perbincangan] 2017-04-17 16:12:47 0  1  926

python算法题 如何进行多重判断?

我有一批数据,比如list1,是一批连接.而我现在想提取出这些链接中 包含js,css,gif,jpg的字符的连接那么要如何实现比较高效?用or来实现一个一个写?这明显不现实,而且通用性极地.因为加入我要包含的特征有20...

daripada [Pythonkumpulan perbincangan] 2016-11-09 11:47:49 0  2  926

jupyter-notebook - Tiada pilihan Python selepas memulakan notebook jupyter pada Mac?

Seperti yang ditunjukkan dalam gambar, semuanya telah dimulakan, tetapi mengapa tiada pilihan untuk Python Ada...

daripada [Pythonkumpulan perbincangan] 2017-05-18 11:01:38 0  1  925

python - 抓取天猫详情页里面的月销量，反爬非常厉害

现在需要抓取天猫详情页里面的月销量如https://detail.tmall.com/item...已分析得到是异步js返回的数据，接口如下https://mdskip.taobao.com/cor... 这个地址访问几...

daripada [Pythonkumpulan perbincangan] 2017-04-18 10:29:07 0  4  925

python支持固化分组吗？

python正则支持固化分组吗？(?>···)比如.dd(?>[0-9])d+匹配.625

daripada [Pythonkumpulan perbincangan] 2016-10-22 16:15:14 0  1  925