python - Scrapy写的爬虫只能抓取前面几页是什么问题？

打算爬贴吧，我是想获取每一页的帖子的链接，然后再根据帖子链接提取帖子里面的内容，提取某一页帖子的链接的代码已经写好，但是发现只提取了3页爬虫就结束了，这是什么问题？这是我的代码： {代码...}

Depuis [Pythongroupe de discussion] 2017-04-18 10:10:11 0  1  852

使用python fabric的run方法，返回值乱码

{代码...} [test@10 .0.0.111] Executing task 'task1'[test@10 .0.0.111] run: c:/a.bat[test@10 .0.0.111] out: (B)0[...

Depuis [Pythongroupe de discussion] 2017-04-18 10:00:11 0  2  852

python中字符串的按位或怎么实现？

a="1000111000"b="1000000001"ab为字符串 a或b得到1000111001 除了一位一位的处理，有没有什么方便的方法

Depuis [Pythongroupe de discussion] 2017-04-17 17:44:08 0  1  852

python - Scrapy 爬虫的时候只能抓取到页面的一条数据，请教不知道是不是网站做了反爬虫的手段？

我爬虫的目标网址是http://jobs.monster.com/search/software_5想要保存这个网站上每一条工作的标题、链接、公司和发布时间 我自己检查的时候用sites = hxs.select('//...

Depuis [Pythongroupe de discussion] 2017-04-17 16:38:11 0  1  852

python - 为什么用requests库能爬取而用scrapy却不能?

{代码...} {代码...} 代码如上,为什么requests能返回网页内容,而scrapy却是报错内部服务器错误500? 请大神解救??

Depuis [Pythongroupe de discussion] 2017-04-18 10:23:16 0  1  851

python - 怎样在路由器上面安装ss服务端

不是要路由器上跑 ss 客户端，而是服务端，路由器是8m flash，32m内存，路由是ddwrt系统。 说说我的目的，我家的网是小区宽带，当然没有公网ip，所以用路由器开vpn是行不通的。我想在ddwrt上面安装一个s...

Depuis [Pythongroupe de discussion] 2017-04-17 17:59:36 0  2  851

python - pyinotify监控cp操作-存在子目录时仅有create事件检测不到WRITE事件

我用pyinotify监控一个目录，当我用cp拷贝一个文件夹(内含多级子目录)到监控目录时，仅仅监控到create事件，我需要的IN_CLOSE_WRITE事件没有监控到， 但是如果我cp的目录没有子目录，其下仅有文件时...

Depuis [Pythongroupe de discussion] 2017-04-17 13:05:40 0  1  851

python2.7 - Comment créer des classes non fixes en utilisant Python ?

Je suis nouveau sur Python et je ne trouve pas ce que je veux rechercher. Par exemple, lisez les données d'un ...

Depuis [Pythongroupe de discussion] 2017-06-12 09:22:44 0  4  850

Lorsque Python ouvre un fichier .py, il semble que la fenêtre ne puisse pas ouvrir le fichier. Pourquoi ?

Je viens de commencer à entrer en contact avec Python, aidez-moi s'il vous plaît à y répondre ~ merci

Depuis [Pythongroupe de discussion] 2017-05-18 10:55:30 0  3  850

python爬虫 - python urllib中创建request时应直接传入post data还是在urlopen时再传入post data

文档里看到二者都可传入data，urlopen也支持request对象或者url

Depuis [Pythongroupe de discussion] 2017-04-18 10:08:38 0  1  850

python - 让requests不走系统 全局 代理

做的是wifi自动验证登录脚本。 用的是Python的requests库。 {代码...} 在当挂了代理后无法正常跳转（代理可用没坏），必须关闭代理才可以使用脚本，很不方便。 希望做到就是像firefox代理配置里那样可...

Depuis [Pythongroupe de discussion] 2017-04-18 09:50:30 0  1  850

python - pycharm 如何默认不换行

merge 代码后，一行的代码会自动换行，folding什么的更改了也不行，有谁知道怎么设置吗

Depuis [Pythongroupe de discussion] 2017-04-18 10:09:04 0  1  849

rsa - python 公钥解密时报错 block type is not 01

{代码...} 这个问题真不懂， 搜了stackoverflow也好像没有找到答案。 求高手

Depuis [Pythongroupe de discussion] 2017-04-17 13:12:44 0  1  849

python3 如何从一组字符中取出其中的一个值

从网页中抓取到了一组字符如b'{"aa":11,"bb":22,"cc":33}'如何取出aa的值

Depuis [Pythongroupe de discussion] 2016-10-22 16:34:39 0  1  849

python - Comment convertir une chaîne en dictionnaire?

Lors de la sauvegarde des données, le format devient ce mode. Il existe de nombreuses données de ce type : {&q...

Depuis [Pythongroupe de discussion] 2017-06-22 11:52:19 0  2  848