V2EX › Ewig 的所有回复 › 第 7 页 / 共 7 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4 5 6 7

❮

❯

2018-10-30 01:03:25 +08:00

回复了 Ewig 创建的主题 › Python › scrapy 框架是单线程执行的 twisted？

@owenliang 那我理解的没错

2018-10-29 13:58:14 +08:00

回复了 Ewig 创建的主题 › Python › scrapy 框架是单线程执行的 twisted？

@owenliang 那就是单线程了，

2018-10-23 10:18:13 +08:00

回复了 Ewig 创建的主题 › Python › 爬虫拉勾网的反爬

@ppi 你发的这是啥意思

2018-10-22 17:23:19 +08:00

回复了 Ewig 创建的主题 › Python › 爬虫拉勾网的反爬

@wersonliu9527 我用本地 ip 会 302 跳转验证码这是咋回事

2018-10-22 11:53:01 +08:00

回复了 Ewig 创建的主题 › Python › 爬虫拉勾网的反爬

@PulpFunction 我知道有反爬，所以才来问大家最近有人爬过没有

2018-10-12 17:31:35 +08:00

回复了 Ewig 创建的主题 › Python › mongodb 在 scrapy 如何去重，然后下载管道如何管理

@picone db.XiaoMiQuan.find()
{ "_id" : ObjectId("5bbf14dbc96b5b3f5627d11d"), "file_url" : "https://baogaocos.seedsufe.com/2018/07/19/doc_1532004923556.pdf", "name" : "AMCHAM-中国的“一带一路”：对美国企业的影响（英文）-2018.6-8 页.pdf" }我现在是这样写的
这是对的？

2018-10-12 12:29:00 +08:00

回复了 Ewig 创建的主题 › Python › mongodb 在 scrapy 如何去重，然后下载管道如何管理

@picone 你的是联合键吗？我说的是 url 和 name 一起

2018-10-09 15:02:56 +08:00

回复了 Ewig 创建的主题 › Python › 请问一下 scrapy 想让框架默认 python3 是这样写吗？

@wlsnx 这个我用过的,挺麻烦的

1 2 3 4 5 6 7

❮

❯