V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  BBrother  ›  全部回复第 21 页 / 共 21 页
回复总数  408
1 ... 12  13  14  15  16  17  18  19  20  21  
2016-08-25 12:45:35 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
@spider82 嗯,看了下 stackless ,因为我要实现的功能比较简单,我觉得 python3.5.X 的 async/await 是够用的。现在只是试着跑跑啦,感觉差不多了就多进程+代理爬数据啦。
2016-08-25 12:35:18 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
@razrlele 看了下, status_code 都是 200
2016-08-25 12:34:42 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
哇啊,大家真热情,谢谢大家!拜谢!
2016-08-25 10:52:28 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
@knightdf 残酷的现实
2016-08-25 10:42:31 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
@abxialiang 呃,这个,有什么意义吗?
2016-08-25 10:41:36 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
@kinghui 我觉得现在的代码已经异步非阻塞了啊?
2016-08-25 10:37:31 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
@fatpa 感觉没必要啊, B 站的 uid 是从 1 开始往上加的,直接切片就行了吧?
2016-08-25 10:35:36 +08:00
回复了 BBrother 创建的主题 Python 请教一个问题,怎么提高 python 爬虫的爬取效率?
@chy373180 我知道不冲突,但是我想知道协程能不能再快点,很直觉得觉得协程的效率没发挥出来。
1 ... 12  13  14  15  16  17  18  19  20  21  
关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   985 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 13ms · UTC 22:14 · PVG 06:14 · LAX 14:14 · JFK 17:14
♥ Do have faith in what you're doing.