上兩張python抓取的圖

一跳而过 · 发表于 2011-9-25 17:59:33

原帖由 yjlml 于 2011-9-25 17:53 发表
不懂........

nyqxmfj · 发表于 2011-9-25 18:00:53

不是那個東西過幾天才會講到本來用tornado寫的但是目標機太渣死掉了。。。

wadd1231 · 发表于 2011-9-25 18:01:32

原帖由 世风日下 于 2011-9-25 17:58 发表
传说中用tornado写的爬虫?

wadd1231 · 发表于 2011-9-25 18:01:32

原帖由 世风日下 于 2011-9-25 17:58 发表
传说中用tornado写的爬虫?

geyunbing · 发表于 2011-9-25 18:06:35

提示: 作者被禁止或删除内容自动屏蔽

qiqi13245 · 发表于 2011-9-25 18:07:21

java无压力

世风日下 · 发表于 2011-9-25 18:10:14

原帖由 nyqxmfj 于 2011-9-25 18:00 发表
不是那個東西過幾天才會講到本來用tornado寫的但是目標機太渣死掉了。。。

你劝你在win下别用tornado写爬虫，你真喜欢用事件驱动的框架写爬虫，不如换twisted吧.tornado只支持epoll和kqueue，win下没性能可言的，twisted却支持iocp,另外，tornado的database是堵塞的，twisted有完备的db池

nyqxmfj · 发表于 2011-9-25 18:14:36

傻..win只是調試環境 mac用的太蛋疼了

nyqxmfj · 发表于 2011-9-25 18:16:37

twisted相比tornado確實有很多優勢但是程式碼太扭曲了每次寫完我整個人都扭曲了

jasontse · 发表于 2011-9-25 18:19:38

原帖由 世风日下 于 2011-9-25 18:10 发表

你劝你在win下别用tornado写爬虫，你真喜欢用事件驱动的框架写爬虫，不如换twisted吧.tornado只支持epoll和kqueue，win下没性能可言的，twisted却支持iocp,另外，tornado的database是堵塞的，twisted有完备的db池 ...

就爬虫的并发量来说够了

		自动登录	找回密码
密码			注册

geyunbing geyunbing 当前离线积分 5217	15^# 发表于 2011-9-25 18:06:35 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
geyunbing geyunbing 当前离线积分 5217
	回复支持反对举报

上兩張python抓取的圖

回复 10# 世风日下的帖子

评分

回复 17# 世风日下的帖子

回复 17# 世风日下的帖子

浏览过的版块

上兩張python抓取的圖

回复 10# 世风日下 的帖子

评分

回复 17# 世风日下 的帖子

回复 17# 世风日下 的帖子

浏览过的版块

回复 10# 世风日下的帖子

回复 17# 世风日下的帖子

回复 17# 世风日下的帖子