同时抓取 10 个网站的网页,是用 multithread 还是 multiprocess?

循环10次太慢了,我想同时进行,我也知道multithread有GIL锁,所以multiprocess貌似是不错选择?
我还听说过一些其他高并发项目,如:gevent、stackless、pypy,这些和官方多进程有何区别?

6 comments