希望开发的爬虫扩展性和并发性比较好。

2 收藏


直接登录
最新评论
  • 笑虎   2016/01/27

    除非你有大量的精力和时间,否则考虑到扩展性和并发性,最好使用现有成熟框架!

  • Demigod 大数据 2016/01/28

    不一定,我们的采集工具用的自己的框架

  • 龙雀 野生程序员 2016/01/28

    如果考虑扩展和并发,并且想省事那就用。

    如果不用考虑就不用。

  • 神奕 程序员 2016/01/28

    如果不想自己从头开发,那就使用框架。不过建议最好使用框架,没必要自己重复造轮子,而且还不一定造得出来。

  • duma   2016/04/03

    requests
    pyquery or bs4
    tomorrow

    上面这三个库足够你目前的项目。