Go 爬虫软件,Pholcus 0.6.1 发布

jopen 9年前

Pholcus(幽灵蛛)是一款纯Go语言编写的重量级爬虫软件,清新的GUI界面,优雅的爬虫规则、可控的高并发、任意的批量任务、多种输出方式、大量Demo,支持横纵向两种抓取模式,支持模拟登录和任务取消等,并且考虑了支持分布式布局。

Pholcus 0.6.1 发布,更新内容如下:

  1. 调整spider结构体,规范命名,精简方法;

  2. 拓展Teleport Socket API;

  3. 新增大量采集规则实例;

  4. 解放规则库,用户可以自由指定规则库;

  5. 不再直接提供main包,用户可以创建自己的项目。

更多信息及下载页面请点这里