给大家介绍一款刚刚开源的纯golang开发的强大的爬虫软件:Digger。
Digger是用纯Golang开发的配置式分布式跨平台爬虫系统,支持使用Javascript编写插件来实现各种你想要达到的目标。Digger及相关组件能够以极低的资源开销运行在各种廉价服务器和开发板上,如树莓派。
这个软件小白也能快速上手,关键是能在不写代码的情况下完成爬取任务!!
只需要配置一下即可完成目标网站的爬取,入门非常简单!
项目地址:[https://github.com/hetianyi/digger](https://github.com/hetianyi/digger)
可以在这里快速体验该项目功能:[https://demo.diggerit.me/](https://demo.diggerit.me/)
有疑问加站长微信联系(非本文作者)