忙活了2天,不知道算不算广告,如果算的话麻烦站长删除。[点我访问][1]
周末在家练手用go写的一个笑话爬虫,主要是为孩子妈在家带孩子解闷,所以手机上看也的话,界面也还凑合。 主要使用了技术: golang mongodb mgo bootstrap beego 自己实现了一套简单的spider,包含调度器,蜘蛛,过滤器,存储器,使用了开源的goquery,以及mgo(用于连接mongodb),WEB展现为beego。
[1]: http://meijia0.com
因为我用的是阿里云,所以还不太敢抓太多。现在每天可以更新2000条笑话(包括图文),现在图片也没有抓到本地。因为空间只有20G。恐怕不太够。呵呵。
#2
更多评论