goroutine的情况如下图
起5个chromedp走一遍后的情况
上5个走完有重启5个,这样循环执行一段时间之后的情况
有一些列url需要抓取,一次启动5个chromedp分别抓5个url,这个chromedp抓取完成后会shutdown、wait、cancel,之后再重新起新的chromedp来抓剩下的...一段时间后发现内存占满了,跑了一下pprof后heap发现持续走高的为chromedp.AddTarget->handler.NewTargetHandler->client.Dial->websocket.Dialer.Dial->*Dialer.DialContext->websocket.newConn->bufio.NewReaderSize,试了试再chromedp.wait里面调用handler.conn.close()依然没有什么效果,请大神帮忙解惑一下。
有疑问加站长微信联系(非本文作者)
