代码爬取boss直聘得到的数据却和浏览器请求的不一样,一直解决不了,求解是什么原因啊
链接:"https://www.zhipin.com/c100010000-p100123/?page=1&ka=page-1"
有疑问加站长微信联系(非本文作者)

代码爬取boss直聘得到的数据却和浏览器请求的不一样,一直解决不了,求解是什么原因啊
链接:"https://www.zhipin.com/c100010000-p100123/?page=1&ka=page-1"
有疑问加站长微信联系(非本文作者)
入群交流(和以上内容无关):加入Go大咖交流群,或添加微信:liuxiaoyan-s 备注:入群;或加QQ群:692541889
`单行代码`
里面有数据通过 js 渲染的吧
好像是 我不知道怎么解决啊
了解一下无头浏览器 headless browser
https://developers.google.com/web/updates/2017/04/headless-chrome
https://github.com/chromedp/chromedp
好的 下午看 多谢了😊
能否简单演示下 我看了半天没理解😓
抓包啊,不是返回了很多json吗,应该有你想要的东西
要获取完整的页面 要抓包 怎么操作啊 求教
pc网页用浏览器的调试功能,看network下面的请求,有些url就是获取的结构化数据。还有可以用charles抓app的对应页面的接口。
谢谢各位的回复 我用chromedp解决了
parent, cancel := chromedp.NewExecAllocator(context.Background(), chromedp.ExecPath(
C:\Users\Administrator\AppData\Local\Google\Chrome\Application\chrome.exe
)) defer cancel()