最近在做一个简单测试,在公司内网实现抓取外网一个网页,但是因为公司是通一个代理服务器出去的,所以需要先通过代理服务器验证。找了好久的资料实在没找到,我用c#可以实现。主要是不知道golang下面怎么实现代理服务器的验证,代码是在网上一个关键代码如下:
func fetch(url, proxy_addr *string) (html string) {
transport := getTransportFieldURL(proxy_addr)
client := &http.Client{Transport: transport}
req, err := http.NewRequest("GET", *url, nil)
****req.SetBasicAuth("user", "pass")****
if err != nil {
log.Fatal(err.Error())
}
resp, err := client.Do(req)
if err != nil {
log.Fatal(err.Error())
}
if resp.StatusCode == 200 {
robots, err := ioutil.ReadAll(resp.Body)
resp.Body.Close()
if err != nil {
log.Fatal(err.Error())
}
html = string(robots)
} else {
html = resp.Status
}
return
}
我的LITEIDE实终提示如下:
The ISA Server requires authorization to fulfill the request. Access to the Web Proxy filter is denied
有疑问加站长微信联系(非本文作者)