【GO】http请求代理

荒凉一梦 提交于 2019-11-28 08:03:29
package test

import (
    "fmt"
    "io/ioutil"
    "log"
    "net/http"
    "net/url"
    "testing"
)

var proxyConf = "112.195.81.161:8118"

func buildHtppClient(isProxy bool) *http.Client {
    var proxy func(*http.Request) (*url.URL, error) = nil
    if isProxy {
        proxy = func(_ *http.Request) (*url.URL, error) {
            return url.Parse("http://" + proxyConf)
        }
    }
    transport := &http.Transport{Proxy: proxy}
    client := &http.Client{Transport: transport}
    return client
}

func Test_crawler(t *testing.T) {
    url := "http://httpbin.org/get"
    client := buildHtppClient(true)

    req, err := http.NewRequest("GET", url, nil)
    if err != nil {
        log.Fatal(err)
    }

    res, err := client.Do(req)
    if err != nil {
        log.Fatal(err)
    }

    defer res.Body.Close()
    body, err := ioutil.ReadAll(res.Body)
    if err != nil {
        log.Fatal(err)
    }

    fmt.Println(string(body))

}
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!