Golang通过http代理抓取页面代码

Golang通过http代理抓取页面代码,第1张

概述package mainimport ( "fmt" "io/ioutil" "net/http" "net/url")// http get by proxyfunc GetByProxy(url_addr, proxy_addr string) (*http.Response, error) { request, _ := http.NewRequest("GET", u
package mainimport (	"fmt"	"io/IoUtil"	"net/http"	"net/url")// http get by proxyfunc GetByProxy(url_addr,proxy_addr string) (*http.Response,error) {	request,_ := http.NewRequest("GET",url_addr,nil)	proxy,err := url.Parse(proxy_addr)	if err != nil {		return nil,err	}	clIEnt := &http.ClIEnt{		Transport: &http.Transport{			Proxy: http.ProxyURL(proxy),},}	return clIEnt.Do(request)}func main() {	proxy := "http://58.252.56.149:9000/"	url := "http://www.baIDu.com/"	resp,_ := GetByProxy(url,proxy)	fmt.Println(resp)	defer resp.Body.Close()	body,_ := IoUtil.ReadAll(resp.Body)	fmt.Println(string(body))}
总结

以上是内存溢出为你收集整理的Golang通过http代理抓取页面代码全部内容,希望文章能够帮你解决Golang通过http代理抓取页面代码所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/langs/1292259.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-06-10
下一篇 2022-06-10

发表评论

登录后才能评论

评论列表(0条)

保存