http请求的代理大部分由C实现,目前Go实现是一种趋势。
http代理的结构和思路很简单,通过浏览器发送请求,proxy拿到浏览器的请求去请求目标地址,然后获得结果它再发送给浏览器。
也可以理解是,浏览器的代理配置了proxy ip地址,意思是发送请求,先访问proxy代理,然后把请求携带的信息交给proxy,让proxy去访问。proxy访问后会把结果返回给 最开始那个发送请求。
TCP协议下监听所有ip下的8888端口,如果只针对某一个ip,可以写成192.168.1.131:8888
var port string = "8888"
li, err := net.Listen("tcp", ":"+port)
监听所有请求,如果有请求,就打印出来。
clientData := make([] byte, 4096)
for {
client, err := li.Accept();
if err != nil {
log.Println("监听错误", err)
break
}
i++
n, err := client.Read(clientData)
log.Println("client request : ", string(clientData[:n]))
}
那么这个时候,通过火狐代理看看是不是代理监听到。
这个是代理的第一步,如果能代理到后面就由它来转发请求了。
我目前在本地测试,所以是localhost,如果你拿到别的地址下,填写相应的地址和端口即可。
全部代码
https://gitee.com/cnhellorui/mini-golang-project/blob/master/spider-golang/proxy.go