最新资讯发布日期:2021-02-18
爬虫爬的过快被封IP,想用几个阿里或腾讯或百度的学活力,整几个稳定的代理IP,用免费代理的话可能大局部时间被用来测试这些代理能否有效,能够的话,还是本人整几个稳定IP比拟温馨,因此想自行搭建http代理服务器的话,可以继续往下看内容。
第一种方式:
使用的是Squid+Stunnel的方案,提供带有认证的HTTPS代理服务。一方面可以防止因为明文传输被发现而拦截,另一方面可以防止其他人恶意使用来攻击其他站点。
虽然用Nginx搭代理很方便,但是Nginx不能代理HTTPS的站点,而目前很多常用的站点以及一些CDN,比如Google、Twitter、Youtube、gstatic、cloudflare,都已经全站HTTPS了,所以有很多网站是访问不了的。
第二种方式:
用nginx
server {
resolver 10.02.2.8;
resolver_timeout 5s;
listen 0.0.0.0:8628;
access_log /home/wwwlogs/access_proxy.log;
error_log /home/wwwlogs/access_proxy_error.log;
location / {
proxy_pass $scheme://$host$request_uri;
proxy_set_header Host $http_host;
proxy_buffers 256 4k;
proxy_max_temp_file_size 0;
proxy_connect_timeout 30;
proxy_cache_valid 200 302 10m;
proxy_cache_valid 301 1h;
proxy_cache_valid any 1m;
}
}
大家如果对搭建http代理服务器感兴趣的话,不妨试试以上的方式,帮助大家解决问题哦~
专属客服竭诚为您服务