知识问答
vps快速搭建国际梯子
云主机是什么?具体有什么用?VPS除了可以放眼看世界和建站的用途之外,其实可以有很多种用途。所谓的vps,全名叫小型虚拟服务器,你可以看作是一台远程电脑。这玩意功能很多,建网站,炒外汇,vps搭建梯子啥的都行。
准备
1. 前提要求爬取的站点,没有屏蔽海外IP访问,否则还是参考大神另外一篇《VPS+TinyProxy快速搭建代理》
2. 一心网络云服务器一台,香港或海外地区。建议使用国外供应商主机,我是开通最便宜的主机,需要自备梯子
部署:本代理池的搭建,Tor是必备的工具,不过要想将其作为http代理使用,还需要搭配Privoxy进行请求转换
Tor:通常在图形界面使用的是Tor(The Onion Router)浏览器,但这次是要使用Tor做代理,所以只需要安装Tor内核
安装
epel源有Tor软件
$ yum install -y epel-release
$ yum install -y tor
配置:配置文件路径 /etc/tor/torrc, 默认Tor大约每10分钟更换一次IP地址,可能无法满足要求,这里将IP更换频率改为10秒
MaxCircuitDirtiness 10
服务管理
· 启动tor
$ systemctl start tor
· 关闭tor
$ systemctl stop tor
· 测试
$ curl ip
$ torsocks curl ip
Privoxy
Tor提供的是SOCKS5代理, 但爬虫程序通常用的是http代理,需要有个工具将http请求转发到SOCKS代理,使用Privoxy可以解决该问题。
Tor默认**地址是127.0.0.0:9050 ,可以使用netstat命令查看
$ netstat -nltup |grep tor
安装:与安装Tor的方式相同
$ yum install privoxy
配置:配置文件路径 /etc/privoxy/config ,主要修改**端口、访问权限部分
#外网访问8118端口
listen-address 0.0.0.0:8118
#...
# 将http请求转发到socks5代理
forward-socks5 / 127.0.0.1:9050
#授权哪些ip,可以使用该代理,这里应该是授权给爬虫服务器
permit-access 127.0.0.1
permit-access 46.188.188.188
服务管理
· 启动privoxy
$ systemctl start privoxy
· 关闭privoxy
$ systemctl stop privoxy
· 测试
$ netstat -nltup |grep privoxy
$ curl ip
$ curl ip -x p>
不出意外,可以看到http代理成功, 现在就可以在爬虫服务器测试使用了。
海外服务器免费测试:
用vps搭梯子犯法吗
上一篇:新网站如何做到快速收录和排名