9.3 使用 adsl 代理
当前主流大站反爬虫手段越发严厉,对于自建的免费代理,以及一些知名的付费代理,一些电商网站已经拥有了相应的反制手段,要想获取这些网站的数据,就需要一些其他手段,比如构建 ADSL 爬虫代理。
大家可能对ADSL比较陌生,ADSL全称叫做Asymmetric Digital Subscriber Line,非对称数字用户环路,因为它的上行和下行带宽不对称。它采用频分复用技术把普通的电话线分成了电话、上行和下行三个相对独立的信道,从而避免了相互之间的干扰。
同时,有种主机叫做动态拨号VPS主机,这种主机在连接上网的时候是需要拨号的,只有拨号成功后才可以上网。我们知道,在家庭网络中宽带上网只要断开再拨号一次,链接成功就会更换一次外网ip。并且链接建立后网速比较稳定。这就是动态ip了,一般这个ip池很大,一个城市一般会有5W-30W的ip。基本属于用不完。
所以我们这里就简单地介绍一下通过使用 ADSL 拨号技术来获取动态代理的相关知识点。