伪装ip是做爬虫比较常见也比较重要的一步。
本文记录centos7.6拨号搭建代理ip服务器的过程。

一、购买拨号服务器。
在服务器测试拨号是否正常用到下面两个命令
pppoe-start
pppoe-stop
如果拨号不正常则需要配置 pppoe-setup 具体步骤自查。

二、部署
首先安装tinyproxy
执行命令 yum -y install tinyproxy
找不到安装包的时候可以装一下epel。
安装 yum install epel-release

安装完成编辑tinyproxy的配置文件
vi /etc/tinyproxy/tinyproxy.conf
主要是更改端口号和修改允许连接代理的ip。默认只允许本地。
找到"Allow"字样,注释掉,允许所有ip连接。或者写自己服务器的ip

配置好了启动 :systemctl start tinyproxy.service
把设置的端口号在防火墙开放
firewall-cmd --zone=public --add-port=端口/tcp --permanent
firewall-cmd --reload

检测ip是否可用

然后把ip和配置端口放到爬虫程序中测试或者在其他服务器用curl加代理访问看效果。
测试没问题直接写个shell脚本定时拨号刷ip 基本就OK,具体看业务情况配置使用。

vps搭建代理ip服务相关推荐

  1. 什么是vps?vps和代理ip的本质区别?

    什么是vps? vps就是虚拟专用服务器,可以在现有服务器上虚拟运行.像任何虚拟机一样是独立于其主机并作为独立实体运营的,但是无法脱离主机单独存在的.在容器或者虚拟机中,每个vps都可选配独立公网ip ...

  2. Python搭建代理IP池(一)- 获取 IP

    使用爬虫时,大部分网站都有一定的反爬措施,有些网站会限制每个 IP 的访问速度或访问次数,超出了它的限制你的 IP 就会被封掉.对于访问速度的处理比较简单,只要间隔一段时间爬取一次就行了,避免频繁访问 ...

  3. 搭建代理IP池的方法

    突破次数的限制就可以使爬虫更高效的工作,代理IP是突破次数限制,提高爬虫高效工作的最好的工具.所以,很多人都想通过建立IP池的方法,实现换IP突破限制,那么这IP池如何进行搭建呢? 一,免费搭建代理I ...

  4. 利用多线程爬虫搭建代理ip池的两种方法(含源码)

    搭建爬虫代理ip池的两种方法(含源码) 前言 一.ip池是什么? 二.爬取原理 三.使用步骤 方法一 爬取网站https://www.kuaidaili.com/ 验证 存取到mysql 方法二 爬取 ...

  5. 国内整C多IP服务器怎么搭建代理IP,又怎么区分代理IP呢

    ip是上网需要唯一的身份地址代表,而代理ip就是我们上网过程中的一个中间待运行的平台,是由你的电脑先访问这个代理ip,之后再由这个代理ip访问你点开的页面,所要的效果媒介,所以在这个页面的访问记录里留 ...

  6. Python搭建代理IP池(三)- 检测 IP

    在获取 IP 时,已经成功将各个网站的代理 IP 获取下来了,然后就需要一个检测模块来对所有的代理进行一轮轮的检测,检测可用就设置为满分,不可用分数就减 1,这样就可以实时改变每个代理的可用情况,在获 ...

  7. Python搭建代理IP池(二)- 存储 IP

    上一文写了如何从代理服务网站提取 IP,本文就讲解如何存储 IP,毕竟代理池还是要有一定量的 IP 数量才行.存储的方式有很多,直接一点的可以放在一个文本文件中,但操作起来不太灵活,而我选择的是 My ...

  8. 什么是HTTP代理池,如何搭建代理IP池?

    在爬虫采集数据的时候,我们通常会说到一个问题:要有足够大的IP池子,很多HTTP代理厂商也会强调自己的IP池子是几百万/几千万级别的,那对于爬虫小白来说,代理IP池子到底是什么呢? 简单来说,你可以把 ...

  9. Python之爬虫 搭建代理ip池

    文章目录 前言 一.User-Agent 二.发送请求 三.解析数据 四.构建ip代理池,检测ip是否可用 五.完整代码 总结 前言 在使用爬虫的时候,很多网站都有一定的反爬措施,甚至在爬取大量的数据 ...

最新文章

  1. AI科学家王怀清:机器视觉识别领域 或将出现AI独角兽
  2. Django--Uploaded Files以及Handlers
  3. java int 传引用吗_Java的参数传递是「值传递」还是「引用传递」?
  4. Vue3---安装Element-Plus组件库
  5. html5 worker的使用场景
  6. Python内置模块---random
  7. 《如何搭建小微企业风控模型》第一节 小微企业数据贷发展情况概述
  8. [转载] python numpy 子数组_Python学习笔记3:Numpy入门
  9. 编程之美 4.7蚂蚁爬杆
  10. MinIO之C#上传文件等各项操作
  11. 批量修改文件夹及文件用户权限和用户组权限 centos
  12. 260道网络安全工程师面试题(附答案)
  13. 图书资源下载网站推荐
  14. 虚拟机连接摄像头程序报错
  15. 【python】pycharts画关联图
  16. 计算机机房管理员需要学什么,机房管理员工作内容
  17. R语言ggplot2可视化:使用ggpubr包的arrangeGrob函数将多个可视化结果整合为gtable对象、使用as_ggplot函数将gtable对象转化为ggplot对象
  18. 16福师计算机应用基础在线作业,16秋福师《计算机应用基础》在线作业二答案...
  19. 作业帮、猿辅导押注的下沉市场未必是在线教育企业的好市场
  20. win10中maven的安装与配置

热门文章

  1. 打破思维断层之KMP分析 - wsc - ITeye技术网站
  2. Ubuntu 安装rpm文件
  3. 必应词典英语学习APP案例分析
  4. Server Error in ‘/‘ Application.问题解决
  5. pyspark RDD详细教程
  6. 无线井盖状态的监测及预警设备安装方式
  7. Ps如何使用透视裁剪工具
  8. wifi连接成功,但提示“无法连接到Internet”(已解决)
  9. 终端连接阿里云服务器出现Permission denied (publickey)解决方法
  10. 第四章 Caché 设计模式 代理模式