正向代理、反向代理

发布于:2025-03-04 ⋅ 阅读:(9) ⋅ 点赞:(0)

区别

在这里插入图片描述

  • 正向代理:代表客户端(如浏览器、爬虫)发送请求。需要在客户端主动配置代理地址。
  • 反向代理:代表服务端(如 Web 服务器)接收请求。客户端无感知,请求直接发到反向代理。

正向代理应用场景

正向代理常被用于:

  • 隐藏客户端身份:保护客户端真实 IP 或网络信息。也可以用来解决跨域问题。
  • 绕过访问限制:突破IP封锁、地域限制等(如访问某些地区的 API)。
  • 集中管控与审计:企业可通过代理监控和过滤员工的网络请求。

例子:企业内网的爬虫数据采集

比如某公司需要从公开网站抓取数据进行分析,但目标网站对同一 IP 的频繁请求有访问频率限制(例如每分钟最多 100 次请求)。直接使用公司内网的固定 IP 进行爬取,可能会因触发限制而被封禁。为此,开发团队可以部署多个正向代理服务器(如使用 Squid、Nginx 等),每个代理拥有不同的公网IP地址。然后在爬虫程序在发送请求时,通过代码逻辑轮询不同的代理服务器。例如:

import requests

proxies = [
            {"http": "http://proxy1.company.com:8080"},
            {"http": "http://proxy2.company.com:8080"},
            # ...更多代理IP
          ]

for proxy in proxies:
    response = requests.get("https://target-website.com/data", proxies=proxy)
    # 处理响应数据

这样做的好处是:目标网站看到的是代理服务器的 IP,而非公司内网的真实 IP。而且通过轮换代理IP,避免了单一 IP 被检测和封禁。

反向代理应用场景

以下是一个使用 ​Nginx 作为反向代理的典型例子,用于将客户端请求转发到后端服务器,同时隐藏后端服务器的真实 IP 地址并提供负载均衡。

假设你有两个后端 Web 服务器(IP: 192.168.1.100:8080 和 192.168.1.101:8080),但希望对外通过一个统一的域名(如 example.com)访问,同时实现以下功能:

  • 对外隐藏后端服务器的真实 IP。
  • 实现负载均衡,分摊流量到两个后端服务器。
  • 启用 SSL 加密(HTTPS)。
  • 缓存静态资源(如图片、CSS)。

就可以在 Nginx 做如下配置:

# 定义后端服务器组(负载均衡)
upstream backend_servers {
    server 192.168.1.100:8080;
    server 192.168.1.101:8080;
    # 可选:权重分配(如 server 192.168.1.100:8080 weight=3;)
}

# HTTPS 服务器配置
server {
    listen 443 ssl;
    server_name example.com;

    # SSL 证书配置
    ssl_certificate /etc/nginx/ssl/example.com.crt;
    ssl_certificate_key /etc/nginx/ssl/example.com.key;

    # 静态资源缓存配置
    location /static/ {
        proxy_cache my_cache;
        proxy_pass http://backend_servers;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        # 缓存设置
        proxy_cache_valid 200 304 12h;
        proxy_cache_valid any 5m;
    }

    # 动态请求代理配置
    location / {
        proxy_pass http://backend_servers;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header X-Forwarded-Proto $scheme;
    }
}

# 可选:HTTP 重定向到 HTTPS
server {
    listen 80;
    server_name example.com;
    return 301 https://$host$request_uri;
}

用户访问 https://example.com 时,实际由 Nginx 代理到后端服务器。流量自动分配到两个后端服务器,提升可用性和性能。