squid代理服务器
nginx也可以代理:反向代理--------负载均衡
squid:正向代理服务器。例:vpn
squid :正向代理,缓存加速,acl过滤控制
代理的工作机制
1、代替客户端向网站请求数据,不需要访问代理的IP地址。
直接请求网站,代理服务器可以请求和响应,可以隐藏真实ip
2、客户端访问目标网站之后(静态web元素)保存到缓存中,发送给客户端。下一次所有的客户机都可以使用缓存访问。加速访问速度
数据流向
squid的作用:
1、资源获取,代替客户端获取目标服务器的资源
2、加速访问,代理服务器可能与目标服务器距离更近,可以起到一起的加速作用。
3、缓存作用,代理服务器可以保存目标服务器获取的资源,客户端下次再请求目标服务器可以直接访问访问缓存即可。减轻目标服务器的压力。
4、隐藏真实的ip地址。代理服务器代替客户端请求。客户端的信息不会显示。
squid nginx
squid代理的类型:
1、传统的代理,正向代理,需要在客户
2、透明代理,客户端不再需要指定代理服务器的地址和端口,而是通过默认端上指定好代理服务器的地址和端口。而是通过默认路由来进行转发。(squid服务器,网关)
3、反向代理,在反向代理的squid服务器当中缓存了请求资源,将资源直接返回给客户端,否则,代理服务器代替客户端向web服务器发起请求,然后再把请求的资源相应给客户端,同时把响应缓存在本地,后续请求者都可以使用响应的缓存
有缓存,直接相应缓存内容;没有缓存,才会代替客户端请求web资源,响应结果保存在代理服务器,代理服务器再相应给客户端。客户端再次请求会直接右代理服务器响应
区别:
SNAT和DNAT | 代理服务器squid |
网络层 | 应用层 |
数据包(改变数据头部的源目的ip和目的ip) | 不改变数据包的任何信息,直接把数据包发给代理,代理通过应用层过滤的方式来实现转发。似路由器 |
test1 :客户端 192.168.233.10
test2: squid 192.168.2333.20 (做透明代理会需要双网卡)
web页面: nginx1 192.168.233.61
nginx2 192.168.233.62
安装 Squid 服务
systemctl stop firewalld
setenforce 0
安装依赖环境 yum -y install gcc gcc-c++ make
解压 tar -xf squid-3.5.28.tar.gz
进入解压包 cd squid-3.5.28/
./configure --prefix=/usr/local/squid \
--sysconfdir=/etc \
--enable-arp-acl \
--enable-linux-netfilter \
--enable-linux-tproxy \
--enable-async-io=100 \
--enable-err-language="Simplify_Chinese" \
--enable-underscore \
--disable-poll \
--enable-epoll \
--enable-gnuregex
make -j 6 && make install
ln -s /usr/local/squid/sbin/* /usr/local/sbin/
useradd -M -s /sbin/nologin squid
chown -R squid:squid /usr/local/squid/var/
#此目录用于存放缓存文件
注释
--sysconfdir=/etc \
配置文件路径
--enable-arp-acl \
开启acl过滤模式
--enable-linux-netfilter \
开启内核过滤
--enable-linux-tproxy \
支持透明模式
--enable-async-io=100 \
异步IO
--enable-err-language="Simplify_Chinese" \
错误信息的显示语言
--enable-underscore \
允许URL地址中含有下划线
vim /etc/squid.conf
--56行--插入
http_access allow all #放在 http_access deny all 之前,允许任意客户机使用代理服务,控制规则自上而下匹配
http_access deny all
http_port 3128 #用来指定代理服务监听的地址和端口(默认的端口号为 3128)
--61行--插入
cache_effective_user squid #添加,指定程序用户,用来设置初始化、运行时缓存的账号,否则启动不成功
cache_effective_group squid #添加,指定账号基本组
coredump_dir /usr/local/squid/var/cache/squid #指定缓存文件目录
通过端口看是否启动
netstat -antp |grep squid
检测配置文件是否正确
squid -k parse
运行过程是否正常
squid -N -d1
4.创建 Squid 服务脚本
vim /etc/init.d/squid
#!/bin/bash
#chkconfig: 2345 90 25
PID="/usr/local/squid/var/run/squid.pid"
CONF="/etc/squid.conf"
CMD="/usr/local/squid/sbin/squid"
case "$1" in
start)
netstat -natp | grep squid &> /dev/null
if [ $? -eq 0 ]
then
echo "squid is running"
else
echo "正在启动 squid..."
$CMD
fi
;;
stop)
$CMD -k kill &> /dev/null
rm -rf $PID &> /dev/null
;;
status)
[ -f $PID ] &> /dev/null
if [ $? -eq 0 ]
then
netstat -natp | grep squid
else
echo "squid is not running"
fi
;;
restart)
$0 stop &> /dev/null
echo "正在关闭 squid..."
$0 start &> /dev/null
echo "正在启动 squid..."
;;
reload)
$CMD -k reconfigure
;;
check)
$CMD -k parse
;;
*)
echo "用法:$0{start|stop|status|reload|check|restart}"
;;
esac
chmod +x /etc/init.d/squid
chkconfig --add squid
chkconfig --level 35 squid on
正向代理
实验组件部署
Squid代理服务器:192.168.233.20
web服务器:192.168.233.30
客户机:192.168.233.10
-------------Squid代理服务器----------------
vim /etc/squid.conf
......
http_access allow all
http_access deny all
http_port 3128
cache_effective_user squid
cache_effective_group squid
--63行--插入
cache_mem 2000 G
reply_body_max_size 100 MB
maximum_object_size 100 MB
service squid restart
systemctl restart squid
#生产环境中还需要修改防火墙规则
iptables -F
iptables -I INPUT -p tcp --dport 3128 -j ACCEPT
#查看 Squid 访问日志的新增记录中的缓存命中情况
tail -f /usr/local/squid/var/logs/access.log
TCP_MEM_HIT/200
TCP_REFRESH_UNMODIFIED/304: TCP_REFRESH_UNMODIFIED 表示该请求是由于缓存未过期,
直接返回未修改的响应。304 表示 HTTP 状态码为 304(未修改)。
#查看 Web 访问日志的新增记录
tail -f /var/log/httpd/access_log
在浏览器输入Web服务器IP地址访问,查看Web服务器访问日志,显示的是由代理服务器替客户机在访问。
squid -m PURGE http://192.168.233.30
#清除缓存,指定对象服务器的url.
#客户机的代理配置
打开浏览器,工具-->Internet选项-->连接-->局域网设置-->开启代理服务器(地址:Squid服务器IP地址,端口:3128)
cache_mem 2000 G
#指定缓存功能所使用的内存空间大小,便于保持访问较频繁的WEB对象,容量最好为4的倍数,单位为MB,建议设为物理内存的1/4
reply_body_max_size 100 MB
#允许用户下载的最大文件大小,以字节为单位,当下载超过指定大小的Web对象时,浏览器的报错页面中会出现“请求或访问太大”的提示默认设置0表示不进行限制
maximum_object_size 100 MB
#允许保存到缓存空间的最大对象大小,以KB为单位,超过大小限制的文件将不被缓存,而是直接转发给用户
构建透明代理服务器
还原到安装成功配置
Squid服务器:双网卡,内网ens33:192.168.233.20 外网ens36:12.0.0.254
Web 服务器:12.0.0.12
客户机:192.168.233.10
-----Squid服务器配置-----
vim /etc/squid.conf
......
http_access allow all
http_access deny all
--60行--修改添加提供内网服务的IP地址,和支持透明代理选项 transparent
#http_port 3128
http_port 192.168.233.20:3128 transparent
#之前的端口配置注释掉,重启之后会有端口冲突,记得杀掉之前的进程。
squid -k parse
squid -N -d1
systemctl restart squid
#开启路由转发,实现本机中不同网段的地址转发
echo 'net.ipv4.ip_forward = 1' >> /etc/sysctl.conf
sysctl -p
#修改防火墙规则
iptables -F
iptables -t nat -F
iptables -t nat -I PREROUTING -i ens33 -s 192.168.233.0/24 -p tcp --dport 80 -j REDIRECT --to 3128
#用于转发http协议
iptables -t nat -I PREROUTING -i ens33 -s 192.168.233.0/24 -p tcp --dport 443 -j REDIRECT --to 3128
#用于转发https协议
iptables -I INPUT -p tcp --dport 3128 -j ACCEPT
反向代理
还原到安装成功配置
如果 Squid 反向代理服务器中缓存了该请求的资源,则将该请求的资源直接返回给客户端;否则反向代理服务器将向后台的 Web 服务器请求资源,然后将请求的应答返回给客户端,同时也将该应答缓存在本地,供下一个请求者使用。
工作机制:
●缓存网页对象,减少重复请求
●将互联网请求轮训或按权重分配到内网Web服务器
●代理用户请求,避免用户直接访问Web服务器,提高安全
vim /etc/squid.conf
......
--60行--修改,插入
http_port 192.168.233.20:80 accel vhost vport
cache_peer 192.168.233.61 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web1
cache_peer 192.168.233.62 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web2
cache_peer_domain web1 web2 www.kgc.com
#表示对www.kgc.com的请求,squid向192.168.233.61和192.168.233.62的80端口发出请求
iptables -F
iptables -t nat -F
http_port 80 accel vhost vport #squid从一个缓存变成了一个Web服务器反向代理加速模式,
这个时候squid在80端口监听请求,同时和web server的请求端口(vhost vport)绑定,
这个时候请求到了squid,squid是不用转发请求的,而是直接要么从缓存中拿数据要么向绑定的端口直接请求数据。
accel :反向代理加速模式
vhost :支持域名或主机名来表示代理节点
vport :支持IP和端口来表示代理节点
parent :代表为父节点,上下关系,非平级关系
80 :代理内部web服务器的80端口
0 :没有使用icp(电信运营商),表示就一台squid服务器
no-query :不做查询操作,直接获取数据
originserver :指定是源服务器
round-robin :指定 squid 通过轮询方式将请求分发到其中一台父节点
max_conn :指定最大连接数
weight : 指定权重
name :设置别名