阿权的书房

ssh账号代理上网是很常见的，尤其是翻越障碍物的时候很实用。
ssh账号是可以登录linux系统的，如果只是上网用，那就需要最小化权限，有两个方式：

1 /bin/false



2 自定义脚本



输入字符后会退出，不会产生系统操作

相信有些服务器还是无可奈何的使用windows作为服务器，比如需要运行asp
可是要灵活rewrite和防盗链之类的，IIS可就麻烦了，一个不愿多碰的玩意
既然需要用，那就可以使用一个灵活的web服务在前面，后面放IIS，让它好好的退居二线。

一线位置的可选软件有：Nginx和apache

两者都可以提供足够的灵活性，如果还需要运行php，那不妨安装一些套件，比如：



我习惯用后者，用起来也还挺方便。

相对而言，apache的一些代理功能并非很灵活，用起来就有点复杂了。比如用正则匹配的方式条件性的进行代理，这个需要2.2.5版本以上才支持。nginx还是很不错的一个选择，代理功能非常强大，配置简洁，前端服务器的不二选择，各个大型网站都开始启用nginx，使用量风风火火的往上爬。

比如，把asp的请求放到8080端口的服务器



这个会对给proxy带来很大的灵活性，参考官方介绍：
http://httpd.apache.org/docs/current/mod/mod_proxy.html

Nginx的代理功能太完善了，我们看看proxy_redirect参数的作用。

案例说明：
要做一个html.aslibra.com的域名处理很多网站的html内容，当然是后端的服务器了，目录分析
html.zcom.com/img.aslibra.com/
html.zcom.com/css.aslibra.com/
访问的域名是该目录下的域名，那前端nginx的配置应该类似这样：



但这样访问目录时如果没有以“/”结尾，则服务器会返回301redirect：



html.aslibra.com这个域名并非公布的域名，返回给客户端是会自然产生错误的
Nginx可以很好的处理这个问题：



加一行proxy_redirect后，正常了：



就这么样就ok啦~
不过貌似不支持变量出现在地址里，这个就郁闷了，必须指定相应域名。
对于多个域名匹配的server，redirect设置不能写作'/'了，否则会用第一个域名作为redirect域名
可以写几个匹配规则：

正向代理和反向代理是forward/reverse proxy的意思，在代理功能上来讲，有一点不太一样。

举个例子：
你要去租房，你找房屋中介找房子，房屋中介找房屋的全权代理人要房子，房屋的全权代理人是由户主委托的。

这里有四个角色：
你=client
房屋中介=forword proxy
代理人=reverse proxy
户主=server

客户端访问网络如果需要指定某个代理服务器为你去获取内容，那就是正向代理
而服务器隐藏在代理服务器后面，让代理服务器作为冲锋陷阵的，那这个代理服务器就是反向代理

而squid是一个 forword/reverse proxy，两个功能兼备，一般可以作为局域网的上网缓存，此时作为正向代理。
一般服务器会让squid作为前端，那就是充当反向代理，反向代理有很多软件都可以，比如nginx、lighttpd，但他们两个一般做不了正向代理。

Nginx的代理功能很强大，主要体现在可以设置返给后端服务器的http头信息，这一点可以让我们方便的实现很多需求。

比如要做一个镜像，这个当然有可能是好事。
http://a.aslibra.com/s/main.jpg
我需要访问 http://b.aslibra.com/s/main.jpg 也是一样的内容呢？



利用缓存功能就可以了，以上例子还加上了简单破解防盗链的方法，就是加上正确的referer的头信息就可以了
upstream自己可以设定，修改了host的信息，使得相当于本地访问backend使用了要做镜像的域名。

同理，要多个域名是一样的内容是，那可以多个域名使用同样的server设定，简单的指定host值即可，不列举了。

问题示例：
网站有千万个网页文件需要存储，占用空间大约有300-400G，导致问题：
1 小文件太多，备份困难
2 空间增长很难调整
3 前端做缓存，因为object很高，效率很低，squid和lighttpd都不合适

解决方案说明：

1 nginx+memcached接口

Nginx有一个模块是可以读取memcached的数据的，可以把网页文件内容保存到memcached里面，如果数据无效，则proxy到后端，后端服务器更新此数据

2 memcachedb接口

memcachedb是新浪的一个开源项目，用硬盘作为存储空间，用的是Berkeley DB的存储引擎，memcached的协议。
有memcached的方便性，同时有高效的读写性能，没有内存作为存储空间的限制，数据永久保留，同时使用局域网的机器就可以处理并且很容易共享，不限制为本地文件，有自动的备份机制。

3 php程序管理存储

php处理memcached很容易，和前端约定相应的key即可

4 计划任务处理更新

由于memcachedb是永久保存，前端无法判断是否过期，所以需要自己制定策略删除过期的网页，以便前端获取不到而自动更新

5 magent作为memcachedb的代理接口，解决备份问题

memcachedb有备份方法，我碰到过出现无法同步的情况，magent也可以帮助解决此问题，它是为memcached设计的，但由于memcachedb使用memcached协议，所以也同样适用

解决方案配置示例：

假设www.aslibra.com/article/xxx 地址需要使用此方案，那就可以用服务器A(2)和B(3)作为memcachedb服务，可以在A(2)上跑magent，C(4)服务器是后端服务器，负责存入memcachedb数据

前端Nginx配置判断：



定义了memcachedb的upstream，有一个是backup标识的
/article/的请求会先查询memcachedb，找不到再发送到后端服务器
注意 proxy_set_header  memcached_key $memcached_key 这句，可以保持key值的一致性
对于中文出现在地址的情况很实用，后端使用$_SERVER['REQUEST_URI'] 会和 $uri 不一致

A和B缓存服务器：



如果配置主从，那可以启用magent：



C服务器配置rewrite(lighttpd)：



PHP代码参考：



删除文件：

如果有记录日志（可以是web服务器日志或者php记录的日志），可以根据保存的日志处理
需要删除的 $m->delete($key) 即可

备份请参考memcachedb的操作指南。
此解决方案适合memcached的存储方式，况且不用处理过期的问题，php可以解决过期时间
文章更新请关注本文更新：
http://www.aslibra.com/blog/post/memcachedb_cache_solution.php

参考资料：
1 Berkeley DB
2 memcachedb
3 magent
4 NginxModules
5 嵌入式数据库系统Berkeley DB
6 memcached和magent的安装
7 memcachedb的安装