02月23, 2019

网站服务性能优化实践

首先这里的服务性能优化不是指代码层面,也不是规范相关,只是对于网站运行的服务、请求、响应做的一些优化。当然这里的优化是我个人理解的,很可能事倍功半。

由于我多年(2005)前看过了 @心梦无痕 的【七界传说】,至今也在追他的【神武天帝】小说,更新频率是每天下午更新两章,而在看小说时的体验可为是极差,很多小说站都会有一个透明蒙层的广告,并且还把一章分成了多页以来提高 PV 量,但想看时还不得不点。于是很早我就想搞个小说站,正好手里有一个 xiaoshuo.io 域名,再结合我的服务已经 使用 Docker 部署 了,正好拿这个小说站练习下优化。

后端程序

使用的 DedeCMS 扩展的小说整站程序,出自 http://669977.net/ ,不过介于一些隐私就不多说了。总之就是一整套完整的代码,但也正因为很完整,要照顾到很多情况,而我显然得改一些代码。

SSL + DNS

这不用说,必须得 HTTPS + STS + HTTP2 ,使用 ACME Docker 自动生成证书。这里提醒下,大家在购买域名时,尽量在知名的IDC 购买,因为知名的 IDC 服务稳定、接口全(你懂的)。

再配上 DNS CAA 、TLSv1.3 、OCSP、SCT 等一系列"高科技",啦啦啦~

删除冗余代码

广告肯定得没有的,删除广告请求代码、用户中心,还有很重要的一点:静态化功能删除,即使已经有 PHP 隔x分钟自动生成,但我可以用别的缓存代替静态化。

Nginx http-concat

本身网站会加载好几个样式文件、脚本文件,二话不说安装上 nginx-http-concat 模块,直接合并上。

浏览器缓存

缓存肯定是少不了的,做出以下规则:

  • 默认页面(主要是后端输出文件) - 缓存10分钟
  • 静态文件(/uploads/templets)- 缓存最大,但没有文件名指纹,修改后需要手动加小戳戳
  • 后台页面 - 不缓存

这里有个坑,因为 Nginx 的 add_header 指令会向上继承,但如果同级作用域中有该指令,则不会向上继承,如:

server {
 add_header 'key1' 'val';
 location / {
 add_header 'key2' 'val';
 if ($uri ~* ^/admin/) {
 add_header 'key3' 'val';
 }
 }
}

以上规则在命中 ^/admin/ 时只会添加一个 key3 ,而没有命中时只会添加一个 key2 ,为此我把各个子功能拆成独立的 .conf 文件,在合适的地方直接 include ,如:

server {
 # 默认安全、性能、缓存10分钟
 include inc/sts.conf;
 include inc/security.conf;
 include vhost/xiaoshuo.io/cache-small.conf;
 # 合并+最大缓存
 location ^~ /templets/tpl/js/ {
 include inc/sts.conf;
 include inc/security.conf;
 include vhost/xiaoshuo.io/cache-max.conf;
 }
 # 支持 jpg、png -> webp
 location ~* \.(jpg|png|meibanfawojiuxiangchangdianyirangquanzhongdadian)$ {
 include inc/sts.conf;
 include inc/security.conf;
 include vhost/xiaoshuo.io/cache-max.conf;
 }
 location ~* \.webp$ {
 include inc/sts.conf;
 include inc/security.conf;
 include vhost/xiaoshuo.io/cache-max.conf;
 try_files $uri $uri/ @webp;
 }
}

Response Headers

cache-control: public, max-age=315360000, no-transform, no-siteapp
strict-transport-security: max-age=31536000; includeSubDomains; preload
x-content-type-options: nosniff
x-dns-prefetch-control: on
x-frame-options: SAMEORIGIN
x-xss-protection: 1; mode=block

注意:添加了不转码的响应头。

Gzip -> Brotli

对网站添加了 Nginx Brotli 压缩 ,在不支持的情况时会自动降级成 Gzip 。

PNG, JPG -> WebP

之前在bd时研究过下,但没有很深入,而很多 CDN 是支持自动识别浏览器支持情况,一般套路:

  1. 判断浏览器 Request Headers accept 是否包含 image/webp 字段,但记忆中这个字段可能不稳,@吴胖 也曾验证过。
  2. 前端脚本设置一个真实的 Base64 WebP 图片,成功时写入 Cookie ,服务器根据 Cookie 标识返回不同的图片。

而图片转换又有在线不存在时生成、离线转存,而使用了 Cookie + 在线生成,Nginx 配置大概如:

location ~* \.(jpg|png|meibanfawojiuxiangchangdianyirangquanzhongdadian)$ {
 if ($cookie_webp = '1') {
 rewrite ^/(.*)$ /1ドル.webp last;
 }
}
location ~* \.webp$ {
 try_files $uri $uri/ @webp;
}
location @webp {
 content_by_lua_file 'lua/webp.lua';
}

浏览器端检查 WebP 支持脚本:

;(function (Cookies) {
 if (Cookies.get('webp') === undefined) {
 var check = new Image();
 var opts = {
 secure: location.protocol === 'https',
 expires: 365,
 };
 check.onload = function () {
 Cookies.set('webp', 1, opts);
 };
 check.onerror = function () {
 Cookies.set('webp', 0, opts);
 };
 check.src = 'data:image/webp;base64,UklGRjIAAABXRUJQVlA4ICYAAACyAgCdASoCAAEALmk0mk0iIiIiIgBoSygABc6zbAAA/v56QAAAAA==';
 }
})(window.Cookies);

以上配置后,当浏览器打开后检测到支持 WebP ,Nginx 会优先读取对应 $uri.webp 文件,如果不存在,则交给 Lua 处理,Lua 会调用 cwebp 命令自动生成,并返回。

无缓存转换前:

无缓存转换后:

可以看出由之前的 2.3m 降到了 600kb ,还是很不错的。

Nginx FastCGI Cache

由于除了静态文件外其他页面大多数是由 Nginx FastCGI 转发到 php-fpm ,由于 PHP 处理需要时间,而对于静态文件可以直接返回,那么在 FastCGI 添加一层缓存:

  • 默认缓存5分钟
  • GET 参数中存在 nocache=1 则不缓存
  • POST 请求不缓存
  • PHP 500 错误时使用缓存响应
  • 对于时效性高的 PHP 文件不缓存

缓存前:

可以看大量的时间浪费在了服务端处理,而文件下载时间很短。

缓存后:

由之前的 390ms 降低到了 112ms ,完美。


当然,你可能会说直接上 PageSpeed ,但重在过程嘛~

robots.txt

由于有之前发现很多国外的爬虫会抓页面的经验,为了减小压力直接修改 robots.txt :

# xiaowu
User-agent: Baiduspider
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: Sosospider
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: sogou spider
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: Googlebot
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: Bingbot
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: MSNBot
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: googlebot-mobile
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: 360Spider
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: HaosouSpider
Allow: /
Disallow: /admin/
Disallow: /*.php$
User-agent: *
Disallow: /

链接

本文链接:https://xuexb.com/post/xiaoshuo.html

-- EOF --

发表于 2019年02月23日 20:48:39 ,添加在分类 后端技术 下 ,并被添加「 nginx webp 」标签 ,最后修改于 2019年03月08日 11:46:42

提醒: 本文最后更新于 2497 天前,文中所描述的信息可能已发生改变,请谨慎使用。

Comments

评论加载中...

注:如果长时间无法加载,请针对 disq.us | disquscdn.com | disqus.com 启用代理。

AltStyle によって変換されたページ (->オリジナル) /