如何解决nginx对gzip压缩而出现的弱ETag的问题
我正在尝试在nginx中压缩某些端点的响应体。问题在于nginx将上游应用程序生成的ETag标记为弱(以"W/"为前缀)。上游应用程序尚不支持弱ETag(spring版本<4.3)。当客户端发送弱ETag时,它将无法与应用程序计算的强ETag匹配,我看不到304状态,只有一个带有正文的200。即使应用程序具有弱ETag,管理一层中的压缩要比修改所有应用程序,升级它们并且现在启用弱标签更容易。
我正在尝试两个选项:
1.当上游服务器发送强ETag并且nginx gzip将其修改为弱ETag时,尝试使用nginx lua API将其修改回强。
2.当客户端发送弱ETag返回时,去掉弱ETag标识符("W/")并将请求转发给应用程序。
在nginx配置和lua API使用上,我一定做错了什么,未能实现这一点。这个问题是关于选项1的。
Nginx配置:
location /test/compression {
proxy_pass http://upstream_server:8080/someapi;
proxy_redirect default;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
include compression.conf;
header_filter_by_lua_block {
ngx.header["ETag"] = string.substring(ngx.header["ETag"], 2);
}
}
compression.conf
gzip on;
gzip_http_version 1.0;
gzip_proxied any;
gzip_types application/json application/octet-stream;
gzip_min_length 10000;
gzip_comp_level 7;
实际结果:nginx日志中的错误:
nginx | 2019/03/21 14:11:06 [error] 38#38: *8 failed to run header_filter_by_lua*: header_filter_by_lua:2: attempt to call field 'substring' (a nil value)
nginx | stack traceback:
nginx | header_filter_by_lua:2: in function <header_filter_by_lua:1> while reading response header from upstream, client: 127.0.0.1, server: _, request: "GET /test/compression HTTP/1.1", upstream: "http://upstream_server:8080/someapi", host: "localhost:9696"
期望结果:响应客户端的强ETag
也尝试了另一种方法,在经过此步骤后检索ETag头:nginx - read custom header from upstream server
location /test/compression {
proxy_pass http://upstream_server:8080/someapi;
proxy_redirect default;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
include compression.conf;
set $etag $upstream_http_etag
header_filter_by_lua_block {
ngx.header["ETag"] = string.substring(ngx.var.etag, 2);
}
}
同样的错误。
每当Nginx修改响应主体时(包括压缩内容),它会“削弱”ETag响应头(参见此代码搜索)。
为了防止这种情况发生,您可以禁用gzip模块( gzip off)或者如果您预先了解特定的内容类型,可以尝试排除它们。
另一个选择是有些hacky- 尝试将 Content-Encoding: identity 添加到响应头中(仅当第一次没有内容编码头时)。
我没有尝试过,但是阅读源代码,它应该可以工作:
ngx_http_gzip_filter_module.c L220:
```
如果(!conf->enable
||(r->headers_out.status!=NGX_HTTP_OK
&& r->headers_out.status!=NGX_HTTP_FORBIDDEN
&& r->headers_out.status!=NGX_HTTP_NOT_FOUND)
||(r->headers_out.content_encoding
&& r->headers_out.content_encoding->value.len)
||(r->headers_out.content_length_n!= -1
&& r->headers_out.content_length_n < conf->min_length)
|| ngx_http_test_content_type(r,&conf->types)== NULL
|| r->header_only)
{
返回ngx_http_next_header_filter(r);
}
```
- Lua 虚拟机加密load(string.dump(function)) 后执行失败问题如何解决
- 我想创建一个 Nginx 规则,禁止访问
- 如何将两个不同的lua文件合成一个 东西有点长 大佬请耐心看完 我是小白研究几天了都没搞定
- 如何在roblox studio中1:1导入真实世界的地形?
- 求解,lua_resume的第二次调用继续执行协程问题。
- 【上海普陀区】内向猫网络招募【Skynet游戏框架Lua后端程序员】
- SF爱好求教:如何用lua实现游戏内调用数据库函数实现账号密码注册?
- Lua实现网站后台开发
- LUA错误显式返回,社区常见的规约是怎么样的
- lua5.3下载库失败
- 请问如何实现文本框内容和某个网页搜索框内容连接,并把网页输出来的结果反馈到另外一个文本框上
- lua lanes多线程使用
- 一个kv数据库
- openresty 有没有比较轻量的 docker 镜像
- 想问一下,有大佬用过luacurl吗
- 在Lua执行过程中使用Load函数出现问题
- 为什么 neovim 里没有显示一些特殊字符?
- Lua比较两个表的值(不考虑键的顺序)
- 有个lua简单的项目,外包,有意者加微信 liuheng600456详谈,最好在成都
- 如何在 Visual Studio 2022 中运行 Lua 代码?

最终,我选择在客户端修改“If-None-Match”请求头。
header_filter_by_lua_block块,以便将304响应转换为弱ETag。这个解决方案对我有效。欢迎提出更好的建议。