nginx搭建SRS-HLS分发集群
1、NGINX Edge Cluster
NGINX边缘集群,本质上就是带有缓存的反向代理,也就是NGNIX Proxy with Cache。
只需要配置NGINX的缓存策略就可以,不需要额外插件,NGINX本身就支持:
在/etc/nginx/conf.d下新建:
vi ngins-srs-cache.conf,信息如下:
# For Proxy Cache. proxy_cache_path /tmp/nginx-cache levels=1:2 keys_zone=srs_cache:8m max_size=1000m inactive=600m; proxy_temp_path /tmp/nginx-cache/tmp; server { listen 80; server_name your.domain.com; # For Proxy Cache. proxy_cache_valid 404 10s; proxy_cache_lock on; proxy_cache_lock_age 300s; proxy_cache_lock_timeout 300s; proxy_cache_min_uses 1; location ~ /.+/.*\.(m3u8)$ { proxy_pass http://127.0.0.1:8080$request_uri; # For Proxy Cache. proxy_cache srs_cache; proxy_cache_key $scheme$proxy_host$uri$args; proxy_cache_valid 200 302 10s; } location ~ /.+/.*\.(ts)$ { proxy_pass http://127.0.0.1:8080$request_uri; # For Proxy Cache. proxy_cache srs_cache; proxy_cache_key $scheme$proxy_host$uri; proxy_cache_valid 200 302 60m; } location ~ /.+/.*\.(flv)$ { proxy_pass http://127.0.0.1:8080$request_uri; # For Proxy Cache. proxy_cache srs_cache; proxy_cache_key $scheme$proxy_host$uri; proxy_cache_valid 200 302 60m; } }
Note: 可以配置缓存的目录proxy_cache_path和proxy_temp_path,改成能访问的目录就可以。
Note: 一般不要修改location配置,除非你知道代表什么含义,要改也先跑起来了再改。
一定不能只配置成纯Proxy,这样会把负载透传到SRS,系统支持的客户端数目,还是SRS支持的数目。
开启Cache后,无论NGINX多少负载,SRS都只有一个流。这样我们可以扩展多个NGINX,实现支持非常多的观看并发了。
比如1Mbps的HLS流,1000个客户端播放NGINX,那么NGINX的带宽就是1Gbps,而SRS只有1Mbps。
如果我们扩展10个NGINX,每个NGINX是10Gbps带宽,那么整个系统的带宽是100Gbps,能支持10万并发,SRS的带宽消耗只有10Mbps。
2、NGINX Origin Server
由于HLS就是普通的文件,因此也可以直接使用NGINX作为HLS源站。
在超高并发的NGINX Edge集群中,也可以形成机房级别的小集群,从某个NGINX中集中回源,这样可以支持更高的并发。
使用NGINX分发HLS文件,其实很简单,只需要设置root就可以了:
# For HLS delivery location ~ /.+/.*\.(m3u8)$ { root /usr/local/srs/objs/nginx/html; add_header Cache-Control "public, max-age=10"; #这里我们设置了m3u8的缓存时间是10秒,需要根据切片的大小调整 } location ~ /.+/.*\.(ts)$ { root /usr/local/srs/objs/nginx/html; add_header Cache-Control "public, max-age=86400"; } location ~ /.+/.*\.(flv)$ { root /usr/local/srs/objs/nginx/html; add_header Cache-Control "public, max-age=86400"; }
3、Benchmark压测
(1)如何判断缓存有没有生效呢?可以在NGINX日志中,加入一个字段upstream_cache_status
,分析NGINX日志来判断缓存是否生效:
vi nginx.conf
user nginx; worker_processes auto; error_log /var/log/nginx/error.log notice; pid /var/run/nginx.pid; events { worker_connections 1024; } http { include /etc/nginx/mime.types; default_type application/octet-stream; log_format main '$upstream_cache_status $remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agent" "$http_x_forwarded_for"'; access_log /var/log/nginx/access.log main; sendfile on; #tcp_nopush on; keepalive_timeout 65; #gzip on; include /etc/nginx/conf.d/*.conf; }
第一个字段就是缓存状态,可以用下面的命令分析,比如只看TS文件的缓存情况:
cat /var/log/nginx/access.log | grep '.flv HTTP' | awk '{print $1}' | sort | uniq -c | sort -r
可以看到哪些是HIT缓存了,就不会从SRS下载文件,而直接从NGINX获取文件了。
也可以直接在响应头加入这个字段,这样可以在浏览器中看每个请求,是否HIT了:
add_header X-Cache-Status $upstream_cache_status;
(2)使用srs-bench压测
docker run --rm -it --network=host --name sb ossrs/srs:sb \ ./objs/sb_http_load -c 500 \ -r http://your_server_public_ipv4/live/livestream.flv 注:
1、可以压测m3u8 、rtmp
2、模拟500用户请求