aipai服务架构
概述
业务服务器30+
1、根据业务不同,有四个主入口,负责负载均衡。
2、主要是业务分离,防止宕机影响所有业务。
3、nginx反向代理,保证每个业务至少有两个服务。
redis集群12台
主要使用redis-cluster
视频集群100+
主要用作回源以及加速cdn使用,以及作为cdn出事故的备份播放。如果带宽未满,则用集群,如果超了,则额外的走cdn。
数据库5台
一主四从,binlog方式同步数据
并发
30~60万每分钟,5000~10000没秒并发
pv
千万级
大数据相关
搜索lucene的solr clond
上传视频相关
主要走七牛和金山上传,利用ffmepg转码和合并,另外拉面这边用到金山转码。
RD核心技术
基于shotcut的二次开发,开发语言是pyqt。产品有拍大师客户端,拉面上传工具,神剪辑等
爬虫相关
基于you-get开源项目的二次开发,从a,b,c站等收集信息和下载视频。
运维监控相关
基于zabbix的运维监控系统
redis监控
请求数监控,负载监控
机器性能影响负载,但是一般不能超过50。
暗夜之中,才见繁星;危机之下,暗藏转机;事在人为,为者常成。