数字媒体技术1-wangronggang
视频信号
人眼视觉系统;三原色之合;(eg显示器,荧光粉CRT,滤色片LCD,三个分量单独分光,不用滤波器,省电OLED,四基色显示RGBW,W可以使得屏幕更亮,节约电源。)
表示:
RGB(0,0,0),单个8bit,一个彩色图像24bit—算数据量的
YUV 加权平均 色差 R,G,B-Y;(彩色信号兼容黑白信号,只留Y)
RGB--->YUV--->RGB (YUV中Y分量和原图纹理一样,Cb,Cr不一样与彩色图像不限行相关)
色度下的采样格式:色度和亮度分开,人眼对于色度不敏感,可以降低一下精度(降采样)4:2:0;这种格式中每个像素点48/4=12bit表示。eg电视中是420 eg电影院444
场景变化、连续。
采样点足够秘籍,会脑补一下连续的画面信号-图像。
奈奎斯特采样定律;变化越快的频率高,变化慢的频率低,高于变化频率的两倍可以转化为频率离散的信号。同样能够通过滤波器恢复连续的图像。
表示(t,x,y,r,g,b)
时域分辨率、帧率(电影24fps,液晶显示器60hz);空间分辨率,显示尺寸和码率。(高清720p-1280*720p,1080p-1920*1080p)
超高清4k(3840*2160)8k(7680*4320);位深度(对比度)10bit/12bit;120fps(没有4k节目);音频(22.2声道,现在电影院7.1声道)
视频信号采集
小孔成像,相机凸透镜成像CCD,CMOS价格便宜。
研究问题
CMOS按行读取像素,每一行图像采集的时间有微小差别,由直变弯
低光照条件下噪声;
多幅图像平均(时域滤波);
空域滤波高斯滤波(邻域平均离得近权重大,离得远权重小),
双边滤波(邻域值相差越大的话,背景权重低,挽回了一些纹理)
色度失真yuv滤波
运动模糊motion blur;曝光(信息累积过程)
视频抖动
模拟数字信号
帧(奇偶奇偶。。。),场(分为两个部分,第一时刻只奇数,第二时刻只偶数,相同扫描频率下,提高帧率)
彩色电视制式:NTSC,PAL,SECAM
Digitizing=采样+量化
采样精度(实数—>整数),逐行扫描P,隔行扫描i(场)
格式format数据量计算
y size;color sampling;frame rate;raw data rate(计算) 720p 265mbps(现实中小于2M)
HDTV MPEG DVD
格式转换,
去交织,i—>p
tearing锯齿效应;场合并,空域插值
运动自适应、边界自适应
帧率上采样
frame size conversation