android linphone中opengl显示的实现
1,java层
在界面中创建GL2JNIView(基类为GLSurfaceView)。
创建对象AndroidVideoWindowImpl,将GL2JNIView作为参数传入构造函数。在该对象中监听GL2JNIView的surface事件(mVideoRenderingView.getHolder().addCallback)。
当surface变化时(如显示窗口大小变化、activity被其他程序遮住),此时触发回调函数:
public void surfaceChanged(SurfaceHolderholder, intformat,
int width, int height)
在该函数中调用LinphoneManager.getLc().setVideoWindow(vw); 将AndroidVideoWindowImpl对象传到c代码层
C代码中对应的函数在mediastreamer2\src\android\android-opengl-display.c中android_display_set_window,
此函数中调用步骤如下:
(1) (*jenv)->CallVoidMethod(jenv,window,ad->set_opengles_display_id,ptr);
其中window为java传过来的AndroidVideoWindowImpl对象;ad->set_opengles_display_id为java 类AndroidVideoWindowImpl成员函数setOpenGLESDisplay;ptr为结构体变量opengles_display,该结构体存储yuv数据,在后面每帧显示时会用到。
(2) 将AndroidVideoWindowImpl赋值给ad->android_video_window
该函数主要完成java和c互换对象指针。这主要是由于opengl刷新每帧视频必须由java层的onDrawFrame来完成,而linphone的视频流在c层接收解码,需要由c函数来触发刷新。
2,c代码层
在android-opengl-display.c的每帧处理函数android_display_process中,
调用(*jenv)->CallVoidMethod(jenv,ad->android_video_window,ad->request_render_id);其中ad->android_video_window为setVideoWindow传过来的AndroidVideoWindowImpl对象;ad->request_render_id为java类AndroidVideoWindowImpl成员函数requestRender
该函数触发opengl刷新一帧,在java层会调用onDrawFrame。
在onDrawFrame函数中调用c代码层的render,参数为第(1)中传到java层的opengles_display结构体。
C代码层对应代码在mediastreamer2\src\utils\opengles_display.c中ogl_display_render函数,在此函数中将opengles_display中yuv数据绘制到opengl surface中。