OpenHarmony 图形子系统(二)weston compositor分析 原创 精华

新大陆_Tagore
发布于 2022-1-18 11:17
浏览
7收藏

通过上一节,我们熟悉了基于 Linux DRM的基础显示平台,以及wayland 相关的几个基础概念。这节我们将对搭建在其上的 weston compositor 进行深入分析。

Weston 是基于Wayland 协议的 compositor 的参考实现。其它的实现比如 GNOME 和KDE 也默认提供了基于Wayland display server 协议建立的全功能桌面环境。OpenHarmony 标准系统目前采用的是weston 的实现。

了解weston compositor 有利于我们对OpenHarmony 图形子系统的移植适配及启动问题进行调试。

Weston 结构分析

下图是 OpenHarmony-3.0-LTS 版本的图形子系统 compositor server端的结构图。

OpenHarmony 图形子系统(二)weston compositor分析-鸿蒙开发者社区
compositor 上端通过 wayland 协议与client 进行通讯。

server 端除了 weston外,还加载了窗口管理服务(wmserver)模块和 vsync 模块。另外加载了一个 ivi-shell 模块,这个我们后面在分析client 端 WindowManager 时再说。

weston 下端依赖几个display hdi 层相关的库:

  • libdisplay_gfx 实现图形的硬件加速接口。
  • libdisplay_gralloc:负责显示模块内存的管理,包括内存的申请和释放、内存映射等操作。

drm backend 中 renderer模块通过 use_pixman 选项选择使用 pixman renderer 还是 egl。 egl 是 rendering API(如 OpenGL,OpenGL ES) 与底层原生平台窗口系统之间的接口。

pixman-render 中又通过 use_tde 变量来选择是否使用 tde 硬件加速模块。 TDE(Two Dimensional Engine)是海思的2D图形加速引擎。Rockchip 对应的叫 RGA (Raster Graphic Acceleration) 二维光栅图形加速单元,用来加速了二维图形操作。例如点/线绘制、图像缩放、旋转、位图、图像合成等。

目前 3.0-LTS 若是其它非海思平台,若检测不到tde 模块,则会默认使用 pixman 来进行软件渲染。

关于Wayland

要知道 wayland 协议是被设计成”异步的面向对象“(asynchronous object-oriented protocol)的协议。面向对象(Object-oriented)表示 compositor 所提供的服务是以一系列贮存在同一个compositor 中的对象的方式呈现。

各个对象实现了一个接口(interface),接口有名字、若干的方法(request)及系列相关的events。接口协议可以在xml 文件中描述,编译时有脚本可将其自动生成C 代码(wayland_standard/wayland_scanner_wrapper.py)。

客户端可以给对象发送请求,如果对象的接口支持这个请求的话。

compositor 中有一些wayland 的核心接口(core interfaces) 是必须要具备的,定义在 wayland_standard/protocol/wayland.xml中。此外特定的compositor 可以实现它们自己的接口作为扩展协议。每个接口协议都有版本号,以保证版本的兼容性。

知道上面的前置知识后,我们就可以开始分析weston 的代码了。

weston 启动流程伪代码

weston 启动流程比较长,我们只挑出我们感兴趣的主干部分。整理一下流程,有助于后续调试的时候迅速回忆起看过的代码。

wet_main(args)
	weston_display_create()  //创建 display 对象
	load_configuration(&config) //根据启动参数,加载配置文件 weston.ini 中的配置
	weston_compositor_create()  //创建 compositor 实例
	load_backend()  //根据启动参数-b,显式加载后端显示接口 drm-backend.so
		WL_EXPORT weston_backend_init() //显示后端drm-bakcend.so 初始化入口
			drm_backend_create()
			if use_pixman:
				init_pixman()  //根据启动参数 use_pixman, 在renderer pixman 或者 egl 二选一
					pixman_render_init()  
						tde_renderer_alloc_hook()    
							tde_render_gfx_init()
								dlopen(”libdisplay_gfx.so”)    
							GrallocInitialize()    
							→ peripheral/display “libdisplay_gralloc.so”    
			else:
				init_egl()
	VsyncModuleStart() //依赖图形子系统中的 libvsync_module.so
		InitSA() //注册ID为VSYNC_MANAGER_ID的  Vsync Manager 服务
			RegisterSystemAbility(VSYNC_MANAGER_ID)
		VsyncMainThread()
	load_modules() //加载weston.ini 里配置的 modules 项,3.0-LTS版本里加载了 libivi-controller.z.so,libwmserver.z.so 。 后面介绍 wmserver 窗口管理器模块。
	wl_display_run() //进入事件等待及常规任务循环
		while(run)
			wl_display_flush_clients()
			wl_event_loop_dispatch()

然后来梳理一下我们最关心的 surface 提交, 然后重绘(repaint)及输出流程。

surface 接口绑定及 surface commit 流程

这里就会涉及到一些接口实现的绑定。伪代码中用 (->) 箭头表示我们所关注的其中一个接口方法的实现。方法调用是当client 端发送对应的 wl_xxx 请求事件时被调用。

weston_compositor_create()
	compositor_bind() //创建 compositor 时绑定 compositor_interface 接口实现
		struct wl_compositor_interface compositor_interface //compositor 接口实现
			→compositor_create_surface //创建surface 时绑定 surface 接口实现
				struct wl_surface_interface surface_interface //surface 接口实现
					→ surface_commit()  //在 client 端调用 wl_surface_commit() 提交至此接口
						weston_surface_commit_state()
							pixman_render_attach() //若是新加入的surface 则会进行renderer attach
						weston_surface_schedule_repaint(surface)//标记 output 中 该surface 需要被 repaint

repaint 流程

当有surface 被标记成需要 repaint 时,repaint timer handler 会对这些surface 进行重绘后输出显示。

wl_event_loop //wayland 事件循环
	output_repaint_timer_handler
		backend→repaint_begin()  //开始调用后端 repaint 接口
				weston_output_repaint()
					→drm_output_repaint()
							drm_output_render() //渲染
								if use_pixman:
									drm_output_render_pixman()
											→pixman_renderer_repaint_output()
												repaint_surfaces()
													draw_view()
														repaint_region()
								else:
									drm_output_render_gl()
		drm_repaint_flush() //合成重绘后的画面刷新输出
			drm_pending_state_apply()  //kms

先更新这些,伪代码部分可以对照着源码多梳理几遍。后面将编写一个简单的client,熟悉其核心接口对象(core interfaces)。然后以其为基础分析图形子系统中如何对其进行封装适配,增加WM 窗口管理,Vsync 帧同步,内存管理等模块。

©著作权归作者所有,如需转载,请注明出处,否则将追究法律责任
已于2022-1-18 11:17:39修改
11
收藏 7
回复
举报
2条回复
按时间正序
/
按时间倒序
雪中木叶
雪中木叶

楼主有研究过  鸿蒙开源手机的系统  图形系统是基于什么来做得嘛   还是android得surfaceflinger 吗?


另外华为鸿蒙的标准系统图形子系统这块貌似没有开源Weston的代码吧

回复
2023-4-12 16:25:04
新大陆_Tagore
新大陆_Tagore 回复了 雪中木叶
楼主有研究过 鸿蒙开源手机的系统 图形系统是基于什么来做得嘛 还是android得surfaceflinger 吗?另外华为鸿蒙的标准系统图形子系统这块貌似没有开源Weston的代码吧

OpenHarmony 标准系统从3.1开始就用了 RenderService新渲染框架,weston 已经不用了。


回复
2023-4-13 14:16:59
回复
    相关推荐