#创作者激励#OpenHarmony 3D显示支持 原创 精华

软通动力HOS
发布于 2023-2-28 14:45
浏览
9收藏

【本文正在参加2023年第一期优质创作者激励计划】

前言

OpenHarmony系统是一个非常先进,现代化设计理念的新系统
其系统架构图如下:
#创作者激励#OpenHarmony 3D显示支持-鸿蒙开发者社区

一. 图形子系统架构图

图形子系统是最复杂的一个,标准版这里2D的部分
foundation\graphic\graphic_2d\rosen\modules\render_service主要是实现了2D的显示3D的显示这里没有实现,那怎么实现3D?
3D现在还没有进入主线,那有没有实现3D的其他方式?
我们可以使用Mesa3D 编译到OpenHarmony,用OpenGL 接口来显示3D!
Mesa是开源的三维计算机图形库,以MIT许可证发行,实现了OpenGL、OpenGL ES、Vulkan、OpenCL等API。Mesa库可以使应用程序更容易的支持GPU加速功能,提升用户体验。
Mesa库编译到OpenHarmony后,我们就可以使用OpenGL了,
OpenGL(Open Graphics Library)是一组用于渲染2D、3D矢量图形的跨语言、跨平台的应用程序编程接口(API)。
它定义了渲染有关的行为和动作,但不提供具体的实现,具体实现可由各个GPU芯片厂自己实现,也可以使用开源的实现,
如 Mesa。
OpenGL ES的版本:
OpenGL ES 1.0 以 OpenGL 1.3 规范为基础
OpenGL ES 1.1 以 OpenGL 1.5 规范为基础
OpenGL ES 2.0 以 OpenGL 2.0 规范为基础
OpenGL ES 3.0 在 OpenGL 3.x 和 4.x 的基础上增加了许多新的功能。
OpenGL ES(OpenGL for Embedded Systems)是免授权费的,跨平台的,功能完善的2D和3D图形应用程序接口API。它针对多种嵌入式系统专门设计。它可以认为是OpenGL的一个子集、可以应用于嵌入式设备上。
这样,我们在OpenHarmony里边可以使用Mesa3D,可以用OpenGL ES 接口在OpenHarmony里写3d的程序或者游戏!
#创作者激励#OpenHarmony 3D显示支持-鸿蒙开发者社区
RenderService新框架主要分为
接口层:为ArkUI应用提供的图形Native API能力。
框架层:图形子系统核心框架。
引擎层:提供底层图形库和适配能力。

二.Mesa 3D 介绍

Mesa 3D 是一个在 MIT 许可证下开放源代码的三维计算机图形库,以开源形式实现了 OpenGL 的应用程序接口,是一个几乎和 OpenGL 相同的免费开源图形 API,它在功能上一点也不输给 OpenGL。
OpenGL 的高效实现一般依赖于显示设备厂商提供的硬件,而 Mesa 3D 是一个纯基于软件的图形应用程序接口。由于许可证的原因,它只声称是一个 “类似” 于 OpenGL 的应用程序接口。由于 Mesa 3D 的 API 是和 OpenGL 相同,具体的 OpenGL 版本浏览 Mesa 3D 官方网站,我们可以这么认为它就是 OpenGL 的软件模拟,GPU 光栅处理器的一个实现。我们知道如果要实现一个 OpenGL,其本身是一个设备器,不能实现窗体的透明,如果我想要实现窗体透明,又想要有 3D 的应用,可以试试它。
#创作者激励#OpenHarmony 3D显示支持-鸿蒙开发者社区
Mesa可以划分为前端和后端:前端包括libGL、libEGL、libgbm、libglapi等,后端为libgallium_dri。
Mesa随着时间,演进为Gallium3D架构后,可以通过Gallium模块加不同平台相关的Backend实现,进一步分割了Vendor HW driver 模块以及与平台窗口系统,使系统更加模块化。

三.集成 Mesa3D 库步骤

OpenHarmony3.1Release及之后的版本已经使用新的RenderService渲染框架替换了原来的Weston。RenderService提供了更强的2D/3D绘制能力、新的动画和显示效果框架。

Render Service新框架已经在frameworks代码中针对OpenGL接口做了封装,可以直接对接mesa库。
OpenHarmony适配Mesa3D库的步骤:

A. 编译Mesa3D库

#创作者激励#OpenHarmony 3D显示支持-鸿蒙开发者社区
OpenHarmony社区已经将Mesa库移植到了系统中,在三方库目录内,路径:third_party/mesa3d ,其中
Mesa/ohos是OpenHarmony的工程编译目录,提供了适配好的编译脚本,支持交叉编译。基于Render Service新显示框架,需要使用build_ohos.py编译脚本,build_wayland_and_gbm.py是针对旧的Weston显示框架的编译脚本,
其中的BUILD.gn 中可以看到:

  source = "gpu/libEGL.so.1.0.0"
  install_enable = true
  install_images = [ chipset_base_dir ]
  relative_install_dir = "chipsetsdk"
  subsystem_name = "xxx_products"
  part_name = “xxx_products"
  symlink_target_name = [
    "libEGL.so.1",
    "libEGL.so",
    "libGLESv1.so",
    "libEGL_impl.so",
  ]
}


必须的输出库文件有libEGL.so.1.0.0, 和需要的符号链接文件

libEGL.so.1
libEGL.so,
libGLESv1.so,
libEGL_impl.so
#cp build-ohos/install/lib/libGLESv1_CM.so.1.1.0      ../device/<…>/hardware/gpu/
#cp build-ohos/install/lib/libGLESv2.so.2.0.0      ../device/<…>/hardware/gpu/
#cp build-ohos/install/lib/libgbm.so.1.0.0      ../device/<…>/hardware/gpu/
#cp build-ohos/install/lib/libglapi.so.0.0.0      ../device/<…>/hardware/gpu/
#cp build-ohos/src/gallium/targets/dri/libgallium_dri.so      ../device/<…>/hardware/gpu/
#cp build-ohos/install/lib/dri/panfrost_dri.so          ../device/<…>/hardware/gpu/


Render Service默认会在 /vendor/lib64/chipsetsdk 目录加载第三方的OpenGL库,因此需要将上边的几个so 库拷贝到这个目录。

    constexpr const char *VENDOR_LIB_PATH = "/vendor/lib64/chipsetsdk/";
    constexpr const char *SYSTEM_LIB_PATH = "/system/lib64/";
#else
    constexpr const char *VENDOR_LIB_PATH = "/vendor/lib/chipsetsdk/";
    constexpr const char *SYSTEM_LIB_PATH = "/system/lib/";
#endif

#ifdef PRODUCT_RK3568
constexpr const char *LIB_EGL_NAME = "libEGL_impl.so";
constexpr const char *LIB_GLESV1_NAME = "libGLESv1_impl.so";
constexpr const char *LIB_GLESV2_NAME = "libGLESv2_impl.so";
constexpr const char *LIB_GLESV3_NAME = "libGLESv3_impl.so";
#else
constexpr const char *LIB_EGL_NAME = "libEGL.so.1.0.0";
constexpr const char *LIB_GLESV1_NAME = "libGLESv1_CM.so.1.1.0";
constexpr const char *LIB_GLESV2_NAME = "libGLESv2.so.2.0.0";
constexpr const char *LIB_GLESV3_NAME = "libGLESv2.so.2.0.0";
#endif
}


B. 修改graphic配置,启用GPU

在项目配置中启用GPU

vendor/…/config.json
{
      "subsystem": "graphic",
      "components": [
        {
          "component": "graphic_standard",
          "features": [
            "graphic_standard_feature_ace_enable_gpu = true",
            "graphic_standard_feature_rs_enable_eglimage = true"
          ]
        }
      ]
    },

实现Display适配代码

Display适配代码需要针对不同的硬件平台进行处理,OpenHarmony在drivers/peripheral/display/hal 内提供了小型系统和标准系统的实现样例。

针对ARM平台的L2标准系统,建议参考RK3568项目的实现:
device/soc/rockchip/rk3568/hardware/display/src
linux内核配置需要确认启用:

CONFIG_DRM_GEM_SHMEM_HELPER=y
CONFIG_DRM_SCHED=y
CONFIG_DRM_PANFROST=y

# CONFIG_DRIVERS_HDF_DISP is not set 

系统只能到OpenHarmony logo界面,不能进入launcher桌面。
CONFIG_DRM_PANFROST 是开源的arm drm驱动,Mesa库需要使用这个驱动。

测试

1 . modetest测试

输出显示信息
#./modetest
显示彩条
#./modetest -M rockchip -s 140@108:1920x1080 -P 84@108:1920x1080 -a
#创作者激励#OpenHarmony 3D显示支持-鸿蒙开发者社区

2. hellocomposer测试

#创作者激励#OpenHarmony 3D显示支持-鸿蒙开发者社区

3. render service测试

#./render_service_client_app_demo
#./render_service_client_gravity_demo
#./render_service_client_modifier_demo
#./render_service_client_rs_demo

总结

本文主要介绍了OpenHarmony上,GPU Mesa3D图形驱动相关知识,也是OpenHarmony技术峰会OS内核及视窗分论坛陈甲印所讲内容后续延申,论坛相关材料已随附件上传。

©著作权归作者所有,如需转载,请注明出处,否则将追究法律责任
DRM技术在OpenHarmony上的探索.pdf 3.55M 90次下载
已于2023-3-6 16:47:32修改
13
收藏 9
回复
举报
7条回复
按时间正序
/
按时间倒序
红叶亦知秋
红叶亦知秋

3D显示终于来了吗!

回复
2023-2-28 15:57:37
喝一大口可乐
喝一大口可乐

期待大佬能用Mesa3D做出有意思的东西

回复
2023-3-1 11:41:29
香菜太难吃了
香菜太难吃了

现在OpenHarmony想强大还是要不断引进更多的三方库

回复
2023-3-2 15:01:01
带带小老弟
带带小老弟

可惜没去会场看老师现场讲解

回复
2023-3-3 11:48:38
软通动力HOS
软通动力HOS

感谢大家的支持

回复
2023-3-3 14:34:55
软通动力HOS
软通动力HOS 回复了 喝一大口可乐
期待大佬能用Mesa3D做出有意思的东西

马上就来

回复
2023-3-3 14:35:18
wx6411bf53ede7b
wx6411bf53ede7b

请问这个有github项目吗? 刚接触鸿蒙,想起个绘制框架,绘制opengl图形,不咋会

回复
2023-3-15 21:28:26
回复
    相关推荐