浅谈HarmonyOS Glide组件的GIF能力 原创 精华
HarmonyOS Glide组件是一款非常优秀的图片处理工具,不仅支持多种格式图片的加载,而且采用磁盘缓存和内存缓存方式实现图片的预加载,同时还能指定图片缓存大小,节省内存。本文将通过介绍Glide组件的GIF能力,来解读Glide加载资源的过程。
通过以上GIF可以看到,一张网络上的GIF图片已经被成功下载,并且展示到Image控件上了。
我们到底做了什么?实际上核心的代码就只有这一段而已:
Glide.with(classcontext)
.asGif()
.load(uri)
.into(image);
虽说只有这简简单单的一段代码,但大家可能不知道的是,Glide在背后帮我们默默执行了成吨的工作。下面,我们将围绕着这段简单的代码,来解读Glide加载GIF的过程。
一、加载过程与数据转换
在开始解读Glide加载GIF的过程之前,先说明一下图片的加载过程以及图片加载过程中的数据转换,便于后面对整个过程的理解。如下所示,是GIF的加载过程:
如下所示,是GIF加载过程中的数据转换:
1、load状态传入的model类型
2、request状态获取的数据类型
3、原数据经过decoder和transcode之后的数据类型
4、transformation变换
5、animation加载动画实现
二、Glide.With()
with()方法是Glide类中的一组静态方法,用于获取RequestManager对象。Glide.with(Context)流程如下所示:
1.通过Glide.get(context)初始化Glide
2.通过GlideBuilder初始化各项配置
3.返回requestManagerRetriever对象
4.调用RequestManagerRetriever中的get方法,通过RequestManagerFactory中的build()方法创建并返回了RequestManager,用于管理Glide的请求。
三、Glide.asGif()
通过asGif()方法,规定了最后资源转化类型为 GifDrawable。如果加载的资源不是GIF,则将操作失败。
这里需要注意的是如果加载的是GIF文件,即使没有使用asGif()方法,但只要配合DraweeView使用,最终解析还是会走GIF流程。如果用户希望解析的GIF显示为一张单帧图片,那么一定要在asBitmap ()方法中声明需求,让Glide知道需要的仅仅是一张单帧图片而非GIF。
四、Glide.load()
load()方法用于创建一个目标为Drawable的图片加载请求,传入需要加载的资源(String,URL,URI等)。由于with()方法返回的是一个RequestManager对象,那么很容易就能想到,load()方法是在RequestManager类当中。通过调用asDrawable()方法,创建一个目标为Drawable的图片加载请求RequestBuilder。
load方法比较简单,流程也比较清晰,主要是保存用户传入的参数,包括load传入的model和RequestOption构建的参数都会被记录保存,用于后续构建Request使用。如下所示:
五、Glide.into()
如果说前面都是在准备开胃小菜的话,那么现在终于要进入主菜了,因为into()方法是整个Glide图片加载流程中逻辑最复杂的地方,into()方法的作用是在子线程中网络请求解析图片,并回到主线程中绘制图片。由于into()过程非常复杂,所以我们将这部分拆分为三个小节进行讲解。
1.资源加载
Into()方法从load()创建的图片加载请求RequestBuilder开始。资源加载过程中,通过onSizeReady()函数获取image控件的宽和高。如果已知控件宽、高则直接进入onSizeReady函数执行后续任务。如果控件宽、高未知,则会在ViewTarget中进行监听回调,待控件拥有宽高之后再执行onSizeReady函数和后续任务。
进入engine.load函数后。首先通过loadFromMemory()函数,加载activeResource中的缓存资源,如果activeResource没有找到资源,则会通过loadFromLruCache()方法,到LruCache缓存中寻找资源。
如果通过以上方法都没有找到缓存资源,则会开启新的任务进行加载。在waitForExistingOrStartNewJob()方法中创建EngineJob和DecodeJob,然后通过EngineJob执行DecodeJob,解析任务。如下图所示:
2.资源解析
完成资源加载之后,Glide会进入资源解析,通过decodeResourceWithList()方法获取对应的解析器。代码如下所示
private Resource<ResourceType> decodeResourceWithList( DataRewinder<DataType> rewinder,int width,int height,Options options,List<Throwable> exceptions) throws GlideException {
Resource<ResourceType> result = null;
for (int i = 0, size = decoders.size(); i < size; i++) {
// 循环去获取对应的解析器
ResourceDecoder<DataType, ResourceType> decoder = decoders.get(i);
try {
DataType data = rewinder.rewindAndGet();
if (decoder.handles(data, options)) {
data = rewinder.rewindAndGet();
result = decoder.decode(data, width, height, options);
}
} catch (IOException | RuntimeException | OutOfMemoryError e) {
}
}
return result;
}
然后通过DataType、ResourceType来寻找具体实现类,发现byteBufferGifDecoder的decode才是真正的执行者。
/* GIFs */
.append(
Registry.BUCKET_GIF,
InputStream.class,
GifDrawable.class,
new StreamGifDecoder(imageHeaderParsers, byteBufferGifDecoder, arrayPool))
ByteBufferGifDecoder byteBufferGifDecoder =
new ByteBufferGifDecoder(context, imageHeaderParsers, bitmapPool, arrayPool);
下面是ByteBufferGifDecoder的资源解析过程,解析完成后会生成一个GifDrawable回调资源。
// 生成GifDecoder GIF的解析工作是GifDecoder承担的
GifDecoder gifDecoder = gifDecoderFactory.build(provider, header, byteBuffer, sampleSize);
gifDecoder.setDefaultBitmapConfig(config);
gifDecoder.advance();
PixelMap firstFrame = gifDecoder.getNextFrame();
// 此处生成 gifDrawable
GifDrawable gifDrawable =
new GifDrawable(context, gifDecoder, unitTransformation, width, height, firstFrame);
return new GifDrawableResource(gifDrawable);
如果成功获取resource就执行回调通知,onResourceReady()用于将图片显示到DraweeView上。
public void onResourceReady(@NotNull Z resource, @Nullable Transition<? super Z> transition) {
if (transition == null || !transition.transition(resource, this)) {
setResourceInternal(resource);
} else {
maybeUpdateAnimatable(resource);
}
}
如果resource继承了Animatable,就会触发animatable.start()进行GIF的加载和绘制。
private void maybeUpdateAnimatable(@Nullable Z resource) {
if (resource instanceof Animatable) {
animatable = (Animatable) resource;
// GIFDrawable继承了Animatable所以接下来GIF流程查看GIFDrawable.java
animatable.start();
} else {
animatable = null;
}
}
3.GIF加载和绘制
GIF的加载和绘制就是通过将GIF解析成一张张的单帧图片,然后再将单帧图片循环不停地绘制到canvas上,从而实现动画效果。
GIF加载和绘制的序列图如下:
3.1GIF加载
Glide 加载 GIF 的原理就是将GIF 解码成多张图片进行无限轮播,每帧切换都是一次图片加载请求,当加载到新的一帧数据时会对旧的一帧数据进行清除,然后再继续下一帧数据的加载请求,以此类推。
在GIF加载和绘制的序列图中可以看到,ImageViewTarget中的onResourceReady触发onStart() =>realStart()=>startRunning()。当GIF为单张图片的时候就直接绘制。当GIF为多张图片就先加载第一张,然后注册frameLoader的回调。
private void startRunning() {
if (state.frameLoader.getFrameCount() == 1) {
invalidateSelf();
} else if (!isRunning) {
isRunning = true;
state.frameLoader.subscribe(this);
invalidateSelf();
}else{
}
}
// 注册frameLoader的回调
void subscribe(FrameCallback frameCallback) {
boolean start = callbacks.isEmpty();
callbacks.add(frameCallback);
if (start) {
start();
}
}
到这里,就是整个GIF加载的关键了,通过loadNextFrame加载GIF的下一帧。
private void loadNextFrame() {
isLoadPending = true;
// 获取解析器当前帧到下一帧的延迟时间
int delay = gifDecoder.getNextDelay();
// 获取系统当前时间+延时时间
long targetTime = SystemClock.uptimeMillis() + delay;
// 将GIF的当前帧往后+1
gifDecoder.advance();
// 创建出DelayTarget任务
next = new DelayTarget(handler, gifDecoder.getCurrentFrameIndex(), targetTime);
// 启动DelayTarget
requestBuilder.apply(signatureOf(getFrameSignature())).load(gifDecoder).into(next);
}
然后进入DelayTarget类中执行onSourceReady()方法,使用EventHandler将PixelMap的resource传到主线程上,用于定时发送解析好的资源。
public void onResourceReady(
PixelMap resource, @Nullable Transition<? super PixelMap> transition) {
this.resource = resource;
InnerEvent innerEvent = InnerEvent.get(FrameLoaderCallback.MSG_DELAY, this);
// 使用handler发送消息,此处会将解析好的资源定时发送FrameLoaderCallback
handler.sendTimingEvent(innerEvent, targetTime);
}
FrameLoaderCallback是EventHandler的实现类,用于接收EventHandler发送过来的任务,并触发onFrameReady函数。
private class FrameLoaderCallback extends EventHandler{
static final int MSG_DELAY = 1;
static final int MSG_CLEAR = 2;
@Synthetic
FrameLoaderCallback() {
super(EventRunner.getMainEventRunner());
}
@Override
protected void processEvent(InnerEvent event) {
if (event.eventId == MSG_DELAY) {
DelayTarget target = (DelayTarget) event.object
// 接收到消息,触发onFrameReady函数
onFrameReady(target);
return;
} else if (event.eventId == MSG_CLEAR) {
DelayTarget target = (DelayTarget) event.object;
requestManager.clear(target);
}
return;
}
}
当上一帧加载完成后, GifFrameLoader类中的onFrameReady(target)方法触发绘制的回调操作,然后进入加载GIF的下一帧。同时,会通过FrameLoaderCallback.MSG_CLEAR对旧的一帧数据进行清除。清除完后再次通过loadNextFrame()加载下一帧,实现了GIF循环不停去加载下一帧的这个流程,直到加载完整个GIF。
void onFrameReady(DelayTarget delayTarget) {
// 触发了 GifDrawable.java的绘制回调操作
if (delayTarget.getResource() != null) {
recycleFirstFrame();
DelayTarget previous = current;
current = delayTarget;
for (int i = callbacks.size() - 1; i >= 0; i--) {
FrameCallback cb = callbacks.get(i);
// 注册在GifFrameLoader的GifDrawable会接收onFrameReady回调通知
cb.onFrameReady();
}
if (previous != null) {
// 这里将上一个target给清理了
InnerEvent innerEvent = InnerEvent.get(FrameLoaderCallback.MSG_CLEAR, previous);
handler.sendEvent(innerEvent);
}
}
// 加载下一帧,构成了gif的循环不停的地去执行这个流程
loadNextFrame();
}
3.2GIF绘制
GIF绘制,就是将解析后的图片通过invalidateSelf()方法通知DraweeView进行重绘。
在绘制过程中invalideDraweeView通过调用GifDrawable的drawToCanvas()方法将图片绘制到Canvas上。
GifDrawable类中的onFrameReady()调用的invalidateSelf()函数用于执行绘制任务
public void onFrameReady() {
// 如果没有找到Callback的实现控件就停止绘制最后一帧
if (findCallback() == null) {
stop();
invalidateSelf();
return;
}
// 执行绘制流程
invalidateSelf();
if (getFrameIndex() == getFrameCount() - 1) {
// 循环次数计数
loopCount++;
}
// 非无限循环并且达到设置最大值停止gif
if (maxLoopCount != LOOP_FOREVER && loopCount >= maxLoopCount) {
stop();
}
}
public void invalidateSelf(){
final Callback callback = getHmCallback();
if(callback!=null){
// 这里的callback就是注册Callback函数的组件,此处是DraweeView
callback.invalidateDrawable(this);
}else{
}
}
通过调用setImageElement(((RootShapeElement) resource))方法,实现Callback接口。
protected void setResource(@Nullable Element resource) {
if(resource instanceof PixelMapElement) {
view.setPixelMap(((PixelMapElement) resource).getPixelMap());
}else if(resource instanceof RootShapeElement){
view.setImageElement(((RootShapeElement) resource));
}
}public void setImageElement(Element element) {
if(element == null){
// 如果设置的内容为null 则去刷新图片并且清空之前的东西
invalidate();
return;
}
super.setImageElement(element);
element.setCallback(this::onChange);
if(element instanceof RootShapeElement){
// 将组件注册到RootShapeElement中
((RootShapeElement) element).setHmCallback(this);
}
}
最后通过drawToCanvas()方法生成空白PixelMap交给GifDrawable绘制,并根据scaleMode()方法重新设置最后生成图像的位置。
private void init(Context context) {
setBindStateChangedListener(this);
addDrawTask(this::drawToCanvas);
setTouchEventListener(this::onTouchEvent);
}
private void drawToCanvas(Component component, Canvas canvas) {
if(getImageElement() instanceof RootShapeElement){
RootShapeElement rootShapeElement = (RootShapeElement) getImageElement();
int rw = rootShapeElement.getIntrinsicWidth();
int rh = rootShapeElement.getIntrinsicHeight();
int cw = component.getWidth();
int ch = component.getHeight();
PixelMap.InitializationOptions opts = new PixelMap.InitializationOptions();
opts.size = new Size(rw, rh);
opts.pixelFormat = PixelFormat.ARGB_8888;
opts.editable = true;
PixelMap gifmap = PixelMap.create(opts);
// 生成空白PixelMap交给GifDrawable绘制
applyDrawToCanvas(gifmap);
RectFloat src = new RectFloat(0,0,cw,ch);
// 根据scaleMode重新设置最后生成图像的位置
RectFloat dst = scaleTypeFixed(gifmap,component);
PixelMapHolder pixelMapHolder = new PixelMapHolder(gifmap);
canvas.drawPixelMapHolderRect(pixelMapHolder, src, dst, getGifDrawPaint());
}
}
private void applyDrawToCanvas(PixelMap targetBitmap){
BITMAP_DRAWABLE_LOCK.lock();
try {
Canvas canvasRootShape = new Canvas(new Texture(targetBitmap));
// 将canvas交给RootShapeElement,gifDrawable会调用RootShapeElement的drawToCanvas 进行绘制
getImageElement().drawToCanvas(canvasRootShape);
clear(canvasRootShape);
} finally {
BITMAP_DRAWABLE_LOCK.unlock();
}
}
至此,整个GIF的流程就走了一遍。
六、课题延伸
因为GIF加载过程其实是无限循环加载单张图片的过程,其实对系统的性能消耗还是非常大的。所以在使用GIF的时候,一定要坚持用完之后及时释放资源。在这里因为HarmonyOS的生命周期和Android有所不同,所以在DraweeView开放了stopGif()方法,当你的GIF不打算用之后,请务必先调用stopGif(),防止内存泄露。
重要提示:
1、目前必须配合DraweeView使用GIF。
2、如果Glide使用了生命周期较长的上下文,例如applicationContext,则在GIF页面结束时调用绘制视图的stopGif方法停止Glide,以减少资源浪费。
3.如果您想使用Glid的GIF能力,但原生Image不支持此功能,因为Image和Element是独立的,不能使用Element重绘。要支持GIF,您需要自定义Image。具体可以参考DraweeView的实现
源码地址在哪?
https://gitee.com/openharmony-tpc/glide
感谢,已更新