Flutter Raw Image Provider
Flutter 中的 Image Widget 内置支持 file、network、memory三种形式的文件。
但这几种都只支持常规的经过压缩后的图片文件或二进制数据,如jpg、png、webp文件等。并没有支持原始的rgba
二进制数据。
这里说的原始二进制数据是指图像的每个像素的色彩值所组成的字节数组。一张图有宽x高个像素点,一个像素点的色彩值用32bit来存储,分为4个通道,每个通道各占用8bit,分别为红、绿、蓝、透明度(RGBA),这个数组就是每个像素点色彩值的集合,dart 中一般用Uint8List
。
一般情况下,考虑网络传输效率,会采用算法来压缩这个数据,故而你会看到有各种各样的图像压缩算法和文件格式。
你可能会问什么情况下会有需要直接去加载一张图的原始rgba数据?
这里举个简单例子:分块加载图片。将图片解码后,分割成一个个矩形区域,每个矩形就有一个 raw rgba 数据,将其交给Image渲染,这样做可以降低一定的GPU 内存压力,减少出现GPU OOM 或黑屏的概率。(可以参考我的试验项目:https://github.com/yrom/image_pieces)
要支持 raw rgba ,其实很简单,在 dart:ui
包下有个方法decodeImageFromPixels
可以直接使用,前提是需要有原始的二进制数据、宽、高。
1 | import 'dart:ui'; |
有了这个 Image
(dart:ui)对象就可以交给 RawImage
Widget 来加载了。但RawImage
太过于底层了,能不能只用 Image
Widget呢?因为需要复用 LoadingBuilder
这些逻辑。
当然可以。查看一下 Image
Widget 的构造函数就知道,我们需要一个 ImageProvider
,那么问题进一步简化到如何写一个ImageProvider
支持 raw rgba 数据。
实现一个 ImageProvider
,我们需要实现 load
这个关键方法。以MemoryImage
为例:
1 | class MemoryImage extends ImageProvider<MemoryImage> { |
很显然,我们需要想一个方法构造出raw rgba 数据的 Codec
。