Deferred Components-实现Flutter运行时动态下发Dart代码

2022-06-24 18:40:05 浏览数 (1)

Tech      导读 Deferred Components,官方实现的Flutter代码动态下发的方案。本文主要介绍官方方案的实现细节,探索在国内环境下使用Deferred Components,并且实现了最小验证demo。读罢本文,你就可以实现Dart文件级别代码的动态下发。

01 

引言

在今年的敏捷团队建设中,我通过Suite执行器实现了一键自动化单元测试。Juint除了Suite执行器还有哪些执行器呢?由此我的Runner探索之旅开始了!

Deferred Components是Flutter2.2推出的功能,依赖于Dart2.13新增的对Split AOT编译支持。将可以在运行时每一个可单独下载的Dart库、assets资源包称之为延迟加载组件,即Deferred Components。Flutter代码编译后,所有的业务逻辑都会打包在libapp.so一个文件里。但如果使用了延迟加载,便可以分拆为多个so文件,甚至一个Dart文件也可以编译成一个单独的so文件。

这样带来的好处是显而易见的,可以将一些不常用功能放到单独的so文件中,当用户使用时再去下载,可以大大降低安装包的大小,提高应用的下载转换率。另外,因为Flutter具备了运行时动态下发的能力,这让大家看到了实现Flutter热修复的另一种可能。截止目前来讲,官方的实现方案必须依赖Google Play,虽然也针对中国的开发者给出了不依赖Google Play的自定义方案,但是并没有给出实现细节,市面上也没有自定义实现的文章。本文会先简单介绍官方实现方案,并探究其细节,寻找自定义实现的思路,最终会实现一个最小Demo供大家参考。

02 

 官方实现方案探究  

理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目标页面展示到屏幕。

2.1 基本步骤

1.引入play core依赖。

代码语言:javascript复制
dependencies {  implementation "com.google.android.play:core:1.8.0"}

2.修改Application类的onCreate方法和attachBaseContext方法。

代码语言:javascript复制
@Overrideprotected void onCreate(){ super.onCreate()// 负责deferred components的下载与安装 PlayStoreDeferredComponentManager deferredComponentManager = new  PlayStoreDeferredComponentManager(this, null);FlutterInjector.setInstance(new FlutterInjector.Builder()    .setDeferredComponentManager(deferredComponentManager).build());}
@Overrideprotected void attachBaseContext(Context base) {    super.attachBaseContext(base);    // Emulates installation of future on demand modules using SplitCompat.    SplitCompat.install(this);}

3.修改pubspec.yaml文件。

代码语言:javascript复制
flutter:    deferred-components:

4.在flutter工程里新增box.dart和some_widgets.dart两个文件,DeferredBox就是要延迟加载的控件,本例中box.dart被称为一个加载单元,即loading_unit,每一个loading_unit对应唯一的id,一个deferred component可以包含多个加载单元。记得这个概念,后续会用到。

代码语言:javascript复制
// box.dart
import 'package:flutter/widgets.dart';
/// A simple blue 30x30 box.class DeferredBox extends StatelessWidget {  DeferredBox() {}
  @override  Widget build(BuildContext context) {    return Container(      height: 30,      width: 30,      color: Colors.blue,    );  }}
代码语言:javascript复制
import 'box.dart' deferred as box;
class SomeWidget extends StatefulWidget {  @override  _SomeWidgetState createState() => _SomeWidgetState();}
class _SomeWidgetState extends State<SomeWidget> {  Future<void> _libraryFuture;
  @override  void initState() { //只有调用了loadLibrary方法,才会去真正下载并安装deferred components.    _libraryFuture = box.loadLibrary();    super.initState();  }
  @override  Widget build(BuildContext context) {    return FutureBuilder<void>(      future: _libraryFuture,      builder: (BuildContext context, AsyncSnapshot<void> snapshot) {        if (snapshot.connectionState == ConnectionState.done) {          if (snapshot.hasError) {            return Text('Error: ${snapshot.error}');          }          return box.DeferredBox();        }        return CircularProgressIndicator();      },    );  }}

5.然后在main.dart里面新增一个跳转到SomeWidget页面的按钮。

代码语言:javascript复制
 Navigator.push(context, MaterialPageRoute(      builder: (context) {        return const SomeWidget();      },    ));

6.terminal里运行 flutter build appbundle 命令。此时,gen_snapshot不会立即去编译app,而是先运行一个验证程序,目的是验证此工程是否符合动态下发dart代码的格式,第一次构建时肯定不会成功,你只需要按照编译提示去修改即可。当全部修改完毕后,会得到最终的.aab类型的安装包。

以上便是官方实现方案的基本步骤,更多细节可以参考官方文档https://docs.flutter.dev/perf/deferred-components

2.2 本地验证

在将生成的aab安装包上传到Google Play上之前,最好先本地验证一下。

首先你需要下载bundletool,然后依次运行下列命令就可以将aab安装包装在手机上进行最终的验证了。

代码语言:javascript复制
java -jar bundletool.jar build-apks --bundle=<your_app_project_dir>/build/app/outputs/bundle/release/app-release.aab --output=<your_temp_dir>/app.apks --local-testing
java -jar bundletool.jar install-apks --apks=<your_temp_dir>/app.apks

2.3 loadLibrary()方法调用的生命周期

图1 官方实现方案介绍图(来源:https://github.com/flutter/flutter/wiki/Deferred-Components)

从官方的实现方案中可以知道,只有调用了loadLibrary方法后,才会去真正执行deferred components的下载与安装工作,现在着重看下此方法的生命周期。

调用完loadLibrary方法后,dart会在内部查询此加载单元的id,并将其一直向下传递,当到达jni层时,jni负责将此加载单元对应的deferred component的名字以及此加载单元id一块传递给PlayStoreDynamicFeatureManager,此类负责从Google Play Store服务器下载对应的Deferred Components并负责安装。安装完成后会逐层通知,最终告诉dart层,在下一帧渲染时展示动态下发的控件。

03 

 自定义实现  

理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目标页面展示到屏幕。

3.1 思路

梳理了loadLibrary方法调用的生命周期后,只需要自己实现一个类来代替PlayStoreDynamicFeatureManager的功能即可。在官方方案中具体负责完成PlayStoreDynamicFeatureManager功能的实体类是io.flutter.embedding.engine.deferredcomponents.PlayStoreDeferredComponentManager,其继承自DeferredComponentManager,分析源码得知,它最重要的两个方法是installDeferredComponent和loadDartLibrary。

  • installDeferredComponent:这个方法主要负责component的下载与安装,下载安装完成后会调用loadLibrary方法,如果是asset-only component,那么也需要调用DeferredComponentChannel.completeInstallSuccess或者DeferredComponentChannel.completeInstallError方法。
  • loadDartLibrary:主要是负责找到so文件的位置,并调用FlutterJNI dlopen命令打开so文件,你可以直接传入apk的位置,flutterJNI会直接去apk里加载so,避免处理解压apk的逻辑。

那基本思路就有了,自己实现一个实体类,继承DeferredComponentManager,实现这两个方法即可。

3.2 代码实现

本例只是最小demo实现,cpu架构采用arm64,且暂不考虑asset-only类型的component。

1.新增CustomDeferredComponentsManager类,继承DeferredComponentManager。

2.实现installDeferredComponent方法,将so文件放到外部SdCard存储里,代码负责将其拷贝到应用的私有存储中,以此来模拟网络下载过程。代码如下:

代码语言:javascript复制
@Overridepublic void installDeferredComponent(int loadingUnitId, String componentName) {    String resolvedComponentName = componentName != null ? componentName : loadingUnitIdToComponentNames.get(loadingUnitId);    if (resolvedComponentName == null) {         Log.e(TAG, "Deferred component name was null and could not be resolved from loading unit id.");         return;     }     // Handle a loading unit that is included in the base module that does not need download.     if (resolvedComponentName.equals("") && loadingUnitId > 0) {     // No need to load assets as base assets are already loaded.         loadDartLibrary(loadingUnitId, resolvedComponentName);         return;     }     //耗时操作,模拟网络请求去下载android module     new Thread(         () -> {//将so文件从外部存储移动到内部私有存储中              boolean result = moveSoToPrivateDir();              if (result) {                 //模拟网络下载,添加2秒网络延迟                 new Handler(Looper.getMainLooper()).postDelayed(                                () -> {                                    loadAssets(loadingUnitId, resolvedComponentName);                                    loadDartLibrary(loadingUnitId, resolvedComponentName);                                    if (channel != null) {                                        channel.completeInstallSuccess(resolvedComponentName);                                    }                                }                                , 2000);                 } else {                        new Handler(Looper.getMainLooper()).post(                                () -> {                                    Toast.makeText(context, "未在sd卡中找到so文件", Toast.LENGTH_LONG).show();
                                    if (channel != null) {                                        channel.completeInstallError(resolvedComponentName, "未在sd卡中找到so文件");                                    }
                                    if (flutterJNI != null) {                                        flutterJNI.deferredComponentInstallFailure(loadingUnitId, "未在sd卡中找到so文件", true);                                    }                                }                        );                  }              }        ).start();    }

3.实现loadDartLibrary方法,可以直接拷贝PlayStoreDeferredComponentManager类中的此方法,注释已加,其主要作用就是在内部私有存储中找到so文件,并调用FlutterJNI dlopen命令打开so文件。

代码语言:javascript复制
  @Override    public void loadDartLibrary(int loadingUnitId, String componentName) {        if (!verifyJNI()) {            return;        }        // Loading unit must be specified and valid to load a dart library.        //asset-only的component的unit id为-1,不需要加载so文件        if (loadingUnitId < 0) {            return;        }
        //拿到so的文件名字        String aotSharedLibraryName = loadingUnitIdToSharedLibraryNames.get(loadingUnitId);        if (aotSharedLibraryName == null) {            // If the filename is not specified, we use dart's loading unit naming convention.            aotSharedLibraryName = flutterApplicationInfo.aotSharedLibraryName   "-"   loadingUnitId   ".part.so";        }
        //拿到支持的abi格式--arm64_v8a        // Possible values: armeabi, armeabi-v7a, arm64-v8a, x86, x86_64, mips, mips64        String abi;        if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.LOLLIPOP) {            abi = Build.SUPPORTED_ABIS[0];        } else {            abi = Build.CPU_ABI;        }        String pathAbi = abi.replace("-", "_"); // abis are represented with underscores in paths.
        // TODO(garyq): Optimize this apk/file discovery process to use less i/o and be more        // performant and robust.
        // Search directly in APKs first        List<String> apkPaths = new ArrayList<>();        // If not found in APKs, we check in extracted native libs for the lib directly.        List<String> soPaths = new ArrayList<>();
        Queue<File> searchFiles = new LinkedList<>();        // Downloaded modules are stored here--下载的 modules 存储位置        searchFiles.add(context.getFilesDir());        if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.LOLLIPOP) {            //第一次通过appbundle形式安装的split apks位置            // The initial installed apks are provided by `sourceDirs` in ApplicationInfo.            // The jniLibs we want are in the splits not the baseDir. These            // APKs are only searched as a fallback, as base libs generally do not need            // to be fully path referenced.            for (String path : context.getApplicationInfo().splitSourceDirs) {                searchFiles.add(new File(path));            }        }
        //查找apk和so文件        while (!searchFiles.isEmpty()) {            File file = searchFiles.remove();            if (file != null && file.isDirectory() && file.listFiles() != null) {                for (File f : file.listFiles()) {                    searchFiles.add(f);                }                continue;            }            String name = file.getName();            // Special case for "split_config" since android base module non-master apks are            // initially installed with the "split_config" prefix/name.            if (name.endsWith(".apk")                    && (name.startsWith(componentName) || name.startsWith("split_config"))                    && name.contains(pathAbi)) {                apkPaths.add(file.getAbsolutePath());                continue;            }            if (name.equals(aotSharedLibraryName)) {                soPaths.add(file.getAbsolutePath());            }        }
        List<String> searchPaths = new ArrayList<>();
        // Add the bare filename as the first search path. In some devices, the so        // file can be dlopen-ed with just the file name.        searchPaths.add(aotSharedLibraryName);
        for (String path : apkPaths) {            searchPaths.add(path   "!lib/"   abi   "/"   aotSharedLibraryName);        }        for (String path : soPaths) {            searchPaths.add(path);        }//打开so文件        flutterJNI.loadDartDeferredLibrary(loadingUnitId, searchPaths.toArray(new String[searchPaths.size()]));    }

4.修改Application的代码并删除com.google.android.play:core的依赖。

代码语言:javascript复制
override fun onCreate() {        super.onCreate()        val deferredComponentManager = CustomDeferredComponentsManager(this, null)        val injector = FlutterInjector.Builder().setDeferredComponentManager(deferredComponentManager).build()        FlutterInjector.setInstance(injector)

至此,核心代码全部实现完毕,其他细节代码可以见https://coding.jd.com/jd_logistic/deferred_component_demo/,需要加权限的联系shenmingliang1即可。

3.3 本地验证

  1. 运行 flutter build appbundle --release --target-platform android-arm64 命令生成app-release.aab文件。
  2. .运行下列命令将app-release.aab解析出本地可以安装的apks文件:java -jar bundletool.jar build-apks --bundle=app-release.aab --output=app.apks --local-testing
  3. 解压上一步生成的app.apks文件,在加压后的app文件夹下找到splits/scoreComponent-arm64_v8a_2.apk,继续解压此apk文件,在生成的scoreComponent-arm64_v8a_2文件夹里找到lib/arm64-v8a/libapp.so-2.part.so 文件。
  4. 执行 java -jar bundletool.jar install-apks --apks=app.apks命令安装app.apks,此时打开安装后的app,点击首页右下角的按钮跳转到DeferredPage页面,此时页面不会成功加载,并且会提示你“未在sd卡中找到so文件”。
  5. 将第3步找到的lipase.so-2.part.so push到指定文件夹下,命令如下 adb push libapp.so-2.part.so /storage/emulated/0/Android/data/com.example.deferred_official_demo/files。重启app进程,并重新打开DeferredPage界面即可。

04  总结

官方实现方案对国内的使用来讲,最大的限制无疑是Google Play,本文实现了一个脱离Google Play限制的最小demo,验证了deferred components在国内使用的可行性。

最小demo代码链接:https://coding.jd.com/jd_logistic/deferred_component_demo,需要加权限请联系shenmingliang1。

参考:

  1. https://docs.flutter.dev/perf/deferred-components
  2. https://github.com/flutter/flutter/wiki/Deferred-Components

推荐阅读

源码学习之MyBatis的底层查询原理

全场景流量验证系统

APP常用跨端技术栈深入分析

iOS应用上线ABM分发渠道最佳实践

0 人点赞