ARTICLE · INTELLIGENCE

战地情报 · 详情页

来自尧图项目组的一线实战观察与深度解析

Flutter鸿蒙端侧植物识别实战:从拍照到模型推理全链路

Flutter鸿蒙端侧植物识别实战:从拍照到模型推理全链路

跨端开发圈子里这两年最让人纠结的一件事,就是鸿蒙设备的适配怎么做。Flutter 很早就跑通了移动端、桌面和 Web,但鸿蒙这边受 SDK 演进影响,资料一直比较碎。前阵子我把一个植物识别助手从 Demo 做到了能装进鸿蒙手机跑通识别,整个链路比想象中曲折,也比想象中有章可循。这篇东西就把这条路摊开讲——从 Flutter 侧怎么搭 UI,到鸿蒙侧怎么接相机、跑端侧模型,再到签名打包上真机,过程里全是能直接抄作业的细节。

植物识别助手,说白了就是:打开应用,拍照或者从相册选一张植物叶片、花朵、果实的照片,应用在本地完成图像分类,返回植物名称、置信度和一段简短特征描述。整条链路不依赖服务端,模型跑在端侧,所以我不用申请任何云服务账号,也不怕用户跑到野外没信号。这篇文章适合三类人:一是想试试 Flutter 跨端到鸿蒙这条路怎么走的移动端开发者,二是想在鸿蒙设备上落地端侧 AI 功能的同学,三是暂时不想折腾环境、只想知道架构思路的围观选手。不管哪类,读完至少能少踩我踩过的那几个坑。

1. 项目拆分与技术选型:为什么植物识别偏要用 Flutter 做

1.1 需求拆解:一个植物识别助手的边界在哪里

动手写代码之前,我先花了一个晚上把需求拆到不能再拆。植物识别助手最核心的闭环其实特别简单:用户输入一张图片,应用输出一个分类结果。但它天然拆成三块——UI 交互、图像处理链路、端侧推理。

UI 交互这块包括拍照入口、相册入口、识别中加载态、结果卡片展示。图像处理链路涉及图片解码、压缩、方向校正、缩放、归一化、内存布局转换。端侧推理则要搞定模型加载、推理调用、概率数组解析。这三块放在一个工程里,逻辑上要分层,尤其图像处理和推理这两块不能和 UI 搅在一起,否则后期调优时你会疯掉。

MVP 我刻意砍掉了很多东西:不做账号体系、不做云端训练、不做分享功能、不做识别历史。砍掉这些不是因为它们没用,而是因为在一个跨端新平台上,第一步要验证的是"链路能不能完整跑通"。等这个闭环稳定了,产品层的东西再加不迟。我自己见过太多项目一上来就堆功能,结果通道没打通、模型没调通,一堆 UI 全卡死在等待回调上——那种体验实在糟糕。

最后定的功能边界只有四件事:拍照、选图、识别、展示 top 5 结果和置信度。后来加了一个简化的识别历史记录,因为发现测试时反复拍同一盆花,有个记录能直接对比不同输入下的稳定性,但这也只是开发期的辅助功能,正式版可有可无。

1.2 选型逻辑:Flutter 加鸿蒙到底是不是最佳组合

先回答一个绕不开的问题:鸿蒙原生开发明明可以用 ArkTS 写,为什么偏要绕一圈用 Flutter?我的答案很直接——看你手里已经有什么。

Flutter 最大的价值不是"跨端"这个词本身,而是它把 UI 层的一致性做到了很高的程度。我们团队原本就有一套用 Flutter 写的组件库和几个业务页面,如果换到鸿蒙原生重写,UI 成本是实打实的,而且后续要再覆盖其他平台时又是一轮重写。用 Flutter 接鸿蒙,至少 Dart 侧的业务代码能复用,UI 和状态管理逻辑基本原封不动搬过来,省掉的是平台相关的那部分工作量。

然后是适配现状。Flutter 官方主分支目前对鸿蒙的支持还属于社区移植加官方逐步吸收的状态,OpenHarmony 方向的适配分支已经可以跑通渲染、路由、MethodChannel 这些核心能力。实际用下来,常规页面级别的开发体感已经比较接近 Android 端的稳定度,但一些底层能力仍然建议让鸿蒙原生来实现,再通过通道桥接给 Flutter。

这里面有一个关键选型我要重点讲:端侧推理引擎放在哪一层。

我见过有人直接在 Flutter 侧集成端侧推理库,想法是连推理都跨端复用。听起来很美,实际坑很多——Flutter 侧能跑的推理库依赖不一定适配鸿蒙,就算适配了,模型的输入输出还得经过整个 Dart 堆栈,出了问题查起来非常费劲。我最后选择的做法是:Flutter 只做 UI 和交互,相机、相册、图片压缩、模型推理全部走鸿蒙原生侧,两边通过一个统一通道通信。这个架构看起来多了一层桥接,但每一层的职责非常清晰,排查问题时能很快定位是 UI 的问题、通道的问题还是模型的问题。

选模型推理引擎时我做了个简单对比,这里直接放出来:

对比维度通用端侧推理库(TFLite 这类)鸿蒙原生推理引擎(MindSpore Lite 这类)
模型生态社区资料多,训练导出工具链成熟生态偏原生,转换工具链依赖官方文档
鸿蒙适配度需要找社区适配版本,版本更新要及时跟跟系统 SDK 绑定相对紧密,升级节奏一致
集成复杂度需要额外处理动态库依赖在原生工程里按模块引入,路径固定
端侧性能表现稳定,线程配置灵活对特定硬件优化更好,但要看具体模型结构
社区答疑遇到问题随便一搜就有答案问题较少,踩坑主要靠自己

我最后选了鸿蒙原生推理引擎。理由是它在签名、权限、动态库加载这些环节和系统贴合得更紧,少了很多"系统更新后动态库加载失败"的奇奇怪怪问题。但如果你手头模型是用通用框架训练的,导出的格式不一定能直接转成鸿蒙原生模型格式,这时候从通用端侧推理库入手反而更快。两种路线都可行,关键是别在项目中期来回横跳。

2. 环境准备与工程搭建:把 Flutter 工程打开鸿蒙开关

2.1 开发环境准备清单

虽然 Flutter 开发的经验可以直接复用,但鸿蒙这边的环境配置还是有一套自己的规矩。我建议装环境时按下面这个顺序来,能省掉很多"版本对不上"的烦恼。

第一步,安装 Flutter SDK。注意不要用 Android 开发时那套旧习惯直接拉最新版,而是先确认要用的鸿蒙适配分支要求哪个 Flutter 版本。适配分支通常会锁定一个基线版本,你直接用那个基线,避免后续合成时出现 Dart 层 API 不一致的问题。

第二步,安装鸿蒙开发 IDE 和 SDK。在 IDE 自带的 SDK Manager 里把 HarmonyOS SDK 装好,这里面包含编译器、系统镜像、模拟器等组件。SDK 版本建议选择当前稳定版,不要追 preview 版,因为我实测 preview 版在 Flutter 工程编译阶段偶尔会跟社区适配分支的构建脚本冲突。

第三步,配置环境变量。需要把 Flutter SDK 的 bin 目录、鸿蒙 SDK 的 toolchains 目录加到 PATH 里。环境变量配完后,打开新的终端跑一遍 flutter doctor --verbose,确认所有诊断项是不是符合预期。

第四步,验证鸿蒙命令行工具是否可用。不同版本的 SDK 工具名略有差别,但最基本的一条是能在终端里执行设备调试工具,比如 hdc list targets 能列出已连接的真机或者模拟器。这一步跑不通,后面打包安装基本也跑不通。

整个环境搭建过程,最容易翻车的不是安装步骤本身,而是版本组合。我的个人建议:把 Flutter 基线版本、鸿蒙 SDK 版本、适配分支版本三个固定记录在项目 README 里,团队里谁重新拉环境都按这个组合来。模糊的"尽量用新版"性价比很低。

2.2 给 Flutter 工程添加鸿蒙平台目录

很多第一次接触的人会误以为 Flutter 工程天生就有鸿蒙目录,实际上不是。Flutter 官方模板默认生成 android、ios、web、linux、macos、windows 这些平台目录,鸿蒙目录得自己加。

添加鸿蒙平台目录有两条路线。路线一:从鸿蒙侧的示例工程新建一个空壳,把自己的 Flutter 代码拷贝进去。路线二:在自己的 Flutter 工程根目录通过初始化脚本生成鸿蒙壳工程。我更推荐路线二,因为这样 Flutter 工程能保持单一代码源,Flutter 侧文件变化后,壳工程只需要同步产物,不用来回拷贝业务代码。

实际操作里,需要在 Flutter 工程根目录新增一个鸿蒙模块目录,通常叫 hms 或者 ohos,看适配脚本的默认命名。这个目录里至少要有几个关键文件:模块配置文件 module.json5、构建配置文件 build-profile.json5、包管理文件 oh-package.json5。构建配置文件里要声明应用包名、签名信息、模块名称;包管理文件里要引入 Flutter 引擎的依赖包。这一步做完,在 IDE 里打开这个目录,等待工程同步完成,就可以先构建一个最简的空壳 HAP 包,验证 Flutter 引擎能否在鸿蒙设备上拉起。

这里有一个容易踩的坑:鸿蒙壳工程和 Flutter 工程其实是两个独立工程,flutter run 这类命令不能直接用于构建 HAP。需要一个专门的构建脚本把 Flutter 产物打进鸿蒙资源的指定目录,再由鸿蒙构建系统生成 HAP。我刚接触时直接用 IDE 构建,结果发现 HAP 里根本没有 Flutter 资源,装到真机上白屏。后来我在构建脚本里固定了顺序:先 flutter build 产物,再执行鸿蒙侧编译,最后统一签名打包。这个顺序一旦写进脚本,后面就再没出过白屏问题。

2.3 第一道桥:MethodChannel 打通 Flutter 与鸿蒙原生

Flutter 和鸿蒙原生能力之间,默认是两条平行线。Dart 代码里没有直接打开系统相机的手段,鸿蒙原生的拍照能力也感知不到 Flutter 页面的存在,两者之间需要一个通道,这就是 MethodChannel。

我在 Flutter 侧定义了一个独立的通道服务类,把所有与鸿蒙原生的通信都收敛到这一个类里:

// lib/services/native_bridge.dart import 'package:flutter/services.dart'; class NativeBridge { static const MethodChannel _channel = MethodChannel('com.example.plant/native'); static Future<Map<String, dynamic>> takePhotoAndRecognize() async { final result = await _channel.invokeMethod<Map<Object?, Object?>>('takePhoto'); return Map<String, dynamic>.from(result ?? {}); } static Future<Map<String, dynamic>> pickPhotoAndRecognize() async { final result = await _channel.invokeMethod<Map<Object?, Object?>>('pickPhoto'); return Map<String, dynamic>.from(result ?? {}); } }

鸿蒙原生侧则在自己的模块里注册同一个通道名,收到方法调用后分发到对应的函数里处理。以 ArkTS 的写法为例,核心结构是这样:

// entry/src/main/ets/services/NativeCallHandler.ets import MethodChannel from '...'; const channel = new MethodChannel('com.example.plant/native'); channel.setMethodCallHandler((call, result) => { if (call.method === 'takePhoto') { // 拉起系统相机,拿到图片 URI // 压缩图片、预处理、模型推理 result.success({ name: '月季', confidence: 0.95, info: '...' }); } else if (call.method === 'pickPhoto') { // 从相册选择图片,走相同的识别链路 } else { result.notImplemented(); } });

注意:不同版本的鸿蒙 Flutter 适配 SDK 对通道注册的类名、方法签名会有差异,实际写的时候要能适应当前 SDK 的 API,但整体结构就是"通道名一致 + 方法名分发 + 异步结果回传"。

这块我有三个很实用的经验。第一,通道名一定要全局统一,Flutter 侧和原生侧各写一遍,最好抽成常量,因为拼写不一致不会报编译错误,只会表现为"调用无响应",排查起来很浪费时间。第二,invokeMethod 传参数时尽量只传简单类型,字符串、数字、布尔值都是安全的,别图省事把自定义对象塞进去,序列化问题会让你怀疑人生。第三,耗时操作绝对不能放在原生侧的主线程里,模型推理尤其如此,后面性能部分我会细说。

通道打通之后,建议先别急着做完整功能,用一个假的返回数据把 UI 跑通。我在 Flutter 侧留了一个 mock 开关,测试时直接返回固定的植物名称和置信度,这样 UI 的渲染状态、加载态、异常态都能提前验证,等原生链路通了之后,把 mock 关掉就行。

3. 植物识别核心链路:拍照、选图、预处理、推理与结果展示

3.1 相机与相册:系统能力和权限的正确用法

植物识别最自然的交互就是拍照。用户在公司楼下看到一株不认识的植物,下意识就是举起手机拍张照,所以相机入口一定要够明显。

鸿蒙这边的相机调用,我建议 MVP 阶段直接用系统相机,不要自己堆相机自绘 UI。系统相机的好处是稳,对焦、曝光、防抖这些全交给系统,识别应用根本不关心用户怎么拍,只关心拍完之后那张照片在哪。通过系统相机拍摄,需要在原生侧发起一个拉起相机的动作,等相机返回后拿到图片的 URI,再通过文件描述符读取图片内容。这个过程里,权限声明和运行时授权是绕不开的。

相册选图和相机是两条平行的路径,但实现方式不太一样。相册选图优先用系统的照片选择器,用户在系统相册界面里选完,返回给应用一个或多个图片 URI。用系统选择器的好处是隐私合规性好,应用拿到的只是用户明确选择的图片,而不是整库的读取权限,上架审核时也少很多麻烦。

权限这块我踩过一个很具体的坑:一开始我把相机权限、相册权限、媒体读取权限全都声明了,结果系统弹授权弹窗时用户被吓到,觉得"一个识别植物的应用为什么要读我全部照片"。后来我改成最小权限原则——走系统相机就用相机权限,走系统相册选择器连媒体读取权限都不用申请。实际测试下来,体验好了很多,审核那边的风险也降下来了。

图片拿到之后,不管来自相机还是相册,都需要做一件事:压缩。现在的手机一张照片动辄四千乘三千像素,直接丢给模型推理,内存和时间都在燃烧。我在原生侧拿到图片 URI 之后会先解码、做尺寸压缩,压缩到适合模型输入的尺寸附近,再走后面的预处理流程。这个压缩步骤放在原生侧很有必要,因为 Flutter 侧如果拿到的是原始大图,再经过通道回传,内存拷贝的浪费太大了。

3.2 图片预处理:从一张大照片到 224×224 的浮点张量

模型不是魔镜,你不能把任意尺寸的照片直接丢给它。绝大多数图像分类网络都要求输入固定尺寸,比如常见的 224×224,这就意味着原始图片要经过一整套标准化处理,才有资格进入模型。

第一步是方向校正。手机拍照时会记录一个 EXIF 方向信息,同一张照片在不同屏幕上显示可能是正的,但解码出来的像素矩阵可能是旋转的。这一点我记得特别深刻,第一次测试时把手机竖着拍绿叶菜,识别结果完全不对,后来才发现图片没有按 EXIF 方向做旋转。工程上在解码图片后,要先读取 EXIF,做对应角度的旋转校正,再做后面的缩放操作。

第二步是缩放。从大图缩小到 224×224,有两种主流做法:整体缩放和中心裁剪。整体缩放能把整棵植物都塞进画面,但如果原图比例不是正方形,直接缩放会拉伸变形。中心裁剪保证等比,但可能会把植物边缘的部分特征切掉。我在工程里默认用中心裁剪,因为植物识别的关键在于叶片、花朵这些核心区域,中心区域通常就是主体所在。如果后续发现某些类别因为裁剪丢失了关键特征,再考虑加一个"智能主体裁剪"的逻辑。

第三步是归一化。模型训练时,常用的做法是把像素值从 0 到 255 的整数范围缩放到 0 到 1 的浮点范围,有些模型还会用预设的均值和标准差做标准化。这个参数必须和训练模型时保持一致,否则推理结果会莫名其妙地偏低置信度。

第四步是内存布局。模型推理引擎通常要求输入数据按照特定的张量形状排布,常见的是通道优先或者高度优先。这一步不需要你背规则,但要在调接口时注意检查输入张量的形状定义,别把数据塞错维度。我在调试时吃过一次亏,模型一直输出随机概率,最后发现是输入张量的通道顺序和预处理后的数据对不上。

这块知识听起来琐碎,但它决定了整个识别链路的天花板。预处理做对了,模型本来能识别的图片结果会很稳定;预处理错了,再好的模型也白搭。

3.3 端侧模型怎么来:训练、转换与量化选择

植物识别模型从哪里来,这个问题没有标准答案,取决于你是从零训练还是基于已有模型微调。

最省力的路径是找一个现成的图像分类模型结构,用公开的植物分类数据集做迁移学习。各行各业都有很多公开数据集,比如常见的花卉分类集合、几百种植物的公开集合,质量参差不齐,但做一个 Demo 足够了。我的建议是,如果只是想验证端到端链路,先别追求类别多,用一个十类左右的小数据集把链路跑通,再逐步扩大类别。因为类别扩大之后,需要处理样本均衡、混淆类别、标注质量这些额外问题,那已经不是联调阶段该操心的事。

模型训练完成之后,要导出成端侧推理引擎能加载的格式。这一步有三件事:导出模型结构、完成权重转换、确认输入输出的张量定义。通用做法是先在训练框架里冻结模型,再通过推理引擎官方提供的转换工具转换成相应格式。转换工具有时会报算子不支持的错误,这是最常遇到的情况——训练时可以用的某些算子,端侧推理引擎并不完全支持。我的处理办法是,在训练阶段尽量用卷积、池化、全连接这些基础算子,避开那些花哨的自定义层。

量化是端侧落地的关键一步。同样的模型,用 float32 浮点存储可能在二三十兆甚至更大,转成 int8 量化后体积能压缩到四分之一,推理速度也会有明显提升。代价是精度会掉一点,掉多少取决于训练数据分布和量化策略,通常控制在可接受范围。我在项目里最终用的就是 int8 量化版本,模型体积十几兆,在鸿蒙真机上跑一次推理大概三四百毫秒,这个体感已经可以接受了。

推理引擎选型上,我做的是"原生侧推理"路线。具体落地时,原生侧会封装一个识别服务类,负责加载模型文件、创建推理会话、执行推理、返回概率数组。模型文件放在鸿蒙模块的资源目录里,通过资源引用加载,而不是放在 Flutter 侧,这样能让原生层完全接管模型的生命周期管理。

3.4 结果解析与识别页 UI:让置信度变成直观反馈

模型推理完成后,返回的通常是一个浮点数组,数组长度等于分类类别总数,每个元素代表对应类别的概率。直接在 UI 上展示这个数组显然不行,还得做两层解析。

第一层解析是排序取 top k。我把概率数组按值从大到小排序,取前五个结果。第二层解析是标签映射。模型训练时类别通常用数字 ID 表示,比如 0 代表玫瑰、1 代表月季,但应用 UI 要展示的是用户能看懂的中文名称,所以需要一张本地映射表。这里面还有一个细节:本地映射表和模型训练的类别 ID 必须严格对齐,一旦顺序错位,展示出来的名称就会张冠李戴。我在项目里把这份映射表做了校验脚本,每次更新模型后自动跑一遍对齐检查,防止人工拼写错误。

UI 这一层我尽量做得克制。页面顶部是一个大识别区,两个按钮分别是拍照和相册;页面中间是当前选中的图片预览;页面下方是结果卡片,展示 top 1 植物名、一个大号的置信度进度条,以及 top 3 到 top 5 的备选列表和一个简单的植物特征描述。置信度低于 60% 时,我会提示"识别不确定,建议换个角度或对准局部特征重拍",这个细节在实测中很管用,因为用户拍到一张虚化严重的照片时,直接给一个低置信度结果远不如给一个操作建议。

加载态也是 UI 的一部分。推理在原生侧执行,通常需要一两百毫秒到一秒左右,这段时间如果 UI 没有反应,用户很容易以为应用卡死了。我在 Flutter 侧显示一个加载指示器,同时禁用识别按钮防止重复点击,等通道回调回来后恢复。

这里也有一件小事值得说:结果卡片里的植物特征描述,我没有从模型拿(模型也拿不了),而是在本地映射表里为每个类别维护了一段简短文字。这样做有一个明显好处——离线状态下完整可用,符合植物识别在野外无网环境的核心使用场景。

4. 真机联调、问题排查与性能优化

4.1 从模拟器到真机:先检查这四个环节

模拟器上跑通一个 Flutter 页面其实不难,但真机联调才是这道坎真正开始的地方。我总结下来,从能编译到能装上真机,有四个环节要逐一确认。

第一个环节是设备连接。用设备调试工具确认真机是否被识别,连接好之后在终端里能用部署命令看到设备列表。如果这一步就失败,先检查设备驱动和数据线,别急着查代码。

第二个环节是签名配置。HarmonyOS 应用包安装到真机必须有签名,调试包和发布包用的签名还不一样。这个配置容易犯错的地方在于:开发用的签名在真机调试时可以用,但一旦换了设备或者重新生成证书,旧包可能就装不上了。我经常建议,把签名证书的到期时间在项目日历里设个提醒,不然真机突然装不上包,排查半天发现只是证书过期,是很无语的事。

第三个环节是 HAP 包内容检查。HAP 打包完成之后,要确认里面是否包含了 Flutter 引擎的动态库和 assets 资源。这一步看起来不用检查,但恰恰是白屏问题的高发区。我在项目里写了检查脚本,解压 HAP 后核对关键文件是否存在,有缺失直接报错,避免把坏包送到测试手上。

第四个环节是安装与日志。HAP 安装后如果启动异常,不要只看桌面有没有图标,要看 log 输出。日志里崩溃堆栈通常会直指问题所在——是通道注册失败、模型文件找不到,还是资源路径写错,都能快速定位。

4.2 典型问题速查表:我踩过的六个坑

真机联调阶段遇到的问题五花八门,但归结起来就那几类。我整理成一张速查表,方便你遇到问题时直接对照:

问题现象可能原因解决办法
HAP 安装失败,提示签名错误签名证书与包名不匹配,或证书已过期重新生成签名配置,确认 bundle name 和证书一致后重打包
Flutter 页面白屏,无崩溃日志HAP 里缺少 Flutter 资源或引擎动态库执行完整构建脚本,手动解压 HAP 检查关键文件
MethodChannel 调用无响应通道名拼写不一致,或原生侧注册时机过晚统一通道常量,在入口模块早期注册通道
拍照后识别结果异常图片 EXIF 方向未校正,或模型标签映射错位解码后按 EXIF 旋转,运行标签对齐脚本
推理后界面明显卡顿推理阻塞了原生主线程或 Flutter UI 线程推理移到线程池或 Isolate,UI 侧只等回调
相册选图返回空结果系统选择器权限会话失效,或 URI 读取时机不对在回调存活期内读取 URI,避免延迟异步读取

这里最值得单独提醒的是通道注册时机。我在第一次联调时把通道注册放在了页面加载之后,结果 Flutter 侧一上来就发起调用,原生侧压根没监听,回调就一直挂着。后来我把通道注册提前到模块初始化阶段,让原生侧在 Flutter 引擎加载完成时就准备好通道,这个问题才算解决。它的排查难度很高,因为没有任何报错,只是回调永远不回来。

4.3 性能调优三板斧:预热、压缩、量化

端侧推理应用,用户最在意的不是模型有多先进,而是"点完按钮多久出结果"。我把整个链路的耗时拆开看过:拍照和选图大约几百毫秒,压缩和预处理几十毫秒,模型推理两三百毫秒,通道回传几乎可以忽略。所以优化重点非常清楚:把模型推理的时间和图片处理的时间压下去。

第一板斧是预热模型。模型初始化、权重加载、推理会话创建这些工作,不要在用户点击识别按钮的那一刻才做,而是应用启动后就在后台完成。我实测的差距很夸张:不预热时首次识别要等接近两秒,预热后从点击到出结果全程六百毫秒以内。这一条几乎零成本,但收益立竿见影。

第二板斧是压缩先行。原生侧拿到图片后先做采样率压缩,让图片尺寸接近模型输入两倍左右再送进预处理流程。高分辨率图片解码本身就很耗时,还会造成内存峰值。提前压缩之后,整个图片处理链路的总耗时能下降三分之一以上。

第三板斧是模型量化加线程控制。量化模型我们已经用上了,推理线程数控制在 2 到 4 之间,线程太多反而会因为调度开销拖慢速度。另外要注意,推理引擎初始化时设置的线程数和推理时的设置必须一致,否则部分引擎会表现异常。

还有一条来自实战的经验,缓存上一次识别结果。同一个用户连续识别同一张照片的概率不大,但在调试阶段反复测试同一张测试图很常见。我在测试环境里加了基于图片哈希的结果缓存,命中缓存直接返回上次的识别结果,开发效率提升非常明显。正式版要不要这个功能,看产品需求,但开发期一定有。

5. 打包发布与后续扩展:从 Demo 到能用的产品

5.1 从调试包到可发布的 HAP

调试包和发布包虽然都是 HAP,但中间差着好几道工序。调试包可以用自动生成的临时证书,发布包必须有正式的发布证书和对应的 Profile。配置过程大体是:先在开发者后台申请证书,再把证书文件放到构建配置里,最后用发布模式构建。

构建发布包之前,有几件事一定先过一遍。隐私声明和权限说明要跟实际能力一致,我前面说的最小权限原则这时候就体现出价值了——权限越少,说明越简单,审核交互越顺。版本号和版本名要提前规划好,不要第一版就随便写个 1.0.0,后面没法交代。HAP 包体和资源文件要检查清理,开发期放进去的测试日志、临时 mock 开关,发布前全部去掉。

包体大小也是一个值得关注的指标。HAP 里既包含 Flutter 引擎,又包含模型文件,体积会偏大。我最终的包比纯 Flutter 工程大不少,主要差异就在模型文件上。如果包体体积敏感,可以考虑模型动态下载方案——首次安装只带一个小模型,用户实际需要更多类别时再通过网络下载扩展包。但这就引入了在线依赖,和端侧离线的大卖点相悖,需要产品权衡。

5.2 从 Demo 到产品:下一步可以考虑的扩展点

链路跑通之后,这个应用从能用到好用还有不少路要走。我整理了几个值得投入的方向。

识别历史记录和本地收藏是第一批该做的。用户拍到一株植物,识别出来之后大概率想知道它叫什么,但一段时间之后就忘了,所以历史记录加收藏几乎是植物识别应用的标配。实现上可以沿用本地数据库方案,离线数据天然适合。

百科词条可以做得更厚重。现在每个类别就有一段文字描述,后续可以扩展成图集、分布区域、养护要点、相似物种对比。这些内容全部打包进应用或者作为离线数据包下发,依然是端侧优先的思路。

拍照引导是个容易被忽视但对识别准确率影响巨大的功能。很多用户拍摄时离目标太远、取景杂乱、光线不足,导致模型根本拿不到有效特征。可以在识别置信度偏低时弹出引导:靠近一点、对准叶片或花朵主体、避开强光。这个功能不涉及模型改造,但对用户体验的提升是立竿见影的。

模型更新机制也值得提前设计。固定模型打天下是不现实的,后续新增植物类别、优化混淆分类都需要更新模型。比较好的做法是给模型文件配一个版本号,应用启动时检查本地模型版本和内置版本是否一致,不一致就使用内置模型,同时准备一个扩展模型目录,方便后续通过常量包方式做增量更新。

5.3 回顾与手记:这套链路里真正花时间的部分

项目收尾之后回头看,整个实现里真正花时间的不是 Flutter 组件怎么写,也不是模型本身怎么调,而是 Flutter 和鸿蒙两条生态之间的衔接。通道通了、预处理对了、模型能加载了,UI 反而是一马平川的流水线工作。

我个人在实际操作中的体会是,跨端到鸿蒙的适配,不要指望一个命令全部搞定,也不要指望官方文档把每一个坑都写出来。先把最小链路跑通,再逐步替换真实实现,这个策略帮我节省了大量排查时间。另一个很重要的习惯是,把工程里所有交叉编译、签名、资源同步动作都沉淀成脚本,而不是每次手动执行,否则团队协作时很容易在操作步骤上产生分歧。

最后分享一个小技巧:真机调试时准备一张打印出来的植物图片贴在工位上。整天跑进跑出拍绿植太不现实,固定一张测试图能让你反复验证模型稳定性、通道稳定性、UI 状态切换,效率比去楼下找一株真花高得多。等所有逻辑都稳定了,再去室外随手拍几次做最终验收,基本就万无一失了。

RELATED READING

延伸阅读

更多一线实战笔记与深度复盘,助您持续精进