ios - 图像识别的 CoreML 模型预测仅适用于 iPhone 11 和 12 模型
问题描述
我在 Create ML 应用程序中创建了一个图像识别 .mlmodel 文件。我现在在 iOS 应用程序中使用它。
它在 iPhone 11 和 iPhone 12(以及相应的机型)上运行良好,但在 iPhone 8、iPhone 8 Plus 和 iPhone X 上运行良好。可能还有其他机型无法运行,但到目前为止我可以确认这些机型。
我正在使用的代码是:
do {
let prediction = try self.model.prediction(image: pixelBuffer!)
} catch {
print("\(error)")
}
在这不起作用的模型上,控制台中打印的错误是:
Error Domain=com.apple.CoreML Code=1 "Predicted feature named 'classLabel' was not output by pipeline" UserInfo={NSLocalizedDescription=Predicted feature named 'classLabel' was not output by pipeline}
由于缺乏有关 CoreML 的文档,我无法找到有关此错误的可靠跟踪。SO上有一些随机帖子,Turicreate Github(Core ML 运行的底层 Python 库)上也有 Git 问题,但似乎没有任何东西可以直接回答这个问题。
任何帮助将不胜感激。谢谢!
根据这篇 Apple Developer 论坛帖子,配备 A7 处理器的设备与之前的设备之间可能存在一些差异。它有可能默默地失败吗?
https://developer.apple.com/forums/thread/93105
在 ML 模型的输出类中,有几行代码如下:
lazy var classLabel: String = {
[unowned self] in return self.provider.featureValue(for: "classLabel")!.stringValue
}()
这是在模拟器上构建时发生的自动生成的文件中,因此即使在文本编辑器中编辑文件也会在每次构建时被覆盖。我认为,如果可能的话,输出模型的输出可能会有所帮助,以查看它实际返回的内容。
我已将其追踪到功能:
open func prediction(from input: MLFeatureProvider, options: MLPredictionOptions) throws -> MLFeatureProvider
在 MLModel.h 的 MLModel 类声明中。这是引发错误的地方;到目前为止,我已经记录了输入数据,这是引发错误的函数,因此它来自框架本身。
解决方案
您创建的模型是所谓的管道模型,这意味着它包含两个子模型。其中第一个是 Vision FeaturePrint 模型,第二个是处理这些特征打印并输出类标签的分类器。
根据错误消息,管道没有在classLabel
任何地方输出结果。由于它适用于某些 iPhone 而不是其他 iPhone,因此这可能是 Core ML 中的一个错误。但是,也可能是模型或不同 iOS 版本的问题。很难说到底发生了什么。
您可以使用 Netron 工具(开源)查看模型,它应该让您了解classLabel
模型中是否实际存在。
推荐阅读
- pandas - 如何在 Spark 中以多个系列作为输入最有效地使用 Pandas UDF
- javascript - 数组 forEach 在最后一次迭代中覆盖对象的值
- sql - 如何按子查询中的未聚合列排序?
- python - 芹菜如何在for循环中创建任务组
- spring-boot - 将 html、xhtml 渲染为 PDF 时图像 Thymeleaf 不显示
- firebase - Firestore:如何查询文档子集中的角色映射?
- cassandra - 是否最好将 Cassandra 中的高活动字段存在于他们自己的表中?
- pyspark - Pyspark 根据其他列中的字符串值删除重复项
- python - IntegrityError a NOT NULL 约束失败:通过 django 提交表单
- python - Python对具有多个元素的字典列表的键求和