可离线试跑的评估包:适用场景与边界
本篇说明炬擎数原在垂询环节提供的可离线试跑评估包,包括它在什么阶段使用、能够验证哪些内容、不能替代什么,以及它与正式方案交付之间的关系。
评估包在哪个阶段使用
官网在联系我们页说明,对外垂询分为方案咨询、产品试用、生态合作与媒体采访四类,其中产品试用对应的是可离线试跑的评估包。评估包的使用时点在立项之前。 这一时点的选择与端侧方案的特点有关。端侧方案的可行性取决于现场条件:终端算力、网络环境与数据要求三项条件中任一项不满足,方案即不成立。这三项条件往往无法通过远程介绍判断,需要在实际设备上运行一次才能确认。把评估放在立项之前的另一层考虑是成本:立项之后的方案设计需要投入方案与实施资源,若可行性在试跑阶段就能确认,可以避免在不可行的方向上继续投入。
评估包能验证什么
评估包的作用是验证可行性与适配性。可行性指端侧模型与运行时能否在目标终端上运行;适配性指运行结果是否满足任务要求。这两项都是立项前的判断依据。 离线试跑的形式决定了验证过程不依赖外部网络。对网络受限场所与数据不出域场景,离线条件本身就是需要验证的一项内容;若评估包需要联网才能使用,则无法覆盖这类场景的判断。这也是把可离线试跑作为评估包形式的原因。两项结论的用途不同:可行性结论用于判断是否需要更换终端或调整部署方式,适配性结论用于判断任务本身是否需要调整。
评估包不能替代什么
评估包不构成交付物,也不替代正式方案的范围约定。其覆盖范围有限:通常只包含模型与运行时的基础能力,不含行业知识与流程的编入,也不包含与既有系统的对接适配。 正式方案的范围由交付物的四个部分组成,即模型、端侧运行时、行业知识与流程、硬件形态与验收指标。评估包对应其中的前两部分,后两部分的确认需要在方案阶段结合现场条件完成。 另外,评估包的运行结果属于试用性质,不作为验收依据。验收以方案阶段书面确认的标准为准。两项区分的意义是避免把试用结论直接当作交付结论使用。评估包的提供方式与具体内容以垂询后的书面说明为准,其中包含的模型档位与运行时配置可能根据目标终端条件作调整。
评估包与正式方案之间的对应关系,可以用交付物的四个部分来定位。模型与端侧运行时两项,评估包可以提供基础版本的试用;行业知识与流程、硬件形态与验收指标两项,评估包不涉及。因此试跑结论能回答的是能不能跑通,不能回答落地后是否满足业务流程要求。两类问题分别在不同阶段回答,中间由方案阶段的书面约定衔接。