设置基于 Agent 的多媒体处理

多媒体设置用于配置在测试执行期间使用 ecu.test agent 进行图像处理的 test step,例如从提示词中确定触摸坐标。所选的模型必须支持图像输入。

以下对象会使用这些设置:

打开 Options ‣ Settings ‣ ecu.test agent ‣ Multimedia settings。

模型请求参数化

生效的模型请求参数化最初以只读 YAML 形式显示。选择 Edit 即可更改。

编辑对话框包含:

Model

从可用模型中选择一个模型,或输入模型名称。使用刷新按钮可从已配置的服务中获取可用模型。

覆盖(可编辑的 YAML)

只需输入应覆盖其默认值的值。编辑过程中会 校验内容,只有有效的设置才能保存。

Effective Preview (read only)(有效预览,只读)

显示应用默认值和覆盖值后得到的配置。

使用 Import 从 YAML 文件加载覆盖项,使用 Export 保存 当前覆盖项。导入的 YAML 必须有效并包含 request.model。

支持的 YAML 字段

request.model

用于基于 Agent 的多媒体处理的模型。

request.temperature

采样温度从 0.0 到 1.0。较低的值产生更确定的结果。 较高的值会增加变化,但可能使坐标敏感的结果一致性变差。

imagePreprocessing.resizeEnabled

启用后,在图像发送到模型之前会自动缩小。这可以减少延迟和 token 消耗。它还允许 ecu.test 将返回的坐标缩放回原始图像 尺寸。

imagePreprocessing.maxEdgeLength

启用自动调整尺寸时,图像边缘的最大长度(以像素为单位), 取值范围为 128 到 16384。

resultPostProcessing.relativeCoordsEnabled

启用对相对于模型特定参考尺寸返回的坐标进行转换。

resultPostProcessing.relativeCoordsScale

用于相对坐标的参考边长,取值范围为 10 到 16384。例如,当模型返回的坐标范围为 0 到 1000 时,请使用 1000。

modelInstructions

包含附加模型指令的文本文件的有序列表。相对路径 相对于工作区解析;绝对路径则直接使用。每一项都必须是 指向现有文件的非空路径。

Info

当模型在内部缩放图像而不调整返回的坐标时,建议启用自动调整大小。请为所使用的模型配置最大边长。

Example

request:
  model: gpt-4.1-mini
  temperature: 0.2
imagePreprocessing:
  resizeEnabled: true
  maxEdgeLength: 1200
resultPostProcessing:
 relativeCoordsEnabled: false
 relativeCoordsScale: 1000
modelInstructions: [instructions/modelInstructions.md, instructions/projectRules.md]

多媒体缓存

基于 Agent 的多媒体结果可以缓存,以便在测试执行期间复用。选择 Delete Multimedia Cache 可删除所有缓存的结果。后续执行会从 Agent 服务请求新的结果。