跳到主要内容

v1.22.0 版本发布

· 阅读需 3 分钟

本次版本更新聚焦于「LLM 可观测」模块，以下若无特殊说明，均为「LLM 可观测」相关功能。

新增特性（Feature）​

  1. 调整「自动评估」功能相关逻辑。

    1. 新增「评估 Prompt」，并支持版本管理。现「Prompt 管理」模块，有「业务 Prompt」和「评估 Prompt」两部分。
    2. 新增「评估任务」，通过配置目标数据、评估器、任务规则来实现自动评估功能。现有持续性任务、一次性任务两种任务类型。
    注意

    自动评估逻辑调整后，若您当前正在使用 1.20.0 1.20.1 1.21.0 1.21.1 版本的「自动评估 - 评估器」功能，升级到 1.22.0 版本后，原有评估器相关数据将不会保存。

    升级前，请先联系我方技术人员。

  2. 「仪表板」图表增加链接跳转功能。

    1. 可以自定义将图表数据与其他模块数据相互关联，并一键跳转。目前支持「LLM 可观测」模块
    2. 「LLM 可观测 - 应用分析 - 概览」页面，概览图、折线图、排行榜图表，增加默认提跳转。

优化（Improvement）​

  1. 数据持久化默认目录修改

    注意

    数据持久化目录默认从 /opt 改为跟 lighthouse 安装目录同级。如果之前 lighthouse 不是安装在 /opt 目录下，并且持久化目录没有修改过，则需要拷贝 /opt/ligthouse-data 到指定目录或者修改默认的持久化目录。

    升级前，请先联系我方技术人员。

  2. 「会话分析」页面，Traces 和 Spans 数据列表的自定义列，评估结果分为人工评估结果和自动评估结果两组，更加清晰。

  3. 优化自动评估、实验执行记录的评估结果展示，增加相关跳转，快速获取关联数据。

缺陷修复（Bugfix）​

  1. 修复 LLM 模型设置 token 返回量上限不生效的问题。
  2. 修复 LLM 删除模型 API, 相关的评估器状态展示不友好的问题。
  3. 修复 LLM 实验，切换数据集，新建实验数据集没有跟随切换的问题。
  4. 修复仪表板添加 了筛选条件后，删除不了的问题。
  5. 修复仪表板鼠标悬浮文字显示不全的问题。
  6. 修复仪表板点击查看综合仪表板出错的问题。