跳到主要内容

9 篇博文 含有标签「Dashboard」

Some new dashboard features

查看所有标签

v1.19.0 版本发布

· 阅读需 3 分钟

重大更新(Breaking Changes)

重大更新

Lighthouse 的「LLM 应用」模块,正式推出「人工评估」、「Prompt 管理」两大功能。

  • 人工评估

不同的 LLM 应用 ,有不同的业务目标,企业通常根据 LLM 应用的 input 和 output 内容来判断模型输出效果是否符合预期。Lighthouse 的人工评估功能,可以自定义评估维度(如准确性、简洁性、安全性等),并对每条 Trace、Span 数据进行多维度评分。帮助开发团队深入了解模型表现、识别问题、并持续优化模型质量,确保企业推出真正符合业务目标的优质 LLM 应用。

  • Prompt 管理

在开发 LLM 应用时,提示词版本混乱、缺乏效果追踪、缺少数据回溯、团队协作困难等问题,会拉低调试 Prompt 的工作效率。Lighthouse 的 Prompt 管理功能,提供 Prompt 的集中式存储库,可以对 Prompt 进行版本控制、数据对比、高效维护,显著提升 LLM 应用的质量及开发效率。

v1.18.0 版本发布

· 阅读需 4 分钟

新增特性(Feature)

  1. 管理:
    1. 新增「License 管理」模块:对不同模块核心资源量的使用进行管控和统计。

      注意:从1.17.0及之前的版本,直接升级到 1.18.0及以上版本,需要提前手动清空所有数据才可正常使用。如遇此情况,请联系技术支持。

    2. 新增「数据上报地址」模块:可以统一修改平台多个模块的数据配置信息,用于解决自动识别的数据上报地址与实际不符的情况。
  2. 仪表板:
    1. 数字概览图表,可以配置映射规则,对查询值赋值、并配色。
    2. 折线图、柱形图图表,可以配置阈值标记、并配色。
    3. 仪表板列表支持批量导出 JSON。
  3. LLM:
    1. 「会话分析」新增「Spans 列表」页面:展示每条 Span 的基本信息与性能数据,单击即可查看详情信息。
    2. 「会话分析」的 Traces 和 Spans 列表页,增加快捷筛选,可以根据类型、名称、使用模型、状态快速筛选出目标数据。

v1.17.0 版本发布

· 阅读需 4 分钟

新增特性(Feature)

  1. APM:
    1. 新增「自定义业务接口聚合规则」:可以将多个接口调用识别为同一个接口,有效地帮助客户从技术视角切换到业务功能视角,去观测接口的性能问题。
  2. LLM:
    1. 新增「拓扑」模块: 为 LLM 应用提供了一个全面且直观的调用关系、性能状况全景图。通过展示所有 Span 节点之间的调用关系及聚合后的性能指标,能够快速洞察 LLM 应用的整体运行状况、聚焦问题节点,精准定位问题,从而实现高效优化与管理。

v1.16.0 版本发布

· 阅读需 3 分钟

新增特性(Feature)

  • 仪表板:
    • 支持查询 LLM 数据,制作多种自定义图表。
    • 新增视图变量,实现在仪表板中切换视图变量的值,可以实时应用到当前仪表板的多个图表中。帮助用户自定义快速筛选和分析数据。
    • 支持 PromQL 查询语句。
    • 新增图表类型:排行榜。

v1.15.0 版本发布

· 阅读需 3 分钟

新增特性(Feature)

  • 日志: 支持日志信息的全文搜索、模糊搜索。被搜索的内容,会在日志信息列表或者悬浮中,蓝色高亮。
  • 仪表板:
    • 新增图表类型:数字概览图、饼图、文本。
    • 选择指标时,会同步展示字段名和指标含义,帮助用户快速选择想要的数据指标。
    • 支持勾选指标后,自动匹配合适的单位。用户手动修改单位后,会进行合适的数据换算。
    • 支持自定义填充颜色。
  • RUM: View 详情页,对性能事件信息可以快速筛选、搜索。
  • 告警: 告警策略详情页,增加告警记录不同等级的统计数与筛选功能。
  • 仪表板、RUM、LLM 应用,增加设置按钮,可以快速进入设置页面。

v1.12.0 版本发布

· 阅读需 3 分钟

重大更新(Breaking Changes)

重大更新

Lighthouse 探索 LLM 应用的可观测性,正式推出「LLM 应用」模块,旨在帮助企业监控 LLM 应用的性能,及时发现 LLM 应用的性能瓶颈、优化资源利用等。

目前,Lighthouse 可以观测应用系统中调用的 LLM 应用的 Session、Trace 维度的性能数据及使用情况,例如 Input、Output、响应时间、Token 消耗等等

imgimg

新增特性(Feature)

  • APM: 「资源分析」模块的资源调用拓扑,新增折叠资源功能。默认折叠调用百分比小于 1% 的资源,用户也可自定义修改折叠阈值。
  • LOG: 单条日志详情,可以一键跳转到关联的调用链详情页。

v1.6.0 版本发布

· 阅读需 2 分钟

新增特性(Feature)

  1. RUM:会话分析模块增加 View 类型的性能数据与详情页
  2. ITIM:主机、容器增加蜂窝图展示
  3. 仪表板:图表类型新增柱状图、表格
  4. 告警
    1. 告警通知支持 Webhook、飞书机器人
    2. 提供告警内容标准模版,并支持自定义
    3. 告警记录新增详情页,可以查看告警触发最近一段时间的指标趋势变化