所有AI工具AI其他工具AI开源项目

EvalScope开源项目 – 一站式大模型评估框架

EvalScope 是一个一站式大模型评估与性能基准测试框架,旨在让模型评估变得高效且个性化。它支持多种模型类型,包括大语言模型、多模态模型和嵌入模型,并提供多种评估场景,如端...

标签:

AI交流(进群备注:EvalScope)

EvalScope 是一个一站式大模型评估与性能基准测试框架,旨在让模型评估变得高效且个性化。它支持多种模型类型,包括大语言模型、多模态模型和嵌入模型,并提供多种评估场景,如端到端RAG评估、竞技场模式和推理性能测试。此外,EvalScope 内置了丰富的基准测试和指标,如MMLU、CMMLU和GSM8K,帮助用户全面评估模型性能。

EvalScope的特点:

  • 1. 支持多种模型类型,涵盖大语言模型、多模态、嵌入模型等
  • 2. 提供多种评估场景,包括端到端RAG评估、竞技场模式和推理性能测试
  • 3. 内置丰富基准测试和指标,如MMLU、CMMLU和GSM8K

EvalScope的功能:

  • 1. 用于大语言模型的性能评估
  • 2. 用于多模态模型的基准测试
  • 3. 用于嵌入模型的端到端评估
  • 4. 用于推理性能的测试与优化

相关导航

暂无评论

暂无评论...