Skip to content

[疑问] ais_bench如何生成自定义多轮数据集,并进行测试 #102

Closed

Description

@ivan-zouming

疑问描述

ais_bench如何生成自定义多轮数据集,并进行测试

前置检查

  • 我已读懂主页文档的快速入门,无法解答我的疑惑

Activity

  1. github-actions commented on Jan 9, 2026

    @github-actions

    🌟欢迎给AISBench benchmark测评工具提issue,您可以先尝试以下途径寻求issue的解决方法:

    1. 【强烈推荐❤️‍🔥】确保issue描述完整后,可以试着将issue交给Ask DeepWiki回答,deepwiki包含了和工具相关的所有知识库
    2. 在 工具历史issue 中通过问题的关键日志片段或关键词检索相似issue
    3. 在 官方文档 的搜索栏中通过问题的关键日志片段或关键词检索
    4. 寻求仓库维护者的帮助(issue评论区中 @SJTUyh)
  2. github-actions commented on Jan 9, 2026

    @github-actions

    🤖 基于AI机器人的issue内容完整性检查结果:

    问题内容检查结果

    检查状态

    PASS

    详细检查

    • 疑问描述: COMPLETE

    改进建议

    所有内容已完备!

    补充说明

    该 issue 包含了所有必需的章节,并且“疑问描述”部分提供了清晰、具体的问题描述,信息充足。

    👉 如果想重新检查,在评论区@issue_checker即可。

    【强烈推荐❤️‍🔥】确保issue描述完整后,可以试着将issue交给Ask DeepWiki回答,deepwiki包含了和工具相关的所有知识库

  3. SJTUyh commented on Jan 9, 2026

    @SJTUyh
    Collaborator

    AISBench目前没有专门的多轮对话自定义数据集,建议参考已有的多轮对话数据集做魔改,如果有专门诉求,可以提feature issue。
    魔改的方法可以问deepwiki:https://deepwiki.com/search/-aisbench_3235d558-b6bc-4bc9-8285-3bbfce2f4546?mode=fast

  4. SJTUyh commented on Jan 9, 2026

    @SJTUyh
    Collaborator

    deepwiki支持多轮对话,如果本身回答比较模糊,您可以结合自己具体的多轮对话数据集向它多次询问,帮助您魔改MTBench后接入测试

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Labels

    content_check_passedissue content check passedquestionFurther information is requested

    Type

    No type

    Projects

    No projects

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions