登录
注册
开源
企业版
高校版
搜索
帮助中心
使用条款
关于我们
开源
企业版
高校版
私有云
模力方舟
AI 队友
登录
注册
Gitee 618 年中盛典开启:企业版新购最高送一年,PocketClaw 首次限时折扣
代码拉取完成,页面将自动刷新
开源项目
>
人工智能
>
大模型
&&
捐赠
捐赠前请先登录
取消
前往登录
扫描微信二维码支付
取消
支付完成
支付提示
将跳转至支付宝完成支付
确定
取消
Watch
不关注
关注所有动态
仅关注版本发行动态
关注但不提醒动态
78
Star
167
Fork
50
AISBench
/
benchmark
代码
Issues
81
Pull Requests
7
Wiki
统计
流水线
服务
JavaDoc
PHPDoc
质量分析
Jenkins for Gitee
腾讯云托管
腾讯云 Serverless
悬镜安全
阿里云 SAE
Codeblitz
SBOM
开发画像分析
我知道了,不再自动展开
更新失败,请稍后重试!
移除标识
内容风险标识
本任务被
标识为内容中包含有代码安全 Bug 、隐私泄露等敏感信息,仓库外成员不可访问
[需求] synthetic数据集支持prefix_len
待办的
#IDAQOT
acarpw
创建于
2025-12-04 16:30
### 问题/痛点描述 验证prefixcache场景,通常需要包含公共前缀的数据集来验证收益,当前synthetic数据集不支持该特性。 ### 建议方案 建议synthetic的tokenid数据集中增加该参数,prefix_len为10,所有生成的数据前10个token一致,RequestSize表示包含了prefixlen之后的请求长度。 ``` synthetic_config = { "Type":"tokenid", "RequestCount": 10, "TrustRemoteCode": False, "TokenIdConfig" : { "RequestSize": 100, "PrefixLen": 10, #新增参数 } } ``` ### 备选方案 ### 预期价值 提升验证prefixcache场景效率,并且可以对齐vllm benchmark的能力 ### 参与意向 - [x] 我愿意参与此功能的开发或测试
### 问题/痛点描述 验证prefixcache场景,通常需要包含公共前缀的数据集来验证收益,当前synthetic数据集不支持该特性。 ### 建议方案 建议synthetic的tokenid数据集中增加该参数,prefix_len为10,所有生成的数据前10个token一致,RequestSize表示包含了prefixlen之后的请求长度。 ``` synthetic_config = { "Type":"tokenid", "RequestCount": 10, "TrustRemoteCode": False, "TokenIdConfig" : { "RequestSize": 100, "PrefixLen": 10, #新增参数 } } ``` ### 备选方案 ### 预期价值 提升验证prefixcache场景效率,并且可以对齐vllm benchmark的能力 ### 参与意向 - [x] 我愿意参与此功能的开发或测试
评论 (
0
)
登录
后才可以发表评论
状态
待办的
待办的
进行中
已完成
已关闭
负责人
未设置
标签
enhancement
未设置
标签管理
里程碑
未关联里程碑
未关联里程碑
Pull Requests
未关联
未关联
关联的 Pull Requests 被合并后可能会关闭此 issue
分支
未关联
分支 (
-
)
标签 (
-
)
开始日期   -   截止日期
-
置顶选项
不置顶
置顶等级:高
置顶等级:中
置顶等级:低
优先级
不指定
严重
主要
次要
不重要
参与者(1)
1
https://gitee.com/aisbench/benchmark.git
git@gitee.com:aisbench/benchmark.git
aisbench
benchmark
benchmark
点此查找更多帮助
搜索帮助
Git 命令在线学习
如何在 Gitee 导入 GitHub 仓库
Git 仓库基础操作
企业版和社区版功能对比
SSH 公钥设置
如何处理代码冲突
仓库体积过大,如何减小?
如何找回被删除的仓库数据
Gitee 产品配额说明
GitHub仓库快速导入Gitee及同步更新
什么是 Release(发行版)
将 PHP 项目自动发布到 packagist.org
评论
仓库举报
回到顶部
登录提示
该操作需登录 Gitee 帐号,请先登录后再操作。
立即登录
没有帐号,去注册