登录
注册
开源
企业版
高校版
搜索
帮助中心
使用条款
关于我们
开源
企业版
高校版
私有云
模力方舟
AI 队友
登录
注册
代码拉取完成,页面将自动刷新
开源项目
>
前沿技术
>
低代码
&&
捐赠
捐赠前请先登录
取消
前往登录
扫描微信二维码支付
取消
支付完成
支付提示
将跳转至支付宝完成支付
确定
取消
Watch
不关注
关注所有动态
仅关注版本发行动态
关注但不提醒动态
7
Star
109
Fork
22
UBML
/
code-agent
代码
Issues
3
Pull Requests
0
Wiki
统计
流水线
服务
质量分析
Jenkins for Gitee
腾讯云托管
腾讯云 Serverless
悬镜安全
阿里云 SAE
Codeblitz
SBOM
开发画像分析
我知道了,不再自动展开
更新失败,请稍后重试!
移除标识
内容风险标识
本任务被
标识为内容中包含有代码安全 Bug 、隐私泄露等敏感信息,仓库外成员不可访问
[M6] 实体生成质量评测集
已完成
#IJYT99
Sagi
拥有者
创建于
2026-07-04 22:54
## M6 实体生成质量评测集 > **一句话**:准备 ≥10 条中文自然语言需求,统计通过率与修复轮次,证明 E2 真的更稳。 | 项 | 内容 | |----|------| | **难度** | 中 | | **主要改动的包** | `packages/knowledge/eval` | | **建议标题** | `[M6] 实体生成质量评测集` | | **前置依赖** | M4(可与 M5 并行) | **背景** 没有可重复评测,就无法证明「建模操作化」比纯提示词更稳。需参照 `packages/knowledge/eval/` 现有做法建立实体专用任务集与 runner。 **你要做什么** 1. 新建 `eval/entity-generation-tasks.json`(≥10 条中文需求,覆盖 §6.3 所列场景); 2. 新建 `eval/eval-entity-generation-core.ts`,输出 `verifyPassRate`、`avgRepairRounds` 等; 3. 文档说明如何本地运行与解读指标。 **主要涉及的文件** - `packages/knowledge/eval/entity-generation-tasks.json` - `packages/knowledge/eval/eval-entity-generation-core.ts` - `docs/MOF-ENTITYGEN-V0-ACCEPTANCE-CHECKLIST.md`(可链接) **怎样算做完** - [ ] 评测集 ≥10 条且场景覆盖清单完整; - [ ] runner 可重复执行并输出 JSON / 控制台摘要; - [ ] 文档写明首期指标目标与 Agent 自动化 eval 的边界。 --- **文档**:https://gitee.com/ubml/code-agent/blob/main/docs/product-design/11-mof-entity-community-issues.md 认领前请在评论说明意向。
## M6 实体生成质量评测集 > **一句话**:准备 ≥10 条中文自然语言需求,统计通过率与修复轮次,证明 E2 真的更稳。 | 项 | 内容 | |----|------| | **难度** | 中 | | **主要改动的包** | `packages/knowledge/eval` | | **建议标题** | `[M6] 实体生成质量评测集` | | **前置依赖** | M4(可与 M5 并行) | **背景** 没有可重复评测,就无法证明「建模操作化」比纯提示词更稳。需参照 `packages/knowledge/eval/` 现有做法建立实体专用任务集与 runner。 **你要做什么** 1. 新建 `eval/entity-generation-tasks.json`(≥10 条中文需求,覆盖 §6.3 所列场景); 2. 新建 `eval/eval-entity-generation-core.ts`,输出 `verifyPassRate`、`avgRepairRounds` 等; 3. 文档说明如何本地运行与解读指标。 **主要涉及的文件** - `packages/knowledge/eval/entity-generation-tasks.json` - `packages/knowledge/eval/eval-entity-generation-core.ts` - `docs/MOF-ENTITYGEN-V0-ACCEPTANCE-CHECKLIST.md`(可链接) **怎样算做完** - [ ] 评测集 ≥10 条且场景覆盖清单完整; - [ ] runner 可重复执行并输出 JSON / 控制台摘要; - [ ] 文档写明首期指标目标与 Agent 自动化 eval 的边界。 --- **文档**:https://gitee.com/ubml/code-agent/blob/main/docs/product-design/11-mof-entity-community-issues.md 认领前请在评论说明意向。
评论 (
1
)
登录
后才可以发表评论
状态
已完成
待办的
进行中
已完成
已关闭
负责人
未设置
Sagi
Sagi_Chen
负责人
协作者
+负责人
+协作者
标签
未设置
标签管理
里程碑
实现自然语言创建并预览业务实体模型
未关联里程碑
Pull Requests
未关联
未关联
关联的 Pull Requests 被合并后可能会关闭此 issue
分支
未关联
分支 (
-
)
标签 (
-
)
开始日期   -   截止日期
-
置顶选项
不置顶
置顶等级:高
置顶等级:中
置顶等级:低
优先级
不指定
严重
主要
次要
不重要
参与者(1)
TypeScript
1
https://gitee.com/ubml/code-agent.git
git@gitee.com:ubml/code-agent.git
ubml
code-agent
code-agent
点此查找更多帮助
搜索帮助
Git 命令在线学习
如何在 Gitee 导入 GitHub 仓库
Git 仓库基础操作
企业版和社区版功能对比
SSH 公钥设置
如何处理代码冲突
仓库体积过大,如何减小?
如何找回被删除的仓库数据
Gitee 产品配额说明
GitHub仓库快速导入Gitee及同步更新
什么是 Release(发行版)
将 PHP 项目自动发布到 packagist.org
评论
仓库举报
回到顶部
登录提示
该操作需登录 Gitee 帐号,请先登录后再操作。
立即登录
没有帐号,去注册