zhizhi/server/age-os/mcp-server/tools
copilot-swe-agent[bot] ba4c233509
fix: COS训练Agent大文件崩溃 — 添加Buffer安全处理、HEAD预检、分块提取策略
修复两个训练失败根因:
1. conversations.json (665MB) 超过Node.js字符串限制导致ERR_STRING_TOO_LONG崩溃
2. 单文件崩溃导致整个训练管线中断,后续文件无法处理

- cos.js: 添加readBuffer/head/readPartial方法,cosRequest增加try/catch防止未捕获异常
- corpus-extractor-ops.js: 超大文件(>200MB)采用分块采样策略,ZIP文件提前检测避免无效读取
- cos-training-trigger.js: 增加文件大小预警日志,分类计数(成功/跳过/失败)

Agent-Logs-Url: https://github.com/qinfendebingshuo/guanghulab/sessions/f10f1b02-ed4e-4ee8-ac27-0580c1cf8a7e

Co-authored-by: qinfendebingshuo <207279273+qinfendebingshuo@users.noreply.github.com>
2026-04-11 00:55:39 +00:00
..
corpus-extractor-ops.js fix: COS训练Agent大文件崩溃 — 添加Buffer安全处理、HEAD预检、分块提取策略 2026-04-11 00:55:39 +00:00
cos-comm-ops.js 修复代码审查和安全扫描反馈 · ID碰撞修复+权限声明+正则安全+敏感信息过滤 2026-04-08 13:23:34 +00:00
cos-ops.js feat(S15): MCP Server API Key鉴权 + Nginx反向代理 + 人格体COS隔离路径 + D51-3密钥生成器 2026-04-07 15:14:43 +00:00
cos-persona-db-ops.js 实施7大技术模块(A-G) · 新增40个MCP工具 · 工具总数51→91 2026-04-08 13:18:49 +00:00
cos-watcher-ops.js feat: COS桶轮询守护进程 · SCF事件替代方案 (cos-watcher.js) 2026-04-10 12:43:16 +00:00
finetune-engine-ops.js 修复代码审查反馈 · 成本参数添加日期注释 · 移除意外提交的备份文件 2026-04-08 14:00:30 +00:00
github-ops.js Fix: GitHub path encoding, MCP gateway write-tool security, content preview constant 2026-04-04 15:24:09 +00:00
light-tree-ops.js fix: address code review — improve path generation fallback, add tianyan refresh logging, clarify HLDP version note 2026-04-09 04:35:07 +00:00
living-module-ops.js 🧬 S5·Agent系统级第1次唤醒: LivingModule活模块基类+注册中心+HLDP通信总线+调度引擎v2.0+MCP工具(60个) 2026-04-08 10:47:08 +00:00
node-ops.js 修复代码审查问题: SQL参数化/关系查询逻辑/数据库密码校验 2026-04-03 07:36:33 +00:00
notion-cos-bridge-ops.js 修复代码审查和安全扫描反馈 · ID碰撞修复+权限声明+正则安全+敏感信息过滤 2026-04-08 13:23:34 +00:00
notion-ops.js D51 S6+S7: Notion client, GitHub client, 11 new MCP tools, 3800→3100 gateway 2026-04-04 15:21:18 +00:00
notion-permission-ops.js 修复代码审查和安全扫描反馈 · ID碰撞修复+权限声明+正则安全+敏感信息过滤 2026-04-08 13:23:34 +00:00
persona-ops.js fix: address code review feedback - move crypto import, remove eval in workflows 2026-04-07 12:18:33 +00:00
relation-ops.js 修复代码审查问题: SQL参数化/关系查询逻辑/数据库密码校验 2026-04-03 07:36:33 +00:00
structure-ops.js AGE OS 落地系统架构 v1.0 · D45 · 数据库Schema + MCP Server骨架 + Agent框架 + 密钥扩展 2026-04-03 07:33:09 +00:00
training-agent-ops.js 修复代码审查和安全扫描反馈 · ID碰撞修复+权限声明+正则安全+敏感信息过滤 2026-04-08 13:23:34 +00:00