streaming-export-safety

Installation
SKILL.md

流式导出 / 大对象内存安全

当一次性 in-memory 构建数据超过 1 万行 / 10 MB 时,必须切换为流式 API。 否则常见后果:OOM、Full GC 风暴、临时文件残留、HTTP 超时。


决策:什么时候必须流式?

数据量级 推荐模式 备注
≤ 1 万行 / ≤ 5 MB 内存构建 OK XSSFWorkbook / pandas / 普通 JSON 序列化
1 万 ~ 10 万行 强烈建议流式 单机够用,但有 OOM 风险
> 10 万行 / > 50 MB 必须流式 + 异步 内存模型会爆
数据量未知(用户驱动) 必须流式 + 上限保护 永远按最坏情况设计

核心判断:能不能预估上限?预估超过 1 万行就上流式。


Installs
1
GitHub Stars
985
First Seen
Jun 11, 2026
streaming-export-safety — doccker/cc-use-exp