如何用book-to-skill处理大型书籍REPL式grep/sed探查替代整本通读【免费下载链接】book-to-skillTurn any technical book PDF into a Claude Code skill — ready to study, reference, and use while you work.项目地址: https://gitcode.com/GitHub_Trending/bo/book-to-skillbook-to-skill 是一款免费的开源书籍转技能工具能把技术书籍 PDF 变成结构化的 Agent 技能。处理超过 5 万 token 的大型书籍时正确的做法不是整本通读而是用wc、grep、sed加定点读取四条命令做REPL 式探查——把书当可查询语料切片读取让生成成本与输出成正比而不是与书的大小成正比。 为什么整本通读是处理大书最贵的姿势把一本 200 页的技术书直接交给 AI意味着同样的内容被反复拖进上下文200 页的书约75k tokens逐章转换要跑约 28 遍每遍重读大量原文 → 输入 token 最高冲到200 万之后每次提问Agent 重新翻目录、定位、回溯的开销又叫发现循环税Discovery Loop Taxbook-to-skill 的答案是探查只取需要的切片把整本书装进上下文的成本从每次都付变成一次都不付。 REPL 式探查把书当可查询的语料库SKILL.md 中的Step 2.6规定书籍超过约50k tokens时把提取出的full_text.txt当作可查询语料库用 shell 命令探查而不是整文件 Read。四步组合# 1. 先摸清体量 wc -w full_text.txt # 2. 定位章节位置不加载整个文件 grep -n -E ^\s*(Chapter|CHAPTER)\s[0-9] full_text.txt | head -40 # 3. 只切出需要的章节 sed -n start,endp full_text.txt # 4. 写进技能前先验证框架确实存在 grep -c -i westrum\|dora full_text.txt第 4 步最容易被忽略把框架名写进 SKILL.md 之前先用grep -c确认原文真的提到过——这是防止凭空捏造书中没有的框架的硬性保险。 这条技术用在哪些环节按 SKILL.md 的说明REPL 式探查贯穿三个环节转换步骤探查动作结构分析Step 3grep找出全部章节标题行号建立章节地图逐章摘要Step 7sed按行号切出单章原文再总结术语/模式提取Step 8grep -c验证术语出现频率与章节分布5 万 token 以下的小书不必启用切片模式一次性读完即可——门槛判断由转换流程自动完成。 实测成本切片读能省多少项目用tiktoken实测方法见 docs/performance.md复现脚本 tools/discovery_tax.py书籍整本塞入上下文发现循环book-to-skill节省倍数Think Python 2小119,26412,152~5,00024×Working Backwards中175,25333,444~5,00035×AI Engineering大256,28777,866~5,00051×关键在最后一列常驻核心 单个章节约5,000 token的开销是恒定的不随书的长度增长——书越大省得越多。 完整流程一览从 PDF 到可用技能提取/book-to-skill ./my-book.pdfscripts/extract.py 生成full_text.txt和metadata.json含字数、token 数成本预检生成前报告预估 token 与耗时确认后才继续REPL 探查大书用上面的四条命令完成结构分析与逐章摘要生成技能SKILL.md核心框架 索引 每章一个文件按需加载 词汇表/模式/速查表日常使用/my-book replication直接问主题Agent 自动读对应章节作答完整流水线见 docs/how-it-works.md各种调用方式见 docs/usage.md。 小结处理大型书籍的成本应取决于输出而非来源——这就是 REPL 式探查的核心50k token 是分水岭小书整读大书用grep/sed切片生成前的grep -c验证是从机制上杜绝幻觉的一层保险转换完成后每次提问只花约 5,000 token比整本通读省 24×–51×【免费下载链接】book-to-skillTurn any technical book PDF into a Claude Code skill — ready to study, reference, and use while you work.项目地址: https://gitcode.com/GitHub_Trending/bo/book-to-skill创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考