arXiv Artificial Intelligence· Indraneil Paul, Falko Helm, Goran Glava\v{s}, Iryna Gurevych·2026-10-15 12:00· 19 小时前AI 评分38

OctoLong：用跨仓库代码上下文做中期训练提升长上下文建模

OctoLong: Mid-Training On Cross-Repository Code Contexts Enhances Long-Context Modeling

AI 导读

OctoLong 是一套上下文工程流水线，借助 AST 解析器、语言服务器后端和包管理器递归检索代码引用，构建出可达数百万 token 的依赖丰富代码上下文。