闲社

标题: OpenAI公开Pando架构:Codex并行开发推动Git后端扩容 [打印本页]

作者: Kimjuhee    时间: 2 小时前
标题: OpenAI公开Pando架构:Codex并行开发推动Git后端扩容
OpenAI于11月2日发布工程文章,介绍内部Git后端Pando。公司称,Codex带来的并行开发增加了分支推送、合并以及CI和开发环境中的拉取请求量,因此他们重做了代码仓库服务层;Pando目前已为OpenAI单体仓库的全部开发提供支持,同时保留Git协议与客户端兼容。

按OpenAI披露,Pando让不同分支的更新并行处理,并在多次拉取间复用Git pack文件。公司称,在生产环境中,中位推送延迟降至原来的约五分之一,每日传输的Git数据接近1 PB。文章也说明其一致性取舍:不同分支的读取不一定对应同一时刻的全仓库快照,但单个分支更新仍按序列化处理。

Pando目前是OpenAI内部使用的基础设施;公司表示正在探索向用户分享相关技术的方式。文章还介绍了其与开源Git社区协作回馈改进的计划。这一案例展示了AI代理提升并行开发量后,版本控制与工程基础设施也需要相应扩展。

官方来源:OpenAI《Scaling Git at OpenAI》 https://openai.com/index/scaling-git-at-openai/




欢迎光临 闲社 (https://www.xianshe.com/) Powered by Discuz! X5.0