
本站推荐电影
本站推荐电视剧
电影下载排行
电视剧下载排行

A |
一键部署OpenClaw 做外贸网站、跨境电商独立站,服务器放哪里直接决定了海外客户的打开速度。

B | 作者 | Steef-Jan Wiggers 译者 | 平川 OpenAI 的工程师们花了数周时间,试图解释 Rockset 中那些神秘的崩溃问题。

C | 选错了节点,加载慢、跳出率高、转化率低,广告投放的钱白花。Rockset 是一款 C++ 数据基础设施服务,为 ChatGPT 的搜索和数据插件提供支持。 核心原则:服务器离目标客户越近,访问速度越快。函数似乎会返回错误的内存地址,栈指针在执行过程中似乎会偏移 8 个字节。团队提出的每一种假设都面临着有力的反证。

D | 北美节点:全球最大电商市场首选 美国数据中心主要集中在美国西海岸(洛杉矶、圣何塞、西雅图)和东海岸(纽约、弗吉尼亚)。美国客户访问延迟20-50ms,加拿大客户30-70ms。优势在于带宽资源丰富且成本低廉——美国数据中心的带宽价格通常只有欧洲和亚洲的一半甚至更低。这个 Bug 似乎根本不可能存在。技术生态成熟,各类SaaS工具、支付接口的集成文档都以北美环境为默认示例。适合目标市场以北美为主的外贸独立站和跨境电商平台。 欧洲节点:GDPR合规与多语言市场的平衡点 欧洲主要数据中心在法兰克福、阿姆斯特丹、伦敦和巴黎。

E | 西欧客户延迟仅10-40ms。最大差异化优势是合规性——GDPR要求欧盟公民的个人数据必须在合规框架内处理,选择欧盟境内的数据中心天然符合要求。 他们原本以为是一个 Bug ,结果却发现是两个互不相关的 Bug ,它们只是很巧合地在同一时间被发现了。缺点也很明显:带宽成本高于北美,同等配置价格通常贵20%-40%。这一突破性发现并非来自对单个崩溃事件的深入排查,而是源于转向了他们所说的“流行病学调试”:构建一条管道,自动分析过去一年中生产环境的每一个核心转储文件,然后寻找整体规律,而不是对单个案例进行推断。 该团队让 ChatGPT 编写了一个脚本,用于下载每个核心文件的开头部分,提取寄存器数据,过滤已知的误报,并将每次崩溃标记为“返回空指针”、“栈对齐错误”或其他类型。适合处理欧盟用户数据的业务。他们将该脚本并行应用于过去一年中的所有 Rockset 核心转储文件。

F | 亚洲节点:新兴市场与亚太区域的最佳入口 亚洲主要数据中心在新加坡、香港、东京。香港节点对国内用户最友好,实测平均延迟仅18ms。

G | 新加坡面向东南亚各国延迟控制在60ms以内。

H | 他们很快就发现了相关性。但亚洲带宽成本昂贵,同等配置价格通常是美国的2-3倍。原本从症状上看属于同类的问题,实际上对应两组特征完全不同的崩溃事件。适合面向东南亚客户或需要兼顾国内外市场的业务。 选型速查表: 客户70%在美国 → 洛杉矶或纽约 客户分布在英国、德国、法国 → 法兰克福或阿姆斯特丹 客户主要在东南亚 → 新加坡 需要兼顾国内和海外 → 香港 全球客户分散 → 美西主站 + CDN覆盖 没有完美的服务器,只有最适合你客户的服务器。
这些因栈对齐错误导致的崩溃均源自同一个 Azure 区域,有明确的起始日期,而且从未出现在长期运行的节点上。选之前先问自己:我的客户在哪里?
申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!。团队追踪发现,这些崩溃源自一台物理主机,其 CPU 正在悄无声息地产生错误的结果。它既没有过热,也没有抛出机器检查异常,而只是数学运算默默出了错。将该主机从服务中移除后,因栈对齐错误导致的崩溃便完全消失了。 在剔除硬件崩溃问题后,剩余的由“返回空指针”导致的崩溃问题便变得可控了。此前,团队曾排除了 C++ 异常展开的原因,因为他们认为自己找到了反例:在未使用异常的代码路径中发生了崩溃。但这些反例全都来自有硬件损坏的故障集群。

I | 一旦剔除了这些干扰因素,剩余的所有崩溃便都是发生在异常展开过程中了。 问题发生的根本原因是 GNU libunwind 的 _Ux86_64_setcontext 函数中有一个已经存在 18 年的竞争条件。在 C++ 异常展开过程中,libunwind 会在栈上合成一个 ucontext_t 结构体,填充所需的寄存器状态,然后调用 _Ux86_64_setcontext 将控制权转移给清理处理程序。问题在于:_Ux86_64_setcontext 在从旧结构体中读取指令指针的操作尚未完成之前,就将栈指针(%rsp)更新为指向新的栈帧。

J | 一旦 %rsp 发生变化,该结构体便不再属于活动栈的一部分,也不再受内核红区的保护。如果信号恰好在 %rsp 更新与 %rip 读取之间的这一时间窗口内到达,内核就会在该结构体之上构建其信号帧,指令指针遭到破坏,函数便会跳转到 NULL 或垃圾地址。 竞争窗口的宽度正好为一条指令。以现代处理器的时钟频率计算,这大约相当于 100 皮秒。在大多数程序中,这种情况根本不会被触发。OpenAI 的 Rockset 使用了 timer_create 函数,每隔几毫秒的 CPU 时间就发送一次 SIGUSR2 信号,为的是实现轻量级的按查询记账,这样产生的信号发送事件远多于传统的应用程序。正是这种高频的信号发送,将只在理论上可能发生的竞争状况转化成了实际生产环境中的崩溃。 该团队将一个修复方案和一个自包含的重现示例提交到了 GNU libunwind,并通过验证证实,其他展开器(如 libgcc)不存在这个问题。

K | 该修复方案通过重新排序指令,确保在更新 %rsp 之前先读取 %rip,从而彻底消除了这个时间窗口。

L | 该团队对这一教训的总结值得全文引用: 最重要的步骤并非巧妙地解读汇编代码,也不是对细节的深入了解,而是构建一个高质量的数据集。如果没有这个数据集,我们就会把两种截然不同的现象混为一谈,并试图通过推理来理清这种混乱。一旦获得了准确且完整的全量数据,问题的结构便显而易见了。

M | 如果你的团队正在排查难以解释的生产环境崩溃问题,请检查你们是否将多个 Bug 混为一谈。那些看似与所有假设都不相符的症状,实际上可能并不矛盾;它们可能与两个不同的假设相符,而你却无意中将它们混淆了。洞察问题结构的最快途径,并非对单个案例进行更深入的分析,而是获取涵盖所有故障案例的完整、带标签的数据。

N | 这篇完整的工程技术博文包含了详细的栈内存示意图、存在漏洞的汇编指令,以及揭示出两种不同类型故障的崩溃率可视化图表。 https://www.infoq.com/news/2026/07/openai-libunwind-core-dumps/ 声明:本文由 InfoQ 翻译,未经许可禁止转载。
Current article:http://8ltpl81.feishuozhuangkeqi.cyou/list_i5n3j/mqwnish.html
Published on:02:14:21