在过去的几天里，网民们纷纷猜测去年在 Datadog 上花费了 6,500 万美元的加密货币公司究竟是谁。我个人认为，这家公司很可能是 Coinbase。

Datadog 是一家领先的可观察性工具提供商，自 2019 年上市以来，目前市值已达到 280 亿美元。2022 年，该公司实现了 16.7 亿美元的收入，平均每月约为 1.4 亿美元。在 5 月 4 日的财报电话会议上，首席财务官提及了一笔“非经常性支出”（non-recurring expense，也称为“一次性费用”），他表示：

“账单金额为 5.11 亿美元，同比增长 15%。我们在 2022 年第一季度为客户支付了一笔大额预付款，但在 2023 年第一季度没有类似的大额支出。基于对该客户的预估，账单同比增长率低于 30%。”

这个细节容易被忽略，因为增长率时而是 15%，时而是 30%。但参加电话会议的分析师们的主要任务是处理数据并揭示公司可能试图掩盖的信息。摩根大通的一位股票分析师就提出了这样的问题：

“关于这笔非经常性大额预付款，它似乎是大约 6,500 万美元。能否进一步说明一下？”

Datadog 的首席财务官 David Obstler 提供了更多详细信息：

“那是一家加密货币公司，它依然是我们的客户。不过，它是一个早期优化者。这家公司所处的行业正是我们一直在讨论、受影响最大、优化最多的行业。”

那么，这家神秘的加密货币公司到底是谁呢？投资者 Turner Novak 猜测可能是 Coinbase：

然而，他补充说，他无法百分之百确定是 Coinbase，因为在过去几年里，还有其他加密货币公司筹集了大量资金。

那么，Coinbase 是否在 2022 年在 Datadog 上花费了 6500 万美元呢？网络上有人冒充 Coinbase 员工，比如 Hacker News 上的一位匿名评论者，他声称 6500 万美元是三年的预付款（我无法核实这些信息）。为了揭示真相，我联系了公司的软件工程师。经过调查，我得到了答案：

确实如此。2021 年，Coinbase 在 Datadog 上花费了 6500 万美元，这是他们当年应付的账单。我可以证实这一点，因为我与 Coinbase 的现任和前任软件工程师进行了交谈，他们分享了事件的详细情况。

“该客户所处的行业在过去一年中遭受了巨大损失。从收入来看，他们自己的业务被削减了约四分之三。在这种情况下，我们也尝试与客户一起努力重组我们签订的合同。我们希望成为他们解决方案的一部分，而不是问题的一部分 (…) 我们重组了他们的合同，以确保未来仍能继续合作。”

这与我从和 Coinbase 工程师的交谈中了解到的一样。

Coinbase在2021年大爆发，当时公司并不用担心成本问题。该公司于当年6月上市，估值高达86亿美元。然而，时至今日，该公司的估值已经下跌了75%，约为140亿美元。

在繁荣时期，交易量激增，屡创新高，但Coinbase却难以持续这种增长。Coinbase首席执行官Brian Amstrong总结道：“很明显，2021年对Coinbase来说是令人难以置信的一年，这种事情在你的一生中，在商业生涯中很少见。我们的月交易用户达到1140万，创下历史新高，同比增长了400%，相当不可思议。”

在2021年夏季首次公开募股之后，公司不必太过关注基础设施成本，唯一的重点是增长。该公司支付了大量账单，其中包括给AWS、Snowflake和Datadog等公司支付的费用。因此，Datadog在2021年向Coinbase收取了6500万美元的账单。Coinbase在2022年第一季度结清了这笔账单。

在 2022 年初，Coinbase 面临着削减基础设施支出的压力。由于加密行业突然陷入低迷，Coinbase 的业务受到了很大影响。随着收入的减少，公司开始关注降低过高的成本。

为了实现这一目标，Coinbase 成立了一个专门的团队，计划从 Datadog 迁移到 Grafana、Prometheus 和 Clickhouse 技术栈。下面简要介绍这些技术：

Prometheus：这是一个非常受欢迎的时间序列数据库，用于监控系统和服务的开源解决方案。Prometheus 会根据预定的时间间隔从配置的目标（服务）收集指标数据，评估规则并触发警报。它主要用 Go 语言编写，同时还包含 Java、Python 和 Ruby 部分。Prometheus 使用高效的自定义格式将时间序列数据存储在内存和硬盘设备（HDD 或 SSD）上，并支持分片和联合查询。作为 Cloud Native Foundation 的一部分，Prometheus 的会员身份意味着基于它构建的解决方案是安全的，得到了积极维护，并将继续得到支持。Prometheus 可以自托管，同时一些云服务提供商也提供托管 Prometheus 服务。例如，Google Cloud 和 AWS 都在生产环境中提供此服务，而 Azure 提供预览版。

Grafana：用于可视化指标数据的前端工具。Grafana 是一种广受欢迎的开源分析和监控可视化解决方案。当需要展示或深入了解指标和警报时，它是首选工具，并在科技公司中广泛应用。例如，在我在优步工作时，Grafana 为我们的许多图表提供了支持。以下是可以尝试的 Grafana 仪表板示例：

Clickhouse：用于日志管理的开源列式数据库管理系统。Clickhouse 以其高速性能而受到欢迎，主要用 C++ 编写，并在整个行业得到广泛应用。例如，Cloudflare 使用 Clickhouse 存储其所有 DNS 和 HTTP 日志——每秒超过 1000 万行！优步也将 Clickhouse 作为其核心日志记录平台。

Coinbase 制定了一项内部策略，主要关注并非仅仅节省成本，而是获得对可观察性的完全控制和所有权。可观察性和可靠性是 Coinbase 的核心竞争优势，使其在竞争对手中脱颖而出。

然而，在加密市场陷入低迷的情况下，成本成为了主要的关注点，显然内部 Grafana/Prometheus 解决方案的成本要低得多。Coinbase 团队在过去的几个月里一直在开发新的技术栈，确保一切运行正常，并解决所有问题。

在故障迁移过程中，我们采用了表现良好的“双写入”策略。

因此，Coinbase原本打算终止与Datadog的合作，但在最后关头，Datadog挽救了双方的客户关系，使得Coinbase不得不接受这笔极具吸引力的交易。未来，Datadog的账单将远不及2021年的6500万美元。正如Brian Amstrong所说，这是一笔商业生涯中极为罕见的账单。

我询问了一位在Coinbase使用内部堆栈和Datadog的工程师，他对继续使用Datadog的决定表示赞同。他表示，考虑到Datadog提供的卓越开发体验和合理的成本，这是一个正确的决定。

Coinbase最终可以在内部设计出类似的体验。但是，要提供类似Datadog无缝的开发人员体验，可能需要花费数十年的工程时间。

在可观察性工具方面，"昂贵"是相对的。假设今天Coinbase每年仅在Datadog上花费1000万美元，这是否太多了呢？看着这个数字，很容易这么想。

但是，我们需要更深入地了解情况。像Datadog这样的平台有助于防止中断、立即检测并更快地缓解中断。2022年，Coinbase发生了17次停机，总停机时间约为12小时。根据2022年的收益，Coinbase的日均收入约为900万美元。

假设Datadog通过早期监控来防止中断，从而将中断次数减少了一半。这意味着，如果没有Datadog，我们将会看到24小时的停机时间，而不是12小时。此外，我们假设使用Datadog可以比没有使用Datadog时减少中断50%——这要归功于能够更快地将健康指标与日志、调试信息连接起来，查明根本原因并更快地缓解问题。在这种情况下，如果没有Datadog，我们可能会看到36小时的总停机时间，而使用Datadog则为12小时。以数字表示，该公司将获得大约900万美元的收入，否则它会损失这个收入，而现在1000万美元/年的费用实际上可以收回成本！

从Coinbase的成本削减活动中，我们可以学到什么？供应商对他们的客户减少支出守口如瓶，幸运的是Datadog提供了足够的提示来找出他们的“早期优化者”大客户是谁，并找出更多细节。但是，Coinbase的故事是否只是一次性的呢？

我不确定。三个月前，我报道了科技公司积极削减供应商支出的趋势，两个月后，《华尔街日报》也报道了同一主题。对我来说，Coinbase似乎很早就发现了成本优化趋势。但是，仔细查看我收集的回复，"AWS"和"Datadog"是被提及最多的两个供应商，因为基础设施和可观察性成本往往是最高的，而AWS是云基础设施的领导者，Datadog则是可观察性的领导者。

根据经验，您可以实现比供应商收费更低的基础设施成本。这是因为您和供应商可能都在使用相同的云基础设施提供商，例如 AWS、GCP 或 Azure。然而，您需要聘请一支专业工程团队并为其配备人员来构建和运行这些基础设施。

因此，从成本角度来看，您需要解决以下数学问题：

$infra_cost + $platform_team_cost < $current_vendor_costs

在这个问题中，$platform_team_costs 可能超过100万美元，甚至有时高达200万美元。这是因为您需要一个由4-5名工程师和一名经理组成的团队，他们的平均总薪酬为每年150-400万美元，具体取决于您的成本基础。

因此，当您的支出超过每年200-300万美元时，您可能会开始考虑自建而非购买。这个决策的经济性取决于供应商在原始基础设施成本之上收取的利润。Coinbase 面临的一个有趣问题是：在考虑到如此巨大的预计成本以证明拥有一个团队时，他们是否曾考虑自建？

对于 Coinbase 来说，在收到6500万美元的账单后，进行内部建设显然易如反掌。他们可以在湾区聘请一个由10名高级和职员级别的工程师组成的团队，而这个团队的成本仍然低于每年500万美元。接下来，他们只需为基础设施成本预算，就可以将年度费用降低至两位数。

虽然 Coinbase 计划离开 Datadog，但最终还是留了下来。然而，它并非唯一一家考虑在内部实现可观察性的大型科技公司。我还有另一个独家信息，甚至可能连 Datadog 都不知道：关于 Shopify 计划摆脱 Datadog 的报道。但最近的裁员是否会改变这一切呢？请关注我的完整报道《The Scoop》了解更多详细信息。