对 Datawire 的采访

2018年3月16日作者 Brian Brazil

在我们的 Prometheus 用户系列采访中,Datawire 的 Richard Li 讲述了他们如何过渡到 Prometheus 的过程。

您能介绍一下自己以及 Datawire 的业务吗?

在 Datawire,我们制作开源工具,帮助开发者在 Kubernetes 上更快地编写代码。我们的项目包括用于 Kubernetes 服务本地开发的 Telepresence;基于 Envoy Proxy 构建的 Kubernetes 原生 API 网关 Ambassador;以及一个构建/部署系统 Forge

我们在 AWS 的 Kubernetes 上运行着多项关键云服务,以支持我们的开源工作。这些服务支持的用例包括每天动态配置数十个 Kubernetes 集群,这些集群随后被我们的自动化测试基础设施使用。

您在使用 Prometheus 之前的监控经验如何?

我们之前使用 AWS CloudWatch。它设置起来很简单,但我们发现随着我们采用更分布式的开发模式(微服务),我们希望拥有更大的灵活性和控制力。例如,我们希望每个团队都能根据需要自定义他们的监控,而无需操作人员的帮助。

您为什么决定考虑使用 Prometheus?

我们有两个主要需求。首先,我们希望这里的每一位工程师都能够对其服务拥有操作控制和可见性。我们的开发模式在设计上是高度分散的,我们力求避免工程师需要等待其他工程师才能完成任务的情况。对于监控,我们希望工程师能够对他们的指标基础设施拥有极大的灵活性和控制权。我们的第二个需求是一个强大的生态系统。一个强大的生态系统通常意味着成熟(且有文档记录的)最佳实践、持续的开发,以及在你遇到困难时能够提供帮助的众多人员。

Prometheus,特别是 Prometheus Operator,符合我们的要求。借助 Prometheus Operator,每位开发者都可以根据需要创建自己的 Prometheus 实例,而无需运维人员的帮助(没有瓶颈!)。我们也是 CNCF 的成员,在 Kubernetes 和 Envoy 社区拥有丰富的经验,因此考虑 Prometheus 这个 CNCF 社区也是顺理成章的。

Datawire's Ambassador dashboards

你们是如何过渡的?

我们知道我们想从将 Prometheus 与我们的 API 网关集成开始。我们的 API 网关使用 Envoy 进行代理,Envoy 会使用 statsd 协议自动发出指标。我们安装了 Prometheus Operator(一些详细说明可参见此处),并配置它开始从 Envoy 收集统计数据。我们还根据另一位 Ambassador 贡献者的一些工作设置了一个 Grafana 仪表板。

切换后您看到了哪些改进?

我们的工程师现在能够查看 L7 流量。我们还能够使用 Prometheus 比较金丝雀部署的延迟和吞吐量,从而让我们更有信心新版本的服务不会导致性能退化。

您认为 Datawire 和 Prometheus 的未来会怎样?

使用 Prometheus Operator 仍然有点复杂。我们需要为我们的服务团队找出操作最佳实践(何时部署 Prometheus?)。然后,我们需要向工程师们普及这些最佳实践,并培训他们如何配置 Operator 以满足他们的需求。我们预计这将是一个需要进行一些实验的领域,以便我们弄清楚哪些可行,哪些不可行。