《工程师实验》一书教读者如何使用实验方法改进工程系统。实验是在真实的生产系统上运行的,所以它们需要高效且谨慎地完成。这本书告诉你如何去做。工程师实验:从A/B测试到贝叶斯优化是一个用于评估新特征和微调参数的技术工具箱。您将从深入研究A /B测试等方法开始,然后过渡到用于衡量金融和社交媒体等行业性能的先进技术。学习如何评估您对系统所做的更改,并确保您的测试不会影响收入或其他业务指标。完成后,你将能够在生产环境中无缝部署实验,同时避免常见的陷阱。 《工程师实验》大致分为三部分:引言(第1章)、实验方法(第2-6章)和适用于所有方法的信息(第7章和第8章)。 第1章鼓励实验,描述它如何与其他工程实践相结合,并介绍业务指标。 第2章解释A/B测试和实验的基本原理。 第3章展示了如何使用多臂匪徒加速A/B测试。 第4章主要讨论数值参数系统,并介绍了响应面的思想。 第5章使用了一个多臂赌博机来优化那些需要频繁测量指标的特殊情况下的参数。 第6章将响应面和多臂土匪的概念结合到一种称为贝叶斯优化的方法中。 第7章将更深入地讨论业务指标。 第8章警告读者在实验中常见的陷阱,并讨论缓解措施。