A / B测试改变了行业的运作方式 – 不再是耸肩决定和盲目推动的日子。根据马克桑德森的说法，营销人员还没有看到这项技术的全部潜力。
我们今天所知道的有助于我们进行谷歌搜索的市场测试正在被从酒店业到制造业的行业所模仿，以帮助更好地关注他们的产品和服务并满足客户需求。那么谷歌做了什么？
如果您通过互联网档案馆浏览互联网时间，您可以看到谷歌在20多年前首次推出后不久的样子。
虽然徽标很熟悉，但网站的外观和感觉与现在完全不同。Google如何发展成为我们今天使用的速度更快，更易于阅读，更易于阅读的页面和应用程序？
一位谷歌高级员工告诉我，搜索引擎通过严格的原型测试保持领先于竞争对手。在我们发言时，通过测量雇佣测试对象对特定特征和设计的反应，对原型进行“离线”测试。但很快测试就转移到了“在线”，我们都成了A / B测试的主题。
什么是A / B测试？
A / B测试是指公司允许用户访问网站或应用程序的两个版本之一：
A）当前版本，和
B）原型。
在测试期间测量用户与产品交互的方式。根据特定标准，这些相互作用的细微差别可以说明哪个版本更有效。如果原型被证明是优越的，它将现有版本替换为默认产品。
Google工程师在2000年进行了第一次A
/ B测试，以确定每页应显示的最佳搜索结果数。
统计决定，而不是经理
网站和应用程序已经成为比较的集合，共同将系统发展为改进的状态。对接口的每次更改或对算法的更改都经过A / B测试。
网络公司进行了大量的测试。在一次谈话中，微软表示Bing搜索引擎每月运行1000多个。事实上，每当我们访问互联网网站或应用程序时，我们很可能不知道A / B测试的主题。我们很少意识到测试，因为变化通常是微妙的。
公司能够进行如此多的测试，他们已经转移到一个称为爬山的过程：采取小步骤，逐渐变得更好。这种方法非常成功，它推动了许多公司今天的创新。
团队负责增加用户措施的目标。如果一个小的调整坦克，它就会掉线。如果它取得胜利，它就会启动。决策是由统计数据而非管理者决定的。
事实上，A / B测试的拥护者强调忽视管理者的观点的重要性，他们称之为HiPPO–“最高薪酬人士的意见”。这个首字母缩略词是由亚马逊早期员工Greg
Linden的故事创造出来的。林登建议，就像超市在结账队列中放杂志和小吃一样，亚马逊应该采用与其在线购物车相同的方法。
他回忆说，“高级副总统已经死定了”这个想法，担心会阻止人们退房。
Linden忽略了HiPPO并进行了A /
B测试。结果显示亚马逊会赚更多钱而不会失去客户，因此林登的想法已经启动。事实证明，A / B测试比任何HiPPO更准确，更快速，更少偏见。
A / B测试无法解决所有问题
A / B测试的复杂部分是弄清楚如何以一种能够产生所需洞察力的方式衡量用户。测试需要仔细设计，并不断审查。
做错了，你可以在短期内取得成功，但从长远来看是失败的。一个宣传名人花絮的新闻网站可能会立即获得点击的满足感，但随着时间的推移会失去忠诚的读者。
A / B测试可以观察到的限制也是有限的。测试依赖于在移动屏幕上测量用户输入，鼠标点击，键入，口头命令或点击。Spotify最近询问某人是否在后台播放了播放列表并且他们没有与他们的手机进行交互，Spotify如何衡量用户是否满意？目前没有人有答案。
来自The Conversation的更多信息：谷歌达到了20美元，但它会难以成为像苹果这样的万亿美元公司吗？»
离线进行A / B测试
尽管存在这些风险和局限性，A / B测试的成功遍及所有具有互联网存在的公司。现在，这个测试正在物理世界中进行试验。
几年前，我遇到了一家公司，它打印并向客户发送水电费。他们A / B测试了不同格式的账单，了解哪种格式提高了客户按时付款的费率。
据报道，餐馆和酒吧使用来自传感器的数据来了解哪种餐厅布局鼓励了最多的销售。例如，如果酒吧后面的私密座位安排吸引人们停留更长时间，那个空间的顾客可能会在饮料上花更多钱。
A / B测试甚至可以扩展到制造业。可以在柔性生产线上制造略有不同版本的产品。如果发现该产品的一个版本比另一个版本更好，则可以改变生产。
它并不总是顺畅，但A / B测试的力量仍然存在。
马克桑德森，RMIT大学信息检索教授
本文根据知识共享许可在The Conversation中重新发布。阅读原始文章。
进一步阅读：
语音技术正在改变搜索引擎优化：这是品牌可以做些什么？
想要在Google上排名更高？停止与自己竞争»
图片来源：Cam Morin