大约一年前，我们开始与营销团队一起开发一个新项目，在那里，我们回顾了在Auth0网站上工作了5年多的工作，看看如何改进它，同时考虑到我们合作的不同角色（开发人员、C级/业务角色和产品经理等）以及我们每天解决（B2B，B2C，B2E）。这导致我们执行了几轮用户测试，并牢记了一些目标。其中一个特别的问题是，了解网站访问者是否真正了解Auth0的价值主张。在回顾了这些测试中收集到的所有定性数据后，我们意识到10个人中有4个人在浏览主页后并不了解Auth0的功能-他们知道这是与身份验证有关的事情，但是对于它是否只是一个wiz可编辑的登录框、需要多少代码以及Auth0适用于哪些应用程序，想法各不相同。问题就在我们的掌心，我们应该重新审视过去的决定，并采取行动。第一团队：交叉协作与营销团队密切合作有很多好处：其中之一就是我们让成长团队不断地尝试改进Auth0用于与用户联系的不同环境的体验。另一个是：与内容团队并肩工作，为我们开展的每项活动确定基调和声音。最后，但并非最不重要的是，我们还有一支出色的用户界面工程师团队，他们一直支持我们将我们的设计放在外部互联网空间中，因此这是加强我们关系和与他们密切合作的理想时刻。为了实现这一目标，我们创建了一个跨职能团队，包括来自两个团队（成长团队和UI）的人员，我有机会与他们合作。一点一点地虽然该项目的主要目标是通过改变主页的消息传递和将Auth0的人物角色转移到他们旅途中的不同兴趣点来改进主页，但我们发现，通过重新组织和减少内容，可以实现一些关键目标，重点是：Auth0的价值主张社会证明（客户标识+证明）定价将这一目标转化为一种更为"营销导向的语言"，我们相信我们可以利用这个更新页面设计的机会，将主页的流量转移到高流量页面（例如，定价），除了优化主页的英雄体验以获取高影响力的线索（也与我们的cross团队目前正在进行的一些实验相一致——例如，添加一个输入字段来与专家交谈）。另一方面，迫切需要为当前的设计设定一些基准指标，以了解这种新设计会对哪些方面和多大程度产生影响，因此我们将收集到的不仅是我们自己的数据仓库中的信息，也包括谷歌分析（Google Analytics）和Hotjar（Hotjar）等工具提供的信息。对我们来说，一些曾经（现在仍然）重要的事情：页面浏览量（包括跳出率、页面访问量、页面停留时间），页面滚动（用户在离开页面之前真正看到了多少内容？）以及会话长度（用户在页面上花费了多少时间？）。休斯顿有个计划现在的问题是：我们怎样才能在不失去理智的情况下渡过难关？制定计划！首先，在回顾了我们目前收集到的所有信息之后，我们设想了一个设计计划，基本上包括对比当前的主页设计与理想的未来设计。我们还确定了哪些场景可以进行实验（例如，英雄单元和包含有用信息的所有部分，比如R.O.I.和资源）。换句话说，物联网，我们支持使用A/B测试作为一个快速而简单的反馈周期来验证决策。这不仅对我们自己也对参与项目的其他人有帮助，因为我们在这个新页面的每个模块后面设置了优先级和工作级别，这意味着我们可以同时处理不同的任务（例如：当Design在进行英雄单元探索时，内容包括功能描述、寻找推荐等）。总策划（A.A.Hero）该项目的首要任务是英雄部队的经验。为什么？因为这是用户到达网站主页时看到的第一件事，因此，它对转换指标的影响和风险最大。看起来很容易，对吧？事实上，这是整个项目中最困难的部分。（注：在讨论细节之前，我想向我们的高级增长策略师Drew Sing大声疾呼，他制定了不同的测试计划，使该项目的这一关键部分更加顺利，更容易通过。同时，热烈的掌声给了令人惊叹的用户界面工程师Bel Cortes，比较便宜的云服务器，如果没有他们，这将不会有光明的一天）。在从设计角度讨论了我们可以采用的不同方法后，我们意识到可以测试这种新型英雄单元设计的两个不同版本：其中之一可以包括设备组合，帮助用户理解Auth0平台可以工作的不同环境（web、移动等）另一个可以包括一个图表，帮助用户理解Auth0是如何工作的，只需几个简单的步骤。所以是的：我们有一个现有的设计，需要与两个设计进行对比，而不是一个。我们是如何前进的？我们计划按照这个方案进行两次不同的A/B测试：我们在所有新设计中还包括了对副本的更改，并将现有的CTA（"免费试用Auth0"和"与销售人员交谈"）更新为带有"Get Started"CTA的电子邮件字段，该CTA指导用户填写销售表格，永久免费的云服务器，以定制联系Auth0的体验。实验1：对照组（当前设计）与变型1（成分）左：控制/右：变型1假设：因为auth0.com主页接收到大量流量，所以我们希望将hero单元更新为一个电子邮件字段，其中包含一个指向销售表单填充的"入门"CTA将增加表单填充的数量。结果：在运行这个测试一个月后，我们发现在"快速入门"CTA旁边看到设备组合的用户比对照组转换了39%的表单填充。因此，这种变化证明了自己是一个值得的赢家，美国高防云服务器，在不损失表格填充质量的情况下获得更多的表格填充。实验2：对照组（优胜者设计-组合）与变型2（图表）左：赢家/右：变型2假设：因为auth0.com主页接收大量的流量，所以我们希望在主页的折叠部分上方有一个交互式图表可以帮助增加参与度指标，比如表单填充获取。结果：经过一个月的测试，我们发现对照组和变异组之间的表格填充转换率没有统计上的显著差异，但变化确实显示出表格填充量减少了7.8%。数字已经说了？在经历了不同的A/B测试后，获胜的设计是第一个变体（设备组合），也是您可以在我们全新的主页上看到的。虽然这些数字已经确定无疑，但我们了解到存在潜在的测试结果原因（例如，您可能会争辩说，在变体2中，图表可能会分散用户对CTA的注意力，即使它有有用的动画内容），我们将来肯定应该用不同的方法进行测试，看看会发生什么。剩下的设计怎么了？在这个项目的初级阶段，企业开发软件，我们的一部分发现（多亏了Hotjar和我们通过热图功能收集到的见解）只有25%的观众滚动过页面的第二页，实际上只有5%的观众向下滚动到主页的页脚。这导致我们决定不在设计的其余部分运行任何A/B测试。但是，在考虑到设计正在发生根本性的变化之后，我们决定进行一个"无害测试"，以确保我们设计和实现的任何东西都不会对我们的转换率造成任何损害，同时也消除了我们的偏见。到今天为止，这个测试仍然在运行，所以我们希望在接下来的几周内看到结果（所以是的，你仍然可以看到新旧设计并进行对比）。左：旧设计/右：新设计最终想法/结论在这个项目中的工作让我们产生了不同的想法和结论，我们非常乐意与大家分享。考虑到这个故事的发展过程，我认为将它们分为两个主题是很重要的：跨团队协作和在考虑到度量的情况下进行设计的好处。关于跨团队协作-这是什么？跨职能协作将具有不同背景、技能和才能的人聚集在一起，以实现特定的目标。刚开始的时候，找到合适的人来适应这个团队是很有挑战性的，但一旦完成了，就完全值得了。在这种团队中工作的一些好处是：你很可能会有机会和有才华的人一起工作，互相学习跨团队协作为您的工作提供了一个全局的视角，这意味着从不同的角度进行洞察（一个问题可能会有不同的解决方案，这取决于谁试图解决它—设计师、开发人员、项目经理等等）它有助于创新和跳出框框思考，做出明智的决定，并承担更好的风险你正在帮助你的组织建立一种协作文化，把团队合作作为核心价值观那么度量驱动的设计呢？我个人的观点是，即使看起来不是这样，设计师和组织中的其他贡献者一样需要分析。为什么？因为作为设计师，我们工作中最困难的部分就是教育别人