选择正确的标准:研究工具时使用在数字开发过程

我觉得的冒名顶替者在最近的(和灵巧地标题)苏格兰网络数字文化资源评估研讨会- # EDCR2016——汇集了领域的学者和研究人员的文化和遗产内容:我不是一个学者,也不是研究员。也不是苏格兰。

但研究的一部分,维多利亚和阿尔伯特博物馆的数字团队的日常工作。反思少数项目,探索不同的“标准”——研究工具,方法和过程——我们用来衡量和评估工作,在不同的点在数字开发过程。你可以找到的幻灯片Slideshare。

这三个反面

我们发现所使用的研究工具来衡量和评估取决于三个主要方面:

• 什么你测量了吗?
• 当在这个过程中吗?
• 为什么——目的是什么呢?

最后一个是最根本的。答案不应该只是“因为资助者或赞助商需要我”。

瀑布的问题

在传统的瀑布式项目管理的方法,评估结束时经常发生这一过程可能会需要几个月,如果不是几年——完成。这就是所谓的总结性评价。它是有价值的,但不应该取代需要持续的评估和测量(所谓的形成性评价)。

使用敏捷方法,测量和评估发生在每个发布周期,通常在每个sprint。这有几个好处。这意味着你快速获取数据,因此能够在这个过程中获得的见解更早。这个正在进行,形成性评价也意味着你很快就会知道你的想法是要坐飞机——真实的人,我的意思。如果没有,你可以杀死这个想法(或者至少暂停)之前,成为一个臃肿的不必要的产品,实际上并不回答人们的需要和欲望。

总结性评价仍可能发生几个版本的,但每一个版本将基于深-和广泛的用户研究和洞察力。总结性评价是因此更有可能揭示产品适用,爱由用户和实现其目标。这就是一个资助者想听到的,对吧?

MVP的角色

获得资助和支持项目,我们经常需要指定数字的事我们要构建,有时几年启动它。但是我们怎么知道我们正在构建之前我们已经开始发现阶段的产品开发?

这就是启动的最小可行产品(MVP)有一个明显的优势在大瀑布项目年底发射。早期推出的好处与小- MVP创造的东西更容易回答人们的需求,更快,可以迭代和改进的一种形式。

我们民间博物馆需要摆脱的习惯指定大复杂的数字的东西最终产品,而不是定义解决问题或机会。我们需要那些基金,支持数字项目理解,最好指定车辆,让人们从a到B的豪华车。我们常常最终承诺一个over-specced劳斯莱斯,而不是从一个简单的滑板。

人们说不同于他们所做的事情

我们都知道这一点。我们都知道,我们需要让人们(用户)在设计和开发过程的早期。但是我们怎么知道如果采取行动对他们说什么?

基督教Rohrer副总裁的设计、研究和企业服务第一资本(尼尔森·诺曼集团的一部分)设计了一个有效的方式去理解用什么工具来回答不同的研究问题。下图显示了一个简单的矩阵,它看着定量和定性数据和行为与态度的数据。

Rohrer矩阵是一个好的起点的工作你想回答什么问题,因此什么工具可以帮助找到这些答案。clickmaps和A / B测试工具会给你一个很好的洞察行为并生成一些有用的定量数据。眼动跟踪给你其他行为的见解也一些定性数据。等工具的概念和游击队测试可以帮助产生更多的态度,定性以及定量数据。

任何工具,你要确定你的研究目标。它是探索(通常在发现阶段),评价与验证特定的特性和他们的可用性(在设计和开发阶段),或测量(在测试阶段)?

这里是一些例子的不同类型的标准,我们在产品开发周期的不同阶段使用。

1。受众分析:维多利亚和阿尔伯特博物馆的观众行为矩阵(发现阶段)

发展与产品创新的新博物馆网站的咨询公司由许多观众,我们进行了一些分析数据的在线行为(主要来自Google Analytics)和从市场研究与我们的游客莫里斯·哈格里夫斯麦金太尔。

我们设计了一个矩阵的观众行为透露了一些我们的网上行为和动机的游客。我写过关于我们的观众矩阵之前,所以我不会住在这里的细节。但这是一个有用的例子发生在发现阶段的研究类型正确的数字产品开发。

这个矩阵帮助观众关注的一般游客的关键行为在我们的网站重新思考,因此地址优先功能,更好的为他们的需求。更妙的是,这个矩阵已成为一个非常有用的工具,帮助形状和创建数字内容,给我们一个更好的理解的内容的人可能在不同的点值与维多利亚和阿尔伯特博物馆的在线互动。

2。远程可用性测试:在搜索(设计阶段)

明年初我们会推出我们的新是什么,大大改善了用户体验,帮助游客了解事件和买票。我们的主要目标是改善我们的活动内容的可发现性。我们设计了一个浏览体验,帮助游客找到他们积极寻找和发现他们不是事件。

第一次迭代的设计集中纯粹的可发现性,但有证据表明,搜索被用于现有的是什么。然而,目前还不清楚如果这是因为糟糕的用户体验(即事件只是没有发现),或者搜索仍然是一个有价值的特性在新的设计。我们意识到一个用例场景,那些已经听说事件到达网站的意图购买一张票,但不是马上能找到它。因此设计的挑战是如何将一个搜索功能集成到一个现有的设计已经在用户测试表现良好我们之前进行的。

所以我们开发了一个可点击的原型与一个简单的搜索功能,出现部分页面,以免打断scannability的着陆页。我们进行一些脚本与五个远程用户用户测试,模拟真实场景的找到一个事件上不可见的着陆页。这个测试旨在确定)如果人们发现搜索功能,b)如果他们做了,他们是否可以用它和c)找到他们正在寻找的东西。

四个五个用户发现事件通过使用搜索框。虽然这测试中一个小样本,因此不是决定性的,它提供了一些有用的见解,充分证实了搜索框是可见但不中断的浏览体验。事实上,五是一个最佳的数字尼尔森倡导者对于这种类型的快速测试在设计新功能。这是一个有效和良好的价值方法验证功能是否值得放在第一位。稍后,我们将进行更多的测试。

绝对是滑板的功能我们将推出的搜索将成为我们收集更多的数据如何以及为什么使用。

3所示。概念测试和欧洲游击队测试音频指南[开发阶段]

欧洲音频指南的发展应有专门的帖子,但与此同时…

概念测试

我们得到了坦率地说,绿色和韦伯船上一些形成性评价原型为我们新的多媒体指南欧洲1600 - 1815画廊去年年底开业。他们的研究涉及概念测试的指导和显示,游客想要“小心经验”:他们只会拿出手机,发现他们真正重视的内容。和音频内容。

诱惑与这类数码产品——移动里体验是查克在很多内容不适合在墙上。在这种情况下,视频,音频,大量的文本、地图…老实说,绿色和韦伯的研究提醒我们,任何移动产品需要烤到更广泛的画廊的经验。它需要一个可见的一部分,是功能和为客人提供价值。

事实上,这些因素可被形象地表现为一系列的一部分障碍需要克服之前客人决定使用该产品作为游客体验的一部分。即使它被过去的前五个障碍,除非产品提供价值(理想情况下,高兴),访问者不会打扰。

游击测试

概念测试让我们彻底修改产品并开发成一个移动音频指南,然后我们进一步测试。在博物馆工作我们有豪华的成千上万的游客来测试,在我们的办公室的门。我们跑了一些游击队测试——一种快速、低成本的方法来快速捕获用户的反馈。

游客指南描述为像一个寻宝游戏,并享受这一事实就像有一个导游,要以自己的节奏。(这是艾莉森韦伯也谈到EDCR2016讲述她的工作梵高博物馆多媒体指南因此销售本身帮助游客按照自己的节奏去。)我们惊讶的一些游客行为,观察一个年长的夫妇使用指南大声,听起来,而不是孤立的感觉的方式与其他指南。

我们使用这些游客的洞察力提高交互功能,如搜索、以及游客访问和播放音频。

“给猪涂口红

经常评估是一个终点,而不是开发过程的一个重要组成部分。学习和了解不是反馈到正在进行的数字化发展。瀑布式项目结束日期。但敏捷从未停止。敏捷的你更容易饲料研究回持续的开发周期。

我敢打赌我们都参与了一些数字项目,不能见天日。一些称之为一种忽悠人的。我们需要勇敢的杀死——或者日落——这些项目的研究揭示了不工作,或者比他们的目的。我们不需要添加数字垃圾。我们需要使用的研究发现那些小猪,不是等到总结性评价我们最糟糕的怀疑得到证实。

所以不要等到那一刻。使用正确的标准和建立研究你的日常工作。

多亏了克里斯Unitt帮助梳理出一些理由和原因,进入写这些想法。克里斯·皮尔森的辉煌的视觉效果,有很多爱在Twitter上。