新的和改进的内容审核工具

案例研究:适度魔法 – 转变内容审核工具

了解深思熟虑的设计方法如何重振我们的内容审核流程,使其更加高效、准确,并且(我们敢说)甚至让我们的专业团队感到愉快!

项目背景

在充满活力的在线社区世界中,内容审核是沉默的英雄,确保我们的平台保持安全、尊重和吸引每个人。我们的人类版主团队不知疲倦地工作,审查用户生成的内容以维护社区准则。认识到他们工作的巨大价值,我们开始了一项使命,通过彻底改革他们的主要工具包来进一步增强他们的能力。我们的目标不仅仅是升级;创建一个真正支持他们复杂而关键任务的系统是一次转变。

最初的问题

在我们的重新设计之旅之前,我们的内容审核工具被亲切地(或者可能不那么亲切地)称为“老守卫”,提出了几个重大挑战:

  • 认知超载: 该界面是一片密集的文本字段和无组织的数据。主持人经常不得不筛选不相关的信息,导致精神疲劳和决策速度变慢。想象一下大海捞针,但大海捞针却不断增长!
  • 笨重的工作流程: 需要多个步骤的任务通常涉及大量点击和页面重新加载。一个简单的动作可能感觉就像穿越障碍路线,从而显着影响吞吐量。这个过程让人感觉支离破碎,而不是流畅的。
  • 缺乏背景: 基本的用户历史记录、策略详细信息或相关内容见解分散在不同的系统中或深埋在现有工具中,因此如果不进行大量手动操作,就很难获得整体视图。
  • 政策不一致 虽然不纯粹是一个工具问题,但旧系统并不能直观地指导主持人了解政策的细微差别,有时会导致执行不一致,并对持续的实践培训提出更高的要求。
  • 主持人倦怠: 这些问题的累积影响是版主士气明显下降,审核内容所需的时间增加,影响了我们的整体运营效率。我们看到了更高的营业额,并感受到了我们敬业的团队所承受的压力。

“感觉就像我一直在与工具作斗争,而不是与糟糕的内容作斗争。每个决定都是一个小任务。” – 匿名版主反馈(重新设计前)

设计流程

我们的旅程始于深入了解“什么”背后的“为什么”。我们采用了以用户为中心的设计方法,让我们的主持人参与其中的每一步。

用户研究

我们首先坐在主持人旁边。我们进行了广泛的背景调查,观察他们的日常生活、痛点以及与“老守卫”一起的巧妙的解决方法。我们通过调查和深入访谈来补充这一点,询问他们面临的挑战、他们理想的工作流程以及他们最需要的信息。数据分析也发挥了至关重要的作用,突出了常见的审核路径、频繁的错误和高认知负荷的领域。

  • 观察: 注意到上下文中过多的选项卡切换和复制粘贴。
  • 采访: 确定了信息密度和多步骤行动方面的主要挫折。
  • 数据分析: 发现某些内容类型的处理时间过长。

构思

凭借宝贵的见解,我们的设计团队开始构思。我们在白板上绘制了线框图,优先考虑清晰度和效率。根据我们主持人的即时反馈,低保真原型被快速构建和迭代。这个迭代过程使我们能够快速测试假设、验证解决方案并及早发现潜在的陷阱。我们不断评估关键的权衡:例如,平衡对全面信息的渴望与对干净、可扫描界面的需求。我们选择“渐进式披露”——预先显示重要信息并允许用户深入了解更多细节。

New and Improved Content Moderation Tooling supporting visual 1
案例研究视觉 1

主要设计原则

在整个设计过程中,三个核心原则指导着每个决定:

  1. 明晰 突出且直观地呈现关键信息。
  2. 效率 简化工作流程以减少点击次数和认知负荷。
  3. 共情 构建一个尊重主持人专业知识并减少精神压力的工具。

解决方案详情

我们共同努力的成果是“Horizo​​n”,这是一个全新的内容审核套件,旨在为我们的审核团队提供支持。

简化的工作流程

我们完全重新设计了内容审核屏幕。 Horizo​​n 没有提供基于表单的线性方法,而是提供了一个整合的仪表板。所有相关内容、用户详细信息和历史背景都一目了然,排列在逻辑、颜色编码的面板中。现在可以直接在主视图中执行关键操作,从而减少了重新加载页面或离开当前任务的需要。例如,“批准”、“拒绝”或“升级”等常见操作现在都是突出的一键按钮。

“就像这个工具终于会说我的语言一样。我需要的一切都在那里,不需要挖掘。” – 主持人反馈(重新设计后)

New and Improved Content Moderation Tooling supporting visual 2
案例研究视觉 2

增强的信息架构

我们实现了视觉直观的信息层次结构。严重的政策违规行为会通过不同的图标和简短的解释进行突出显示,使新版主更容易学习,也让经验丰富的版主能够快速验证。用户历史记录以图形方式进行总结,显示行为模式而不仅仅是原始数据。 “相关内容”小部件主动建议过去类似的审核决策,提供即时的一致性检查。

自动化

Horizo​​n 结合了智能自动化来处理低风险、大容量的内容,使人工主持人能够专注于微妙或复杂的案例。我们的人工智能模型现在可以预先标记潜在的违规行为,甚至建议适当的政策应用,减少手动输入,同时让人类了解最终批准的情况。这种混合方法显着提高了效率,同时又不影响准确性或道德考虑。

  • 智能排队: 人工智能会优先考虑需要立即人工审核的项目。
  • 建议采取的行动: 该工具根据历史数据建议调整结果。
  • 实时政策指南: 上下文策略片段显示在相关内容元素旁边。

结果

Horizo​​n 的引入给我们​​的审核操作带来了切实、积极的变化:

  • 平均审核时间减少 55%: 由于简化的工作流程和减少的认知负荷,以前需要几分钟的任务现在只需几秒钟即可完成。
  • 错误率降低 30%: 凭借更清晰的背景、直观的政策指导和更少的疲劳,我们的主持人可以做出更准确的决策。
  • 版主满意度分数提高 20 分: 我们的内部调查显示,工作满意度显着提高,报告的压力水平有所下降。主持人感到更受支持和更有效。
  • 入职时间减少 40%: Horizo​​n 的直观性意味着新的主持人可以更快地掌握速度,在更短的时间内成为团队中高效的成员。
  • 一致性提高 15%: 综合的政策参考和建议的行动使我们的社区准则在整个团队中得到更加统一的应用。

这些可衡量的结果清楚地表明,投资于内部工具的深思熟虑的设计可以直接转化为我们关键的审核团队的卓越运营和更健康的工作环境。

经验教训

这个项目很好地提醒我们,即使是内部工具也应该具有与面向用户的产品相同水平的设计严谨性。我们的主要收获包括:

  • 用户参与至关重要: 我们的版主不仅仅是用户;也是用户。他们是共同创造者。他们持续的反馈是我们成功的引擎。
  • 小胜利建立动力: 我们逐步推出功能,庆祝小改进,让团队保持参与并为更大的愿景感到兴奋。
  • 设计是一个持续的对话: Horizo​​n 的推出并不是结束;这是连续迭代周期的开始。我们保持定期的反馈渠道以不断改进该工具。
  • 平衡自动化与人类洞察力: 虽然人工智能提供了令人难以置信的效率,但了解人类判断在哪些方面是不可替代的可以确保准确性和公平性,特别是在内容审核等敏感领域。

通过将“The Old Guard”转变为“Horizo​​n”,我们不仅构建了一个更好的工具,还构建了一个更好的工具。我们为不知疲倦地保护我们社区的人们打造了更好的体验。我们相信,这是真正的节制魔法。

Leave a comment