新しく改良されたコンテンツ モデレーション ツール

ケーススタディ: モデレーション マジック – コンテンツ レビュー ツールの変革

思慮深い設計アプローチによってコンテンツ モデレーション プロセスがどのように活性化され、より効率的で正確になり、そして(あえて言えば)専任チームにとっても楽しいものになったのかをご覧ください。

プロジェクトの背景

オンライン コミュニティの活気に満ちた世界では、コンテンツのモデレーションは静かな英雄であり、プラットフォームが安全で敬意を持って、すべての人にとって魅力的なものであり続けることを保証します。私たちの人間のモデレーター チームは、ユーザーが作成したコンテンツをレビューしてコミュニティ ガイドラインを守るためにたゆまぬ努力をしています。彼らの仕事の計り知れない価値を認識し、私たちは主要なツールキットを完全に見直して、彼らにさらに力を与えるという使命に着手しました。目標は単なるアップグレードではありませんでした。それは、複雑で重要なタスクを真にサポートするシステムを作成するための変革でした。

初期の問題

再設計に取り組む前は、親しみを込めて (あるいはそれほど愛情を込めていないかもしれませんが) 「The Old Guard」として知られるコンテンツ モデレーション ツールには、いくつかの重大な課題がありました。

  • 認知過負荷: インターフェースはテキストフィールドと整理されていないデータの密集した海でした。モデレータは多くの場合、無関係な情報を選別する必要があり、精神的な疲労や意思決定の遅れにつながりました。干し草の山から針を見つけようとしているのに、干し草の山は増え続けることを想像してみてください。
  • 不格好なワークフロー: 複数の手順を必要とするタスクでは、多くの場合、多数のクリックとページのリロードが必要になります。単純なアクションが障害物コースをナビゲートしているように感じられ、スループットに大きな影響を与える可能性があります。プロセスは流動的ではなく断片的に感じられました。
  • コンテキストの欠如: 重要なユーザー履歴、ポリシーの詳細、または関連するコンテンツの洞察がさまざまなシステムに散在しているか、既存のツールの奥深くに埋め込まれているため、多大な手作業を行わなければ全体的なビューを取得することが困難でした。
  • 一貫性のないポリシー 純粋にツールの問題ではありませんが、古いシステムはポリシーの微妙な違いについてモデレータを直観的にガイドできず、場合によっては施行に一貫性がなく、継続的な実践的なトレーニングの需要が高まっていました。
  • 司会者の燃え尽き症候群: これらの問題の累積的な影響により、モデレーターの士気が著しく低下し、コンテンツのレビューに必要な時間が増加し、全体的な業務効率に影響を及ぼしました。離職率が高く、献身的なチームにプレッシャーを感じていました。

「悪いコンテンツではなく、常にツールと戦っているように感じました。すべての決断はミニクエストでした。」 – 匿名のモデレータによるフィードバック (再設計前)

設計プロセス

私たちの旅は、「何を」の背後にある「なぜ」を深く理解することから始まりました。私たちはユーザー中心の設計アプローチを採用し、あらゆる段階でモデレーターを巻き込みました。

ユーザー調査

私たちは文字通り司会者の隣に座ることから始めました。私たちは広範な状況調査を実施し、彼らの日常業務、問題点、「The Old Guard」に関する独創的な回避策を観察しました。私たちはこれをアンケートと綿密なインタビューで補完し、課題、理想的なワークフロー、すぐに手に入る最も必要な情報について尋ねました。データ分析も重要な役割を果たし、一般的なモデレーション パス、頻繁なエラー、認知負荷の高い領域を明らかにしました。

  • 観察: コンテキストのための過剰なタブ切り替えとコピー&ペーストに気づきました。
  • インタビュー: 情報密度と複数ステップのアクションに関する主な不満を特定しました。
  • データ分析: 特定のコンテンツ タイプの処理に不釣り合いに長い時間がかかることが判明しました。

アイデア出し

貴重な洞察を武器に、私たちの設計チームはアイデアの立案に移りました。わかりやすさと効率性を優先して、ホワイトボードにワイヤーフレームをスケッチしました。忠実度の低いプロトタイプは迅速に構築され、モデレーターからの即時フィードバックを受けて反復されました。この反復プロセスにより、仮説を迅速にテストし、解決策を検証し、潜在的な落とし穴を早期に特定することができました。重要なトレードオフは常に評価されました。たとえば、包括的な情報への欲求と、クリーンでスキャン可能なインターフェイスの必要性のバランスを取ることです。私たちは、重要な情報を事前に表示し、ユーザーがさらに詳細にドリルダウンできるようにする「段階的開示」を選択しました。

New and Improved Content Moderation Tooling supporting visual 1
ケーススタディビジュアル1

主要な設計原則

設計プロセス全体を通じて、次の 3 つの中心原則がすべての決定の指針となりました。

  1. 明瞭さ 重要な情報を目立つように直感的に表示します。
  2. 効率 ワークフローを合理化してクリック数と認知負荷を軽減します。
  3. 共感 モデレーターの専門知識を尊重し、精神的な負担を軽減するツールを構築します。

ソリューションの詳細

私たちの共同作業の結果、モデレーション チームを強化するためにゼロから設計された新しいコンテンツ モデレーション スイート「Horizo​​n」が誕生しました。

合理化されたワークフロー

コンテンツレビュー画面を全面的にリニューアルしました。 Horizo​​n は、直線的なフォームベースのアプローチの代わりに、統合されたダッシュボードを提供します。関連するすべてのコンテンツ、ユーザーの詳細、および歴史的コンテキストは、論理的な色分けされたパネルに配置され、一目で確認できます。主要なアクションがプライマリ ビュー内で直接使用できるようになり、ページをリロードしたり、現在のタスクから移動したりする必要が減りました。たとえば、「承認」、「拒否」、「エスカレーション」などの一般的なアクションが、目立つワンクリック ボタンとして表示されるようになりました。

「ツールがついに私の言語を話せるようになったようです。必要なものはすべてすぐそこにあり、掘る必要はありません。」 – モデレーターのフィードバック (再設計後)

New and Improved Content Moderation Tooling supporting visual 2
ケーススタディビジュアル2

強化された情報アーキテクチャ

視覚的に直感的な情報階層を実装しました。重大なポリシー違反は、個別のアイコンと簡単な説明で強調表示されるため、新しいモデレーターは理解しやすく、経験豊富なモデレーターはすぐに確認できます。ユーザー履歴はグラフィカルに要約され、単なる生データではなく行動パターンが示されます。 「関連コンテンツ」ウィジェットは、類似した過去のモデレーション決定を積極的に提案し、即座に整合性チェックを提供します。

オートメーション

Horizo​​n にはスマート オートメーションが組み込まれており、低リスクで大量のコンテンツを処理できるため、人間のモデレーターは微妙な問題や複雑な問題に集中できるようになります。当社の AI モデルは、違反の可能性を事前にフラグ付けし、適切なポリシーの適用を提案することもできるため、手動入力を削減しながら、人間が最終承認を得ることができるようになります。このハイブリッド アプローチにより、精度や倫理的配慮を損なうことなく効率が大幅に向上します。

  • スマートキューイング: AI は人間による即時のレビューが必要な項目に優先順位を付けます。
  • 推奨されるアクション: このツールは履歴データに基づいて、モデレーションの結果を推奨します。
  • リアルタイム ポリシー ガイド: コンテキストに応じたポリシー スニペットが、関連するコンテンツ要素の横に表示されます。

結果

Horizo​​n の導入により、モデレーション業務全体に具体的で前向きな変化がもたらされました。

  • 平均モデレーション時間の 55% 削減: 合理化されたワークフローと認知負荷の軽減により、以前は数分かかっていたタスクが数秒で完了するようになりました。
  • エラー率の 30% の減少: より明確なコンテキスト、直感的なポリシー ガイダンス、および疲労の軽減により、モデレーターはより正確な意思決定を行うことができます。
  • モデレーター満足度スコアが 20 ポイント増加: 当社の内部調査では、仕事の満足度が大幅に向上し、報告されたストレスレベルが減少したことが示されました。モデレータはよりサポートされ、効果的であると感じます。
  • オンボーディング時間を 40% 削減: Horizo​​n の直感的な性質により、新しいモデレーターはより早く作業に慣れることができ、より短い時間でチームの生産的なメンバーになることができます。
  • 一貫性が 15% 向上しました: 統合されたポリシー参照と推奨アクションにより、チーム全体でコミュニティ ガイドラインがより均一に適用されるようになりました。

これらの目に見える成果は、社内ツールの思慮深い設計への投資が、運用の卓越性と、重要なモデレーション チームのより健全な作業環境に直接つながることを明確に示しています。

学んだ教訓

このプロジェクトは、内部ツールであってもユーザー向け製品と同じレベルの厳密な設計が必要であることを思い出させてくれました。私たちの重要なポイントは次のとおりです。

  • ユーザーの関与が最も重要です: 私たちのモデレーターは単なるユーザーではありませんでした。彼らは共同制作者でした。彼らの継続的なフィードバックが私たちの成功の原動力でした。
  • 小さな勝利が勢いを生み出す: 私たちは機能を段階的に展開し、チームの関与を維持し、より大きなビジョンに興奮し続ける小さな改善を祝いました。
  • デザインは継続的な会話です: Horizo​​n の発売は終わりではありません。それは継続的な反復サイクルの始まりです。私たちはツールを改善し続けるために定期的なフィードバック チャネルを維持しています。
  • 自動化と人間の洞察のバランスをとる: AI は驚くべき効率を実現しますが、人間の判断が代替不可能な部分を理解することで、特にコンテンツのモデレーションなどのデリケートな領域において、正確さと公平性が確保されます。

「The Old Guard」を「Horizo​​n」に変えることで、私たちは単により良いツールを構築しただけではありません。私たちは、コミュニティを精力的に保護する人々のために、より良いエクスペリエンスを構築しました。それこそが真の節度魔法だと私たちは信じています。

Leave a comment