เครื่องมือการกลั่นกรองเนื้อหาใหม่และปรับปรุง

กรณีศึกษา: Moderation Magic – การแปลงเครื่องมือการทบทวนเนื้อหา

ค้นพบว่าวิธีการออกแบบที่รอบคอบได้ฟื้นฟูกระบวนการกลั่นกรองเนื้อหาของเราอย่างไร ทำให้มีประสิทธิภาพ แม่นยำยิ่งขึ้น และ (เรากล้าพูด) สนุกสนานยิ่งขึ้นสำหรับทีมงานที่ทุ่มเทของเรา!

ความเป็นมาของโครงการ

ในโลกที่มีชีวิตชีวาของชุมชนออนไลน์ การกลั่นกรองเนื้อหาถือเป็นฮีโร่เงียบๆ ที่ทำให้แน่ใจว่าแพลตฟอร์มของเรายังคงปลอดภัย ให้ความเคารพ และมีส่วนร่วมสำหรับทุกคน ทีมผู้ดูแลที่เป็นมนุษย์ของเราทำงานอย่างไม่เหน็ดเหนื่อย ตรวจสอบเนื้อหาที่ผู้ใช้สร้างขึ้นเพื่อรักษาหลักเกณฑ์ของชุมชน ด้วยตระหนักถึงคุณค่าอันมหาศาลของงานของพวกเขา เราจึงเริ่มปฏิบัติภารกิจเพื่อเพิ่มศักยภาพให้พวกเขาเพิ่มเติมด้วยการยกเครื่องชุดเครื่องมือหลักของพวกเขาใหม่ทั้งหมด เป้าหมายไม่ใช่แค่การอัพเกรดเท่านั้น เป็นการเปลี่ยนแปลงเพื่อสร้างระบบที่รองรับงานที่ซับซ้อนและสำคัญของพวกเขาอย่างแท้จริง

ปัญหาเบื้องต้น

ก่อนการเดินทางของการออกแบบใหม่ เครื่องมือตรวจสอบเนื้อหาของเรา ซึ่งเรียกกันติดปาก (หรืออาจจะไม่แสดงความรักมากนัก) ในชื่อ “The Old Guard” นำเสนอความท้าทายที่สำคัญหลายประการ:

  • การรับรู้เกินพิกัด: อินเทอร์เฟซเต็มไปด้วยช่องข้อความและข้อมูลที่ไม่มีการรวบรวมกันมากมาย ผู้ดำเนินรายการมักจะต้องกรองข้อมูลที่ไม่เกี่ยวข้อง ส่งผลให้จิตใจล้าและตัดสินใจช้าลง ลองนึกภาพการพยายามหาเข็มในกองหญ้า แต่กองหญ้ากลับเพิ่มขึ้นเรื่อยๆ!
  • ขั้นตอนการทำงานที่ยุ่งยาก: งานที่ต้องใช้หลายขั้นตอนมักจะเกี่ยวข้องกับการคลิกและการโหลดหน้าซ้ำหลายครั้ง การดำเนินการง่ายๆ อาจรู้สึกเหมือนการนำทางในเส้นทางที่มีอุปสรรค ซึ่งส่งผลกระทบอย่างมากต่อปริมาณงาน กระบวนการนี้รู้สึกว่ากระจัดกระจาย ไม่ใช่ของเหลว
  • ขาดบริบท: ประวัติผู้ใช้ที่สำคัญ รายละเอียดนโยบาย หรือข้อมูลเชิงลึกของเนื้อหาที่เกี่ยวข้องกระจัดกระจายไปตามระบบต่างๆ หรือฝังลึกอยู่ในเครื่องมือที่มีอยู่ ทำให้ยากต่อการดูภาพรวมโดยไม่ต้องใช้ความพยายามอย่างมาก
  • นโยบายที่ไม่สอดคล้องกัน แม้ว่าจะไม่ใช่ปัญหาด้านเครื่องมือเพียงอย่างเดียว แต่ระบบเก่าไม่ได้แนะนำผู้ตรวจสอบโดยสัญชาตญาณผ่านความแตกต่างของนโยบาย ซึ่งบางครั้งก็นำไปสู่การบังคับใช้ที่ไม่สอดคล้องกันและความต้องการการฝึกอบรมแบบลงมือปฏิบัติจริงอย่างต่อเนื่องที่สูงขึ้น
  • ความเหนื่อยหน่ายของผู้ดำเนินรายการ: ผลกระทบสะสมของปัญหาเหล่านี้คือกำลังใจของผู้ดำเนินรายการลดลงอย่างเห็นได้ชัด และเวลาในการตรวจสอบเนื้อหาเพิ่มขึ้น ซึ่งส่งผลต่อประสิทธิภาพการดำเนินงานโดยรวมของเรา เราเห็นการหมุนเวียนที่สูงขึ้นและรู้สึกถึงแรงกดดันต่อทีมงานที่ทุ่มเทของเรา

“รู้สึกเหมือนว่าฉันต่อสู้กับเครื่องมือนี้อยู่ตลอดเวลา ไม่ใช่เนื้อหาที่ไม่ดี การตัดสินใจทุกครั้งเป็นเพียงภารกิจเล็กๆ น้อยๆ” – ข้อเสนอแนะจากผู้ดูแลโดยไม่เปิดเผยตัวตน (การออกแบบใหม่ล่วงหน้า)

กระบวนการออกแบบ

การเดินทางของเราเริ่มต้นด้วยการเจาะลึกเพื่อทำความเข้าใจว่า “ทำไม” เบื้องหลัง “อะไร” เรารับเอาแนวทางการออกแบบที่เน้นผู้ใช้เป็นศูนย์กลาง โดยให้ผู้ดูแลของเรามีส่วนร่วมทุกขั้นตอน

การวิจัยผู้ใช้

เราเริ่มต้นด้วยการนั่งข้างผู้ดูแลของเราอย่างแท้จริง เราดำเนินการสอบถามตามบริบทอย่างกว้างขวาง โดยสังเกตกิจวัตรประจำวัน จุดปวด และวิธีแก้ปัญหาอันชาญฉลาดด้วย “The Old Guard” เราเสริมสิ่งนี้ด้วยแบบสำรวจและการสัมภาษณ์เชิงลึก ถามเกี่ยวกับความท้าทาย ขั้นตอนการทำงานในอุดมคติ และข้อมูลใดที่พวกเขาต้องการมากที่สุดเพียงปลายนิ้วสัมผัส การวิเคราะห์ข้อมูลยังมีบทบาทสำคัญ โดยเน้นเส้นทางการดูแลทั่วไป ข้อผิดพลาดบ่อยครั้ง และพื้นที่ที่มีภาระการรับรู้สูง

  • การสังเกต: สังเกตเห็นการสลับแท็บและการคัดลอกและวางมากเกินไปสำหรับบริบท
  • บทสัมภาษณ์: ระบุความไม่พอใจที่สำคัญเกี่ยวกับความหนาแน่นของข้อมูลและการดำเนินการหลายขั้นตอน
  • การวิเคราะห์ข้อมูล: เปิดเผยว่าเนื้อหาบางประเภทใช้เวลาประมวลผลนานกว่าอย่างไม่เป็นสัดส่วน

ความคิด

ด้วยข้อมูลเชิงลึกอันล้ำค่า ทีมออกแบบของเราจึงก้าวไปสู่แนวคิด เราร่างโครงร่างบนกระดานไวท์บอร์ด โดยให้ความสำคัญกับความชัดเจนและประสิทธิภาพ ต้นแบบที่มีความเที่ยงตรงต่ำถูกสร้างขึ้นอย่างรวดเร็วและทำซ้ำพร้อมกับการตอบรับทันทีจากผู้ดูแลของเรา กระบวนการทำซ้ำนี้ช่วยให้เราทดสอบสมมติฐาน ตรวจสอบวิธีแก้ปัญหา และระบุข้อผิดพลาดที่อาจเกิดขึ้นได้อย่างรวดเร็วตั้งแต่เนิ่นๆ ข้อเสียเปรียบที่สำคัญได้รับการประเมินอย่างต่อเนื่อง เช่น การสร้างสมดุลระหว่างความต้องการข้อมูลที่ครอบคลุมกับความต้องการอินเทอร์เฟซที่สะอาดและสแกนได้ เราเลือกใช้ “การเปิดเผยข้อมูลแบบก้าวหน้า” โดยแสดงข้อมูลสำคัญล่วงหน้าและช่วยให้ผู้ใช้เจาะลึกเพื่อดูรายละเอียดเพิ่มเติมได้

New and Improved Content Moderation Tooling supporting visual 1
ภาพกรณีศึกษา 1

หลักการออกแบบที่สำคัญ

ตลอดกระบวนการออกแบบ หลักการสำคัญสามประการที่เป็นแนวทางในการตัดสินใจทุกครั้ง:

  1. ความชัดเจน การนำเสนอข้อมูลที่สำคัญอย่างเด่นชัดและสัญชาตญาณ
  2. ประสิทธิภาพ ปรับปรุงขั้นตอนการทำงานเพื่อลดการคลิกและภาระการรับรู้
  3. ความเข้าอกเข้าใจ สร้างเครื่องมือที่เคารพความเชี่ยวชาญของผู้ดูแลและลดความเครียดทางจิตใจ

รายละเอียดการแก้ปัญหา

ผลลัพธ์ของความพยายามในการทำงานร่วมกันของเราคือ “Horizon” ซึ่งเป็นชุดการตรวจสอบเนื้อหาใหม่ที่ออกแบบมาตั้งแต่ต้นจนจบเพื่อเพิ่มศักยภาพให้กับทีมตรวจสอบของเรา

ขั้นตอนการทำงานที่คล่องตัว

เราได้ออกแบบหน้าจอตรวจสอบเนื้อหาใหม่ทั้งหมด แทนที่จะใช้แนวทางเชิงเส้นและอิงตามแบบฟอร์ม Horizon นำเสนอแดชบอร์ดแบบรวม เนื้อหาที่เกี่ยวข้อง รายละเอียดผู้ใช้ และบริบททางประวัติศาสตร์ทั้งหมดสามารถดูได้โดยสรุป โดยจัดเรียงในแผงที่ใช้รหัสสีตามตรรกะ ขณะนี้การดำเนินการหลักสามารถใช้งานได้โดยตรงภายในมุมมองหลัก ซึ่งช่วยลดความจำเป็นในการโหลดหน้าซ้ำหรือออกจากงานปัจจุบัน ตัวอย่างเช่น การดำเนินการทั่วไป เช่น “อนุมัติ” “ปฏิเสธ” หรือ “เลื่อนระดับ” กลายเป็นปุ่มที่เห็นได้ชัดเจนในคลิกเดียว

“มันเหมือนกับว่าในที่สุดเครื่องมือก็พูดภาษาของฉันได้ ทุกสิ่งที่ฉันต้องการก็อยู่ที่นั่นแล้ว ไม่ต้องขุด” – คำติชมของผู้ดูแล (หลังการออกแบบใหม่)

New and Improved Content Moderation Tooling supporting visual 2
ภาพกรณีศึกษา 2

สถาปัตยกรรมสารสนเทศที่ได้รับการปรับปรุง

เราใช้ลำดับชั้นข้อมูลที่เข้าใจง่ายทางสายตา การละเมิดนโยบายที่สำคัญจะถูกเน้นด้วยไอคอนที่ชัดเจนและคำอธิบายสั้นๆ ทำให้ผู้ดูแลใหม่เรียนรู้ได้ง่ายขึ้น และผู้ดูแลที่มีประสบการณ์สามารถตรวจสอบได้อย่างรวดเร็ว ประวัติผู้ใช้จะสรุปเป็นกราฟิก โดยแสดงรูปแบบของพฤติกรรมมากกว่าข้อมูลดิบ วิดเจ็ต “เนื้อหาที่เกี่ยวข้อง” จะแนะนำการตัดสินใจการกลั่นกรองในอดีตที่คล้ายกันอย่างจริงจัง โดยให้การตรวจสอบความสอดคล้องกันทันที

ระบบอัตโนมัติ

Horizon รวมระบบอัตโนมัติอัจฉริยะเพื่อจัดการกับเนื้อหาที่มีความเสี่ยงต่ำและมีปริมาณมาก ช่วยให้ผู้ตรวจสอบที่เป็นมนุษย์สามารถมุ่งเน้นไปที่กรณีที่ซับซ้อนหรือซับซ้อนได้ ขณะนี้โมเดล AI ของเราส่งสัญญาณล่วงหน้าถึงการละเมิดที่อาจเกิดขึ้นและยังแนะนำการประยุกต์ใช้นโยบายที่เหมาะสม ซึ่งช่วยลดการป้อนข้อมูลด้วยตนเอง ในขณะเดียวกันก็ให้มนุษย์อยู่ในวงเพื่อขออนุมัติขั้นสุดท้าย วิธีการแบบผสมผสานนี้ช่วยเพิ่มประสิทธิภาพได้อย่างมากโดยไม่กระทบต่อความถูกต้องแม่นยำหรือการพิจารณาด้านจริยธรรม

  • การเข้าคิวอัจฉริยะ: AI จัดลำดับความสำคัญของรายการที่ต้องมีการตรวจสอบโดยเจ้าหน้าที่ทันที
  • การดำเนินการที่แนะนำ: เครื่องมือจะแนะนำผลลัพธ์การกลั่นกรองตามข้อมูลในอดีต
  • คำแนะนำนโยบายแบบเรียลไทม์: ตัวอย่างนโยบายตามบริบทจะปรากฏถัดจากองค์ประกอบเนื้อหาที่เกี่ยวข้อง

ผลลัพธ์

การเปิดตัว Horizon นำมาซึ่งการเปลี่ยนแปลงเชิงบวกที่จับต้องได้และเป็นรูปธรรมในการดำเนินการกลั่นกรองของเรา:

  • ลดเวลาการกลั่นกรองโดยเฉลี่ยลง 55%: งานที่ก่อนหน้านี้ใช้เวลาไม่กี่นาทีจะเสร็จสิ้นภายในไม่กี่วินาที ต้องขอบคุณเวิร์กโฟลว์ที่ได้รับการปรับปรุงและลดภาระด้านการรับรู้
  • อัตราข้อผิดพลาดลดลง 30%: ด้วยบริบทที่ชัดเจนยิ่งขึ้น คำแนะนำด้านนโยบายที่ใช้งานง่าย และความเหนื่อยล้าน้อยลง ผู้ดำเนินรายการของเรากำลังตัดสินใจได้แม่นยำยิ่งขึ้น
  • คะแนนความพึงพอใจของผู้ดำเนินรายการเพิ่มขึ้น 20 คะแนน: การสำรวจภายในของเราแสดงให้เห็นการปรับปรุงอย่างมีนัยสำคัญในความพึงพอใจในงานและระดับความเครียดที่รายงานลดลง ผู้ดำเนินรายการรู้สึกว่าได้รับการสนับสนุนและมีประสิทธิภาพมากขึ้น
  • ลดเวลาออนบอร์ดลง 40%: ลักษณะที่ใช้งานง่ายของ Horizon หมายความว่าผู้ดูแลคนใหม่สามารถเร่งความเร็วได้เร็วยิ่งขึ้น และกลายเป็นสมาชิกที่มีประสิทธิผลของทีมโดยใช้เวลาน้อยลง
  • ปรับปรุงความสม่ำเสมอขึ้น 15%: การอ้างอิงนโยบายแบบบูรณาการและการดำเนินการที่แนะนำทำให้มีการนำหลักเกณฑ์ชุมชนของเราไปปฏิบัติทั่วทั้งทีมอย่างเท่าเทียมกันมากขึ้น

ผลลัพธ์ที่วัดได้เหล่านี้แสดงให้เห็นอย่างชัดเจนว่าการลงทุนในการออกแบบเครื่องมือภายในอย่างพิถีพิถัน ส่งผลโดยตรงต่อความเป็นเลิศในการปฏิบัติงานและสภาพแวดล้อมการทำงานที่ดียิ่งขึ้นสำหรับทีมกลั่นกรองที่สำคัญของเรา

บทเรียนที่ได้รับ

โปรเจ็กต์นี้เป็นเครื่องเตือนใจที่ยอดเยี่ยมว่าแม้แต่เครื่องมือภายในก็สมควรได้รับความเข้มงวดในการออกแบบในระดับเดียวกับผลิตภัณฑ์ที่ผู้ใช้ต้องเผชิญ ประเด็นสำคัญของเราประกอบด้วย:

  • การมีส่วนร่วมของผู้ใช้เป็นสิ่งสำคัญยิ่ง: ผู้ดูแลของเราไม่ได้เป็นเพียงผู้ใช้เท่านั้น พวกเขาเป็นผู้ร่วมสร้าง เสียงตอบรับอย่างต่อเนื่องของพวกเขาคือกลไกแห่งความสำเร็จของเรา
  • ชัยชนะเล็กน้อยสร้างโมเมนตัม: เราเปิดตัวฟีเจอร์ต่างๆ ทีละน้อย เพื่อเฉลิมฉลองการปรับปรุงเล็กๆ น้อยๆ ที่ทำให้ทีมมีส่วนร่วมและตื่นเต้นกับวิสัยทัศน์ที่ใหญ่ขึ้น
  • การออกแบบคือการสนทนาที่กำลังดำเนินอยู่: การเปิดตัว Horizon ยังไม่สิ้นสุด มันเป็นจุดเริ่มต้นของวงจรการวนซ้ำอย่างต่อเนื่อง เรารักษาช่องทางข้อเสนอแนะอย่างสม่ำเสมอเพื่อปรับปรุงเครื่องมือต่อไป
  • ปรับสมดุลระบบอัตโนมัติด้วย Human Insight: แม้ว่า AI จะมอบประสิทธิภาพอันน่าทึ่ง แต่การทำความเข้าใจว่าการตัดสินของมนุษย์ไม่สามารถทดแทนได้ทำให้เกิดความแม่นยำและความยุติธรรม โดยเฉพาะอย่างยิ่งในพื้นที่ที่มีความละเอียดอ่อน เช่น การกลั่นกรองเนื้อหา

ด้วยการเปลี่ยน “The Old Guard” ให้เป็น “Horizon” เราไม่เพียงแค่สร้างเครื่องมือที่ดีขึ้นเท่านั้น เราสร้างประสบการณ์ที่ดีขึ้นให้กับผู้ที่ปกป้องชุมชนของเราอย่างไม่รู้จักเหน็ดเหนื่อย และนั่นเราเชื่อว่าเป็นเวทมนตร์แห่งการกลั่นกรองอย่างแท้จริง

Leave a comment