กลุ่มคนทำงานเพื่อรวบรวมข้อมูล

Crowd Workers สำหรับการรวบรวมข้อมูล – ส่วนที่ขาดไม่ได้ของ AI ที่มีจริยธรรม

ในการสร้างโซลูชัน AI ที่แข็งแกร่งและเป็นกลาง จำเป็นอย่างยิ่งที่เราต้องมุ่งเน้นการฝึกฝนโมเดลด้วยชุดข้อมูลที่เป็นกลาง เปลี่ยนแปลงได้ และเป็นตัวแทนที่ดี กระบวนการรวบรวมข้อมูลของเรามีความสำคัญอย่างมากในการพัฒนาโซลูชัน AI ที่น่าเชื่อถือ ในแง่นี้ การรวบรวมข้อมูลสำหรับการฝึกฝน AI ผ่านแรงงานจากกลุ่มคนจึงเป็นส่วนสำคัญของกลยุทธ์การรวบรวมข้อมูล

ในบทความนี้ เราจะมาสำรวจบทบาทของแรงงานจากกลุ่มคน (crowd workers) ผลกระทบต่อการพัฒนาอัลกอริธึมการเรียนรู้ ของ AI และโมเดล ML ตลอดจนความจำเป็นและประโยชน์ที่แรงงานจากกลุ่มคนเหล่านี้มอบให้แก่กระบวนการทั้งหมด

เหตุใดฝูงชนจึงต้องสร้างแบบจำลอง AI

ในฐานะมนุษย์ เราสร้างข้อมูลจำนวนมหาศาล แต่มีเพียงส่วนน้อยของข้อมูลที่สร้างและรวบรวมมาเท่านั้นที่มีคุณค่า เนื่องจากขาดมาตรฐานการวัดคุณภาพข้อมูล ข้อมูลส่วนใหญ่ที่รวบรวมมาจึงมีอคติ มีปัญหาด้านคุณภาพ หรือไม่เป็นตัวแทนของสภาพแวดล้อมที่แท้จริง เนื่องจาก มีการพัฒนาโมเดล การเรียนรู้ของเครื่องและการเรียนรู้เชิงลึกมากขึ้นเรื่อยๆ ซึ่งทำงานบนข้อมูลจำนวนมหาศาล ความต้องการชุดข้อมูลที่ดีกว่า ใหม่กว่า และหลากหลายกว่าจึงเพิ่มมากขึ้นเรื่อยๆ

เป็นที่ที่ฝูงชนเข้ามามีบทบาท

ข้อมูลการจัดหาฝูงชนกำลังสร้างชุดข้อมูลที่มีส่วนร่วมของคนกลุ่มใหญ่ กลุ่มคนทำงานใส่ปัญญามนุษย์เข้าไปในปัญญาประดิษฐ์

แพลตฟอร์มการระดมความคิดจากกลุ่มคน (Crowd-sourcing)มอบงานขนาดเล็กด้านการรวบรวมและติดป้ายกำกับข้อมูลให้กับกลุ่มคนจำนวนมากและหลากหลาย การระดมความคิดจากกลุ่มคนช่วยให้บริษัทต่างๆ สามารถเข้าถึงแรงงานจำนวนมหาศาลที่มีความยืดหยุ่น คุ้มค่า และปรับขนาดได้

แพลตฟอร์มการระดมทรัพยากรจากกลุ่มคนจำนวนมากที่ได้รับความนิยมมากที่สุดอย่าง Amazon Mechanical Turk สามารถจัดหาบทสนทนาระหว่างมนุษย์ด้วยกันได้ถึง 11 บทสนทนาภายใน 15 ชั่วโมง และจ่ายเงินให้ผู้ทำงาน0.35 ดอลลาร์สหรัฐต่อบทสนทนาที่สำเร็จแต่ละครั้ง การจ้างคนทำงานจากกลุ่มคนจำนวนมากด้วยค่าตอบแทนที่น้อยนิดเช่นนี้ ชี้ให้เห็นถึงความสำคัญของการสร้างมาตรฐานด้านจริยธรรมในการจัดหาข้อมูล

ในทางทฤษฎี ดูเหมือนเป็นแผนการที่ชาญฉลาด แต่ก็ไม่ใช่กลยุทธ์ที่ง่ายในการดำเนินการ การไม่เปิดเผยตัวตนของฝูงชนทำให้เกิดปัญหาเกี่ยวกับค่าจ้างต่ำ การไม่คำนึงถึงสิทธิของคนงาน และงานที่มีคุณภาพต่ำซึ่งส่งผลกระทบต่อประสิทธิภาพของโมเดล AI 

ประโยชน์ของการมีคนทำงานจำนวนมากในแหล่งข้อมูล

นักพัฒนาโซลูชันที่ใช้ AI สามารถกระจายงานขนาดเล็กและรวบรวมข้อสังเกตที่หลากหลายและแพร่หลายได้อย่างรวดเร็วด้วยต้นทุนที่ค่อนข้างต่ำ โดยการมีส่วนร่วมกับกลุ่มคนทำงานจำนวนมาก

ประโยชน์ที่โดดเด่นบางประการของการจ้างฝูงชนสำหรับโครงการ AI ได้แก่

ประโยชน์ของการรวบรวมข้อมูลผ่านพนักงานฝูงชน

เวลาในการออกสู่ตลาดที่เร็วขึ้น:จากการวิจัยของ Cognilytica พบว่าเกือบ 80% ของ เวลาในโครงการ ปัญญาประดิษฐ์ (AI)หมดไปกับกิจกรรมการรวบรวมข้อมูล เช่น การทำความสะอาดข้อมูล การติดป้ายกำกับ และการรวบรวมข้อมูล ส่วนเวลาที่ใช้ในการพัฒนาและการฝึกอบรมมีเพียง 20% เท่านั้น อุปสรรคแบบดั้งเดิมในการสร้างข้อมูลถูกกำจัดออกไป เนื่องจากสามารถสรรหาผู้ร่วมงานจำนวนมากได้ในเวลาอันสั้น

โซลูชันที่คุ้มค่า: การรวบรวมข้อมูลจากแหล่งต่างๆช่วยลดเวลาและพลังงานที่ใช้ในการฝึกอบรม สรรหา และการรับเข้าทำงาน ซึ่งช่วยลดต้นทุน เวลา และทรัพยากรที่จำเป็น เนื่องจากพนักงานได้รับการว่าจ้างในรูปแบบการจ่ายค่าตอบแทนตามงานที่ทำ

เพิ่มความหลากหลายในชุดข้อมูล:ความหลากหลายของข้อมูลมีความสำคัญอย่างยิ่งต่อการฝึกฝนโซลูชัน AI ทั้งหมด เพื่อให้โมเดลสร้างผลลัพธ์ที่เป็นกลาง จำเป็นต้องฝึกฝนด้วยชุดข้อมูลที่หลากหลาย การรวบรวมข้อมูลจากแหล่งต่างๆ ทำให้สามารถสร้างชุดข้อมูลที่หลากหลาย (ทางภูมิศาสตร์ ภาษา สำเนียง) ได้โดยใช้ความพยายามและต้นทุนน้อย

เพิ่มความสามารถในการขยายขนาด:เมื่อคุณสรรหาผู้ทำงานจากกลุ่มคนที่มีความน่าเชื่อถือ คุณจะมั่นใจได้ว่า การเก็บรวบรวมข้อมูล มีคุณภาพสูงและสามารถขยายขนาดได้ตามความต้องการของโครงการ

องค์กรเทียบกับฝูงชน – ใครจะเป็นผู้ชนะ?

ข้อมูลภายในองค์กรข้อมูลที่มาจากฝูงชน
รับประกันความถูกต้องและความสอดคล้องของข้อมูลคุณภาพ ความแม่นยำ และความสม่ำเสมอของข้อมูลสามารถรักษาไว้ได้หากใช้แพลตฟอร์มการจัดหาฝูงชนที่เชื่อถือได้พร้อมมาตรการ QA มาตรฐาน
การจัดหาข้อมูลภายในองค์กรไม่ใช่การตัดสินใจเชิงปฏิบัติเสมอไป เนื่องจากทีมงานภายในองค์กรของคุณอาจไม่ตอบสนองความต้องการของโครงการความหลากหลายของข้อมูลสามารถมั่นใจได้เนื่องจากเป็นไปได้ที่จะรับสมัครกลุ่มผู้ทำงานฝูงชนที่แตกต่างกันตามความต้องการของโครงการ
มีราคาแพงในการสรรหาและฝึกอบรมพนักงานสำหรับความต้องการของโครงการโซลูชันที่คุ้มค่ากับ การเก็บรวบรวมข้อมูล เนื่องจากเป็นไปได้ที่จะรับสมัคร ฝึกอบรม และรับพนักงานใหม่ด้วยการลงทุนที่น้อยกว่า
เวลาในการทำตลาดสูงเนื่องจากการรวบรวมข้อมูลภายในองค์กรต้องใช้เวลามากเวลาในการออกสู่ตลาดน้อยลงอย่างมากเนื่องจากการมีส่วนร่วมจำนวนมากเกิดขึ้นอย่างรวดเร็ว
กลุ่มผู้สนับสนุนและผู้ติดฉลากภายในองค์กรกลุ่มเล็กๆกลุ่มผู้ร่วมให้ข้อมูลขนาดใหญ่และหลากหลายและ ป้ายชื่อข้อมูล
การรักษาความลับของข้อมูลนั้นสูงมากด้วยทีมงานภายในองค์กรการรักษาความลับของข้อมูลทำได้ยากเมื่อทำงานกับพนักงานจำนวนมากทั่วโลก
ง่ายต่อการติดตาม ฝึกอบรม และประเมินผู้รวบรวมข้อมูลท้าทายในการติดตามและฝึกอบรมผู้รวบรวมข้อมูล

เชื่อมช่องว่างระหว่างผู้ปฏิบัติงานแบบคราวด์ซอร์สและผู้ร้องขอ

เชื่อมช่องว่างระหว่างผู้ปฏิบัติงานจากมวลชนและผู้ร้องขอ มีความจำเป็นอย่างมากที่จะต้องเชื่อมช่องว่างระหว่างกลุ่มคนทำงานและผู้ร้องขอ ไม่ใช่แค่ในด้านค่าจ้างเท่านั้น

มีการขาดข้อมูลอย่างชัดเจนจากฝั่งผู้ร้องขอ เนื่องจากผู้ทำงานได้รับข้อมูลเฉพาะเกี่ยวกับงานที่ได้รับมอบหมายเท่านั้น ตัวอย่างเช่น แม้ว่าผู้ทำงานจะได้รับมอบหมายงานย่อยๆ เช่น การบันทึกบทสนทนาในภาษาถิ่นของตนเอง แต่พวกเขากลับไม่ได้รับบริบทใดๆ พวกเขาไม่มีข้อมูลที่จำเป็นว่าทำไมพวกเขาจึงต้องทำสิ่งที่กำลังทำอยู่ และควรทำอย่างไรให้ดีที่สุด การขาดข้อมูลนี้ส่งผลกระทบต่อคุณภาพของงานที่ได้จากการระดมความคิดจากกลุ่มคนจำนวนมาก

สำหรับมนุษย์แล้ว การมีบริบททั้งหมดทำให้งานของพวกเขามีความชัดเจนและมีเป้าหมาย

เพิ่มการผสมผสานมิติอื่นของ NDA เข้าด้วยกัน – ข้อตกลงไม่เปิดเผยข้อมูลซึ่งจำกัดจำนวนข้อมูลที่ผู้ปฏิบัติงานฝูงชนมีให้ จากมุมมองของ Crowd Worker การถอนข้อมูลนี้แสดงถึงการขาดความไว้วางใจและความสำคัญต่องานของพวกเขาลดลง

เมื่อมองสถานการณ์เดียวกันจากอีกด้านหนึ่ง จะพบว่าขาดความโปร่งใสจากฝั่งผู้ปฏิบัติงาน ผู้ร้องขอไม่เข้าใจผู้ปฏิบัติงานที่ได้รับมอบหมายอย่างถ่องแท้ บางโครงการอาจต้องการผู้ปฏิบัติงานเฉพาะประเภท แต่ในโครงการส่วนใหญ่มักมีความคลุมเครือความจริงก็คือสิ่งนี้อาจทำให้การประเมินผล การให้ข้อเสนอแนะ และการฝึกอบรมในภายหลัง มีความซับซ้อนมากขึ้น

เพื่อรับมือกับปัญหาเหล่านี้ การทำงานร่วมกับผู้เชี่ยวชาญด้านการรวบรวมข้อมูลที่มีประวัติในการให้ข้อมูลที่หลากหลาย คัดสรร และเป็นตัวแทนที่ดีจากผู้ให้ข้อมูลที่หลากหลายเป็นสิ่งสำคัญ

การเลือก Shaip เป็นพันธมิตรด้านข้อมูลของคุณมีประโยชน์หลายประการ เรามุ่งเน้นไปที่ความหลากหลายและการกระจายตัวของข้อมูล พนักงานที่มีประสบการณ์และทุ่มเทของเราเข้าใจถึงแรงผลักดันของแต่ละโครงการและพัฒนาชุดข้อมูลที่สามารถฝึกอบรมโซลูชันที่ใช้ AI ที่มีประสิทธิภาพได้ในเวลาไม่นาน

[อ่านเพิ่มเติม: คู่มือเริ่มต้นใช้งานข้อมูลสำหรับการฝึกอบรม AI: คำจำกัดความ ตัวอย่าง ชุดข้อมูล ]

ชอบบทความนี้ไหม? ติดตาม Shaip บน LinkedIn เพื่อรับข้อมูลอัปเดตเพิ่มเติม

แบ่งปันสังคม