คำถามที่พบบ่อย

คำถามที่พบบ่อย

คำถามที่เราถูกถามจริง ตอบด้วยความยาวเท่าที่คำถามนั้นสมควรได้รับ ไม่ใช่ตอบด้วยประโยคเดียว จัดกลุ่มไว้เพื่อให้คุณหาคำถามของตัวเองเจอโดยไม่ต้องอ่านทั้งหมด

หากมีเรื่องใดที่ยังไม่ได้ตอบไว้ที่นี่ ส่งมาพร้อมคำขอของคุณ แล้วเราจะตอบให้โดยตรง ไม่ใช่ชี้กลับมาที่หน้านี้

01

การเริ่มต้น

ความร่วมมือครั้งแรกมีหน้าตาอย่างไร

เริ่มด้วยโครงการนำร่องที่กำหนดขอบเขตชัดเจน คุณส่งตัวอย่างข้อมูลที่เป็นตัวแทนและคำอธิบายว่าโมเดลควรทำอะไร เราร่างการตัดสินใจเชิงแนวทางที่งานนั้นต้องการ กำกับข้อมูลชุดเล็ก ๆ แล้วรายงานค่าความสอดคล้องที่วัดได้ โครงการนำร่องมีไว้เพื่อค้นหาว่าผู้กำกับข้อมูลที่มีเหตุผลสองคนเห็นต่างกันตรงไหน เพราะตรงนั้นคือจุดที่ข้อกำหนดของคุณยังไม่สมบูรณ์ ขนาดงานและราคาระดับโปรดักชันจะตามมาจากสิ่งที่โครงการนำร่องวัดได้ ไม่ใช่จากการประมาณการ

ตัวอย่างข้อมูล คำอธิบายงาน รูปแบบผลลัพธ์ที่คุณต้องการ และข้อจำกัดต่าง ๆ ทั้งกำหนดส่ง ข้อกำหนดด้านการรักษาความลับ และเครื่องมือที่คุณอยากให้เราทำงานอยู่ข้างใน ราคาที่ประเมินจากคำอธิบายงานเพียงอย่างเดียวคือการเดา เราขอใช้เวลาสักชั่วโมงดูข้อมูลจริง ดีกว่าให้ตัวเลขที่จะเปลี่ยนหลังส่งงานชุดแรก

โดยทั่วไปหนึ่งถึงสามสัปดาห์นับจากได้รับข้อมูล ขึ้นอยู่กับว่างานนั้นต้องการงานกำหนดข้อกำหนดมากแค่ไหน เวลาส่วนใหญ่หมดไปกับการร่างแนวทางและการปรับเทียบ ไม่ใช่การกำกับข้อมูล งานที่มีแนวทางซึ่งผ่านการทดสอบมาแล้วจะเร็วกว่ามาก

ไม่มีขั้นต่ำตายตัว เรารับตั้งแต่โครงการนำร่องขนาดเล็กไปจนถึงงานโปรดักชันปริมาณมาก สิ่งที่กำหนดขั้นต่ำในทางปฏิบัติคือต้นทุนการตั้งต้น เพราะงานเขียนแนวทาง การตั้งค่าเครื่องมือ และการปรับเทียบ ส่วนใหญ่คงที่ไม่ว่าปริมาณงานจะเท่าใด งานครั้งเดียวที่เล็กมากจึงแบกต้นทุนส่วนนี้ในสัดส่วนที่ไม่สมดุล เราจะบอกคุณเมื่อเป็นกรณีนั้น แทนที่จะเสนอราคาอ้อม ๆ

คิดต่อหน่วยงาน ทั้งต่อรายการ ต่อชั่วโมงเสียง ต่อภาพ และต่อการประเมินหนึ่งครั้ง โดยอัตราขึ้นอยู่กับความซับซ้อนของงาน ความเข้มของการตรวจทาน และระดับความเชี่ยวชาญที่ต้องการ การพัฒนาแนวทางและการปรับเทียบกำหนดขอบเขตแยกต่างหาก เพราะเป็นงานจริงที่เกิดขึ้นก่อนจะติดป้ายกำกับรายการใด ๆ เราไม่คิดค่าใช้จ่ายสำหรับการพูดคุยเพื่อกำหนดขอบเขตโครงการนำร่อง

02

บริการและขอบเขตงาน

สิ่งที่เราทำ และจุดที่เราไม่ใช่ตัวเลือกที่เหมาะสม

ภาษาญี่ปุ่นคือสิ่งที่เราสร้างขึ้นมาเพื่อรองรับ เรารับงานสองภาษาญี่ปุ่น–อังกฤษ ทั้งการตรวจทานคำแปล การจัดแนวข้อความข้ามภาษา และชุดประเมินผลคู่ขนาน เพราะงานเหล่านั้นอาศัยวิจารณญาณด้านภาษาญี่ปุ่นชุดเดียวกัน ส่วนงานปริมาณมากในภาษาอื่น เราขอบอกตรง ๆ ว่าเราไม่ใช่ผู้ให้บริการที่เหมาะสม ดีกว่ารับงานไว้แล้วจ้างช่วงต่อ

ได้ เราทำงานบนแพลตฟอร์มและเวอร์ชวลเดสก์ท็อปที่ลูกค้าจัดเตรียมให้ รวมถึงกรณีที่นโยบายกำหนดว่าข้อมูลต้องไม่ออกจากโครงสร้างพื้นฐานของคุณ และทำในสภาพแวดล้อมที่ปลอดภัยของเราเองเมื่อคุณไม่สะดวกเปิดบัญชีผู้ใช้ให้ สิ่งที่เปลี่ยนคือเครื่องมือ ส่วนแนวทาง รอบการตรวจทาน และการรายงาน QA ไม่เปลี่ยน

เราเก็บและสร้างข้อมูลในส่วนที่เป็นงานภาษาญี่ปุ่น เช่น การเขียนข้อมูลคำสั่ง การสร้างพรอมป์ต์สำหรับประเมินผล การอัดเสียงตามบท และการจัดหาตัวอย่างเอกสาร เราไม่ใช่หน่วยงานเก็บรวบรวมข้อมูลอเนกประสงค์ และสำหรับการเก็บข้อมูลภาคสนามขนาดใหญ่ ผู้ให้บริการเฉพาะทางจะตอบโจทย์คุณได้ดีกว่า

ได้ และสิ่งแรกที่เราทำคืออ่านแนวทางของพวกเขา แล้วกำกับข้อมูลที่พวกเขาส่งมอบไปแล้วบางส่วนซ้ำแบบปิดข้อมูล นั่นจะบอกคุณว่าจริง ๆ แล้วคุณมีอะไรอยู่ในมือ รวมถึงว่าป้ายกำกับที่มีอยู่สอดคล้องกันภายในหรือไม่ ก่อนที่เราจะเพิ่มอะไรลงไป การทำชุดข้อมูลต่อโดยไม่วัดว่าปัจจุบันมันมีอะไรอยู่ คือวิธีที่ความไม่สอดคล้องทับถมกันขึ้นเรื่อย ๆ

มี รูปแบบทีมเฉพาะโครงการเป็นเรื่องปกติสำหรับโปรแกรม AI ที่ดำเนินไปยาวนาน เพราะผู้กำกับข้อมูลกลุ่มเดิมจะสานต่อแนวทางไปเรื่อย ๆ และบริบทที่พวกเขาสั่งสมไว้คือสินทรัพย์จริง แต่รูปแบบนี้ก็เป็นรูปแบบที่การเลื่อนไหลของแนวทางสำคัญที่สุดด้วย จึงมาพร้อมกับการปรับเทียบซ้ำกับชุดข้อมูลมาตรฐานเป็นระยะ

03

ภาษาญี่ปุ่น

ความครอบคลุมของภาษาญี่ปุ่นหมายถึงอะไรในทางปฏิบัติ

ทั้งระดับภาษาที่เป็นทางการและไม่เป็นทางการ ครอบคลุมคันจิ ฮิรางานะ คาตากานะ และอักษรละติน รวมถึงภาษายกย่อง ความแตกต่างตามภูมิภาค คำสแลง ศัพท์เฉพาะอุตสาหกรรม และงานเขียนเชิงเทคนิคที่ผสมภาษาญี่ปุ่นกับภาษาอังกฤษ กฎการปรับมาตรฐานสำหรับการเลือกรูปเขียน ตัวเลข เครื่องหมายวรรคตอน อีโมจิ และอักขระเต็มความกว้าง ตกลงกันตั้งแต่ช่วงเริ่มโครงการ เพราะตัวเลือกเหล่านั้นเป็นตัวกำหนดว่าคลังข้อมูลจะสอดคล้องกันภายในหรือไม่

ใช่ เรื่องนี้สำคัญกับการตัดสินที่ขึ้นอยู่กับว่าประโยคหนึ่งตกกระทบผู้ฟังอย่างไร มากกว่าว่ามันหมายถึงอะไร เช่น การปฏิเสธนั้นอ่านแล้วเป็นการปฏิเสธหรือไม่ ระดับความสุภาพเหมาะกับความสัมพันธ์นั้นหรือไม่ ถ้อยคำนั้นฟังดูเหมือนงานแปลหรือไม่ ส่วนงานเชิงกลไกที่มีแนวทางรัดกุม ข้อกำหนดนี้สำคัญน้อยลง เราจึงจัดบุคลากรให้เหมาะกับงาน แทนที่จะคิดเงินสำหรับความเชี่ยวชาญที่งานนั้นไม่ต้องใช้

ได้ โดยมีข้อแม้ว่าความครอบคลุมของภาษาถิ่นเป็นเรื่องของการจัดหาบุคลากร และเราจะระบุให้ชัดว่าสำเนียงใดที่เราครอบคลุมได้อย่างน่าเชื่อถือ การตัดสินใจที่สำคัญกว่าอยู่ต้นน้ำ คือจะถอดภาษาถิ่นตามที่พูดจริง หรือปรับให้เป็นภาษาญี่ปุ่นมาตรฐาน ตัวเลือกนั้นเปลี่ยนชุดข้อมูลไปทั้งหมดและต้องตัดสินใจอย่างตั้งใจ

ด้วยข้อตกลงการปรับมาตรฐานที่เป็นลายลักษณ์อักษร บังคับใช้ตั้งแต่ตอนกำกับข้อมูลและตรวจสอบอัตโนมัติก่อนส่งมอบ ข้อตกลงนี้ครอบคลุมการเลือกรูปเขียนของคำที่พบบ่อย การสะกดสระเสียงยาวในคาตากานะ การใช้เลขอารบิกหรือเลขคันจิ อักขระเต็มความกว้างและครึ่งความกว้าง การเว้นวรรครอบข้อความอักษรละติน และเครื่องหมายวรรคตอน ความแปรผันของรูปเขียนคือข้อบกพร่องที่พบบ่อยที่สุดในชุดข้อมูลภาษาญี่ปุ่นที่ไม่ได้กำหนดข้อกำหนดไว้ และเป็นข้อบกพร่องที่ป้องกันได้ง่ายที่สุด

ได้ และเราอยากใช้ของคุณมากกว่ายัดเยียดของเรา เพราะโมเดลที่เขียนตามสไตล์ขององค์กรคุณอยู่แล้วก็ควรเขียนแบบนั้นต่อไป สิ่งที่เราจะทำคือทดสอบมันกับกรณีก้ำกึ่งจริงระหว่างโครงการนำร่อง เพราะคู่มือสไตล์ส่วนใหญ่มีกฎสองถึงสามข้อที่กลายเป็นขัดกันเองเมื่อเจอข้อมูลจริง

04

คุณภาพและการส่งมอบ

คุณภาพถูกวัดอย่างไร และคุณจะได้รับอะไร

ความสอดคล้องระหว่างผู้กำกับข้อมูลพร้อมสัมประสิทธิ์ที่ปรับค่าความบังเอิญแล้ว ความแม่นยำเทียบชุดข้อมูลมาตรฐาน อัตราการชี้ขาด และจำนวนข้อผิดพลาดที่แจกแจงตามระบบจัดหมวดหมู่ที่ตั้งชื่อไว้ แทนที่จะเป็นยอดรวมข้อบกพร่องตัวเดียว ทุกอย่างรายงานเป็นรายป้ายกำกับหรือรายเกณฑ์แทนที่จะรวมกัน เพราะตัวเลขรวมซ่อนหมวดที่กำลังมีปัญหาไว้พอดี หน้าคุณภาพอธิบายว่าแต่ละตัวเลขคำนวณอย่างไรและจับอะไรไม่ได้

JSONL, CSV, CoNLL-U, COCO, SRT, CTM, TextGrid, hOCR และสคีมาที่กำหนดเองตั้งแต่ช่วงเริ่มโครงการ ข้อมูลช่วงข้อความมีตำแหน่งอักขระอยู่ข้างใต้รูปแบบแท็กที่คุณเลือกเสมอ การเปลี่ยนตัวตัดคำในภายหลังจึงเป็นแค่การส่งออกใหม่ ไม่ใช่การกำกับข้อมูลใหม่ ทุกชุดงานส่งมอบพร้อมเวอร์ชันของแนวทางและบันทึกการเปลี่ยนแปลงเทียบกับเวอร์ชันก่อนหน้า

งานแก้ไขผ่านเส้นทางการตรวจทานและการชี้ขาดชุดเดียวกับงานรอบแรก เพราะช่องทางแก้ไขแบบด่วนคือเหตุที่ทำให้ชุดข้อมูลเลื่อนไหลไปทีละชุดงาน ในกรณีที่สาเหตุคือช่องโหว่ของแนวทาง เราจะปรับปรุงแนวทางแล้วทำรายการที่ได้รับผลกระทบใหม่ ไม่ใช่แค่รายการที่คุณติดธงไว้ เพราะช่องโหว่เดียวกันย่อมทำให้เกิดข้อผิดพลาดแบบเดียวกันที่อื่นด้วย

ปริมาณงานที่ทำได้ต่อหน่วยเวลาขึ้นอยู่กับความซับซ้อนของงาน ความเข้มของการตรวจทาน และปริมาณความกำกวมที่มีอยู่จริงในข้อมูล และมันแตกต่างกันระหว่างงานมากกว่าที่การประมาณการส่วนใหญ่ยอมรับ เราวัดปริมาณงานจริงระหว่างโครงการนำร่องบนข้อมูลของคุณ แล้วให้คำมั่นตามแผนที่ได้จากตรงนั้น วันส่งมอบที่ระบุก่อนที่ใครจะได้กำกับข้อมูลของคุณคือการเดาที่นำเสนอในรูปของคำมั่น

เราจะดูรายการที่เป็นปัญหาไปพร้อมกับคุณ โดยทั่วไปหนึ่งในสามอย่างนี้เป็นจริง คือแนวทางกำกวม ซึ่งเราจะปรับปรุงแล้วทำงานใหม่ หรือแนวทางชัดเจนแต่ถูกใช้ผิด ซึ่งเราจะแก้ไขแล้วป้อนกลับเข้ากระบวนการตรวจทาน หรือแนวทางระบุสิ่งที่คุณไม่ต้องการให้มันระบุอีกต่อไป ซึ่งการเปลี่ยนแปลงนั้นเป็นการตัดสินใจเรื่องขอบเขตงาน การจัดข้อขัดแย้งเข้าหนึ่งในสามกรณีนี้ให้ผลมากกว่าการเถียงกันเรื่องป้ายกำกับแต่ละอัน

05

ความปลอดภัย กฎหมาย และเงื่อนไขทางการค้า

การรักษาความลับ สัญญา และการทำงานร่วมกับฝ่ายจัดซื้อ

ด้วย NDA ก่อนมีการแบ่งปันสิ่งใด ข้อตกลงการประมวลผลข้อมูลเมื่อเกี่ยวข้องกับข้อมูลส่วนบุคคล สิทธิ์เข้าถึงตามบทบาทที่จำกัดไว้เฉพาะผู้ที่อยู่ในโครงการ สภาพแวดล้อมการทำงานที่แยกอิสระ และเงื่อนไขการเก็บรักษาและการลบข้อมูลที่เขียนไว้ในสัญญา ไม่ใช่ปล่อยให้เป็นไปตามนโยบายทั่วไป หน้าความปลอดภัยอธิบายมาตรการควบคุมแต่ละข้อ และที่สำคัญไม่แพ้กันคือสิ่งที่เราไม่กล่าวอ้าง

เราไม่กล่าวอ้างการรับรองใด ๆ ที่ไม่ได้เขียนไว้ในสัญญาระหว่างเรากับคุณ ถามถึงมาตรฐานใดมาตรฐานหนึ่งมา แล้วคุณจะได้คำตอบตรง ๆ รวมถึงกรณีที่คำตอบคือไม่มี เราขอแพ้กระบวนการจัดซื้อเพราะพูดตามจริง ดีกว่าผ่านไปได้ด้วยคำกล่าวอ้างที่จะไม่รอดการตรวจสอบ

คุณเป็นเจ้าของ สิ่งส่งมอบและข้อมูลกำกับที่ได้มาเป็นของคุณตามสัญญาความร่วมมือ เราไม่เก็บข้อมูลของลูกค้าไว้เพื่อนำกลับมาใช้ภายใน เพื่อฝึกโมเดล หรือเพื่อใช้เป็นผลงานอ้างอิง และตัวอย่างใด ๆ ที่แสดงบนเว็บไซต์นี้เป็นของเราเอง สร้างขึ้นเพื่อประกอบคำอธิบาย

ได้ เป็นเรื่องปกติสำหรับความร่วมมือระดับองค์กร ในกรณีที่ข้อสัญญาข้อใดผูกมัดให้เราทำสิ่งที่เราทำไม่ได้จริง เช่น ตัวเลขความแม่นยำที่เจาะจง หรือการรับรองที่เราไม่มี เราจะบอกตรง ๆ และเสนอถ้อยคำทางเลือก แทนที่จะลงนามไปก่อนแล้วภาวนา เป็นการพูดคุยที่ช้ากว่า แต่สั้นกว่าทางเลือกอีกทาง

ในกรณีที่มีการจ้างช่วง เราจะเปิดเผย และการจ้างช่วงนั้นอยู่ภายใต้ภาระผูกพันด้านการรักษาความลับชุดเดียวกับที่ผูกพันพนักงานของเราเอง ไม่มีการทำโดยไม่บอกกล่าว หากนโยบายของคุณห้ามการจ้างช่วงโดยสิ้นเชิง แจ้งเรามา แล้วเราจะยืนยันว่าจัดบุคลากรทำโครงการบนเงื่อนไขนั้นได้หรือไม่ ก่อนที่คุณจะผูกมัดตัวเอง

06

การกำกับข้อมูลโดยผู้เชี่ยวชาญ

ผู้เชี่ยวชาญเฉพาะสาขา และขอบเขตของสิ่งที่เรากล่าวอ้าง

สำหรับโครงการที่จำเป็นต้องใช้ เราจัดทีมขึ้นตามความเชี่ยวชาญเฉพาะทางที่ต้องการ ซึ่งอาจรวมถึงผู้ที่มีคุณวุฒิที่เกี่ยวข้องหรือมีประสบการณ์เชิงปฏิบัติในสาขาต่าง ๆ เช่น กฎหมาย ภาษี บัญชี แรงงานและประกันสังคม หรือการจดทะเบียนนิติบุคคล เราไม่ได้เก็บรายชื่อผู้ประกอบวิชาชีพที่มีใบอนุญาตไว้เป็นการประจำ ความพร้อมของบุคลากรจะประเมินเป็นรายโครงการจากขอบเขต ปริมาณงาน ความเฉพาะทาง และกรอบเวลา และหากไม่สามารถจัดหาผู้มีคุณวุฒิตามที่โครงการของคุณต้องการได้ เราจะแจ้งให้คุณทราบก่อนเริ่มงาน

ตัดสินจากว่างานนั้นต้องใช้การตัดสินแบบใด ศัพท์เฉพาะและธรรมเนียมของเอกสารถ่ายทอดให้ผู้กำกับข้อมูลที่ผ่านการอบรมได้ด้วยคลังคำศัพท์ที่ดีและการปรับเทียบหนึ่งรอบ และสำหรับงานส่วนใหญ่ นั่นคือคำตอบที่ดีกว่า เพราะเร็วกว่า สม่ำเสมอกว่า และถูกกว่า ส่วนผู้เชี่ยวชาญจำเป็นเมื่อตัวการตัดสินเองเป็นเชิงวิชาชีพ เช่น การตีความนั้นอธิบายปกป้องได้หรือไม่ หรือคำตอบนั้นจะทำให้ผู้อ่านเข้าใจภาระหน้าที่ของตนผิดหรือไม่

ได้ ผู้เชี่ยวชาญเฉพาะสาขาสามารถให้คะแนนคำตอบที่โมเดลสร้างขึ้นในด้านความถูกต้องของข้อเท็จจริง คุณภาพของการให้เหตุผล ความเหมาะสมเชิงวิชาชีพ และการเป็นไปตามเกณฑ์ที่คุณกำหนด รวมถึงจัดทำการจัดอันดับความชอบสำหรับงานจัดแนวโมเดล ชุดข้อมูลเบนช์มาร์ก การประเมินการค้นคืนข้อมูล และงาน red teaming เหตุผลเบื้องหลังการตัดสินแต่ละครั้งจะถูกบันทึกไว้ ซึ่งมักเป็นสิ่งที่ทำให้การประเมินโดยผู้เชี่ยวชาญคุ้มค่ากับราคาของมัน

ไม่ พวกเขากำกับและประเมินข้อมูล ผลลัพธ์คือข้อมูลฝึกสอนหรือข้อมูลประเมินผลสำหรับระบบ AI ของคุณ ไม่ใช่คำแนะนำทางกฎหมาย ภาษี หรือบัญชีต่อคุณหรือต่อผู้ใช้ของคุณ และไม่มีสิ่งใดที่ผลิตขึ้นในโครงการกำกับข้อมูลที่ควรนำเสนอต่อผู้ใช้ปลายทางในฐานะคำแนะนำเชิงวิชาชีพ เราระบุเรื่องนี้อย่างชัดเจนเพราะความแตกต่างข้อนี้สำคัญต่อทั้งสองฝ่าย

ยังมีคำถามอยู่ใช่ไหม

ถามมาได้โดยตรง

ส่งคำถามมาพร้อมคำขอของคุณ แล้วคุณจะได้คำตอบที่เจาะจงจากคนที่เคยทำโครงการแบบที่คุณกำลังอธิบายมาแล้ว ไม่ใช่ลิงก์ที่ชี้กลับมาที่หน้านี้

เราตอบกลับภายในหนึ่งวันทำการ