FAQ

Câu hỏi thường gặp

Những câu hỏi chúng tôi thực sự nhận được, trả lời với độ dài xứng đáng chứ không gói trong một câu. Được nhóm lại để quý khách tìm ra câu của mình mà không phải đọc hết phần còn lại.

Nếu có điều gì chưa được đề cập ở đây, hãy gửi kèm yêu cầu của quý khách và chúng tôi sẽ trả lời trực tiếp thay vì chỉ quý khách quay lại trang này.

01

Bắt đầu

Một lần hợp tác đầu tiên trông như thế nào.

Bằng một dự án thử nghiệm có phạm vi rõ ràng. Quý khách gửi một mẫu dữ liệu có tính đại diện và mô tả về việc mô hình cần làm gì; chúng tôi soạn những quyết định về hướng dẫn mà tác vụ sẽ đòi hỏi, gán nhãn một lô nhỏ, rồi báo cáo mức đồng thuận đo được trên đó. Dự án thử nghiệm tồn tại để tìm ra chỗ hai chuyên viên gán nhãn đều có lý lại bất đồng với nhau, vì đó chính là chỗ bản đặc tả của quý khách còn thiếu. Việc định quy mô và định giá cho giai đoạn chính thức đi theo những gì dự án thử nghiệm đo được chứ không theo một ước lượng.

Một mẫu dữ liệu, mô tả tác vụ, định dạng đầu ra quý khách cần, và mọi ràng buộc — thời hạn, yêu cầu bảo mật, công cụ mà quý khách muốn chúng tôi làm việc bên trong. Một báo giá dựng lên chỉ từ mô tả tác vụ là một phỏng đoán; chúng tôi thà nhìn vào dữ liệu thật trong một tiếng còn hơn đưa ra một con số sẽ thay đổi ngay sau lô đầu tiên.

Thường là một đến ba tuần kể từ khi nhận dữ liệu, tùy vào lượng công việc đặc tả mà tác vụ đòi hỏi. Phần lớn thời gian đó là soạn tài liệu hướng dẫn và hiệu chỉnh, không phải gán nhãn. Một tác vụ đã có sẵn tài liệu hướng dẫn đã được kiểm nghiệm thì đi nhanh hơn đáng kể.

Không có mức tối thiểu cố định. Chúng tôi nhận cả những dự án thử nghiệm nhỏ và mở rộng đến các chương trình chính thức khối lượng lớn. Thứ tạo ra một ngưỡng sàn trên thực tế là chi phí thiết lập — công việc về tài liệu hướng dẫn, công cụ và hiệu chỉnh gần như cố định bất kể khối lượng, nên một công việc rất nhỏ làm một lần sẽ phải gánh một phần chi phí đó lớn không tương xứng. Chúng tôi sẽ nói rõ khi rơi vào trường hợp đó thay vì báo giá vòng vo.

Theo đơn vị công việc — theo mục, theo giờ âm thanh, theo ảnh, theo lượt đánh giá — với đơn giá phụ thuộc vào độ phức tạp của tác vụ, độ sâu thẩm định và mức độ chuyên môn yêu cầu. Việc xây dựng tài liệu hướng dẫn và hiệu chỉnh được tính riêng vì đó là công việc thật diễn ra trước khi có mục nào được gán nhãn. Chúng tôi không tính phí cho các cuộc trao đổi xác định phạm vi thử nghiệm.

02

Dịch vụ và phạm vi

Chúng tôi làm gì, và ở đâu chúng tôi không phải lựa chọn phù hợp.

Tiếng Nhật là thứ chúng tôi được xây dựng để làm. Chúng tôi nhận các công việc song ngữ Nhật – Anh — thẩm định bản dịch, căn khớp liên ngôn ngữ, bộ dữ liệu đánh giá song song — vì chúng dựa trên cùng một phán đoán về tiếng Nhật. Với công việc khối lượng lớn ở các ngôn ngữ khác, chúng tôi thà nói thẳng rằng mình không phải nhà cung cấp phù hợp còn hơn nhận dự án rồi thuê ngoài.

Có. Chúng tôi làm việc trong các nền tảng và máy tính ảo do khách hàng cung cấp, kể cả khi chính sách yêu cầu dữ liệu không bao giờ rời khỏi hạ tầng của quý khách, và trong môi trường bảo mật của riêng chúng tôi khi quý khách không muốn cấp thêm tài khoản. Công cụ thì thay đổi; tài liệu hướng dẫn, các lượt thẩm định và việc báo cáo QA thì không.

Chúng tôi thu thập và tạo dữ liệu ở những chỗ đó là công việc về tiếng Nhật — viết dữ liệu chỉ dẫn, xây dựng câu lệnh đánh giá, thu âm giọng nói theo kịch bản, tìm nguồn tài liệu mẫu. Chúng tôi không phải một đơn vị thu thập dữ liệu đa năng, và với việc thu thập thực địa quy mô lớn thì một đơn vị chuyên trách sẽ phục vụ quý khách tốt hơn.

Có, và việc đầu tiên chúng tôi làm là đọc tài liệu hướng dẫn của họ rồi gán nhãn lại một cách mù trên một mẫu dữ liệu họ đã bàn giao. Điều đó cho quý khách biết mình thực sự đang có gì trong tay — kể cả việc các nhãn hiện có có nhất quán với nhau hay không — trước khi chúng tôi thêm vào đó. Tiếp tục một bộ dữ liệu mà không đo xem nó đang chứa gì chính là cách sự thiếu nhất quán bị nhân lên.

Có. Hình thức đội ngũ chuyên trách rất phổ biến với các chương trình AI kéo dài, khi cùng những chuyên viên gán nhãn đó mang tài liệu hướng dẫn tiến về phía trước và vốn ngữ cảnh tích lũy của họ là một tài sản thật. Đây cũng là hình thức mà việc trôi dạt tài liệu hướng dẫn đáng lo nhất, nên nó đi kèm việc hiệu chỉnh lại định kỳ theo một bộ chuẩn.

03

Tiếng Nhật

Phạm vi tiếng Nhật trên thực tế nghĩa là gì.

Văn phong trang trọng và thân mật, trên kanji, hiragana, katakana và chữ Latin, bao gồm kính ngữ, biến thể vùng miền, tiếng lóng, thuật ngữ chuyên ngành và văn bản kỹ thuật pha trộn Nhật – Anh. Quy tắc chuẩn hóa về chọn hệ chữ viết, chữ số, dấu câu, emoji và ký tự full-width được thống nhất khi khởi động dự án, vì chính những lựa chọn đó quyết định kho ngữ liệu có nhất quán với chính nó hay không.

Đúng vậy. Điều này quan trọng với những phán đoán phụ thuộc vào cách một câu chạm tới người nghe chứ không phải vào nghĩa đen của nó — một lời từ chối có đọc ra là từ chối hay không, một mức độ lịch sự có phù hợp với mối quan hệ hay không, một cách diễn đạt có nghe như văn dịch hay không. Với các tác vụ máy móc có tài liệu hướng dẫn chặt chẽ, yêu cầu đó ít quan trọng hơn, và chúng tôi bố trí nhân sự tương ứng thay vì thu tiền cho một mức chuyên môn mà tác vụ không cần.

Có, với lưu ý rằng phạm vi phương ngữ là một câu chuyện về bố trí nhân sự và chúng tôi sẽ nói cụ thể biến thể nào chúng tôi bao phủ được một cách ổn định. Quyết định quan trọng hơn nằm ở đầu nguồn: phương ngữ được ghi đúng như lời nói hay được chuẩn hóa về tiếng Nhật chuẩn. Lựa chọn đó thay đổi hoàn toàn bộ dữ liệu và cần được đưa ra một cách có chủ đích.

Bằng một quy ước chuẩn hóa viết thành văn bản, được áp dụng ngay khi gán nhãn và được các khâu kiểm tra tự động thực thi trước khi bàn giao. Nó bao trùm việc chọn hệ chữ viết cho các từ thường gặp, cách viết trường âm trong katakana, dùng số Ả Rập hay số kanji, ký tự full-width và half-width, khoảng trắng quanh văn bản Latin và dấu câu. Biến thể chính tả là lỗi phổ biến nhất trong các bộ dữ liệu tiếng Nhật không được đặc tả, và cũng là lỗi dễ phòng ngừa nhất.

Có, và chúng tôi thà dùng của quý khách còn hơn áp đặt của mình — một mô hình đã viết theo phong cách riêng của quý khách thì nên tiếp tục như vậy. Điều chúng tôi sẽ làm là kiểm nghiệm bộ quy tắc đó trên các trường hợp biên thực tế trong giai đoạn thử nghiệm, vì phần lớn bộ quy tắc văn phong đều có hai đến ba quy tắc hóa ra lại mâu thuẫn với nhau khi gặp dữ liệu thật.

04

Chất lượng và bàn giao

Chất lượng được đo thế nào và quý khách nhận được gì.

Mức đồng thuận giữa các chuyên viên gán nhãn kèm một hệ số đã hiệu chỉnh theo may rủi, độ chính xác trên bộ chuẩn, tỷ lệ phải phân xử, và số lượng lỗi phân tách theo một bảng phân loại có tên gọi rõ ràng thay vì một tổng số lỗi duy nhất. Mọi thứ đều báo cáo theo từng nhãn hoặc từng tiêu chí chứ không gộp chung, vì một con số gộp che giấu đúng cái nhóm đang có vấn đề. Trang về chất lượng trình bày cách tính từng con số và điều mà nó không nắm bắt được.

JSONL, CSV, CoNLL-U, COCO, SRT, CTM, TextGrid, hOCR và các schema tùy chỉnh được định nghĩa khi khởi động dự án. Dữ liệu gán nhãn đoạn luôn kèm vị trí ký tự bên dưới bất kỳ định dạng thẻ nào quý khách nhận, để sau này việc đổi tokenizer chỉ là xuất lại dữ liệu chứ không phải gán nhãn lại. Mỗi lô bàn giao đều kèm phiên bản tài liệu hướng dẫn và nhật ký thay đổi so với lô trước.

Các bản chỉnh sửa đi qua đúng lộ trình thẩm định và phân xử như lượt làm đầu tiên — một làn sửa nhanh chính là cách các bộ dữ liệu trôi dạt giữa các lô. Khi nguyên nhân là một lỗ hổng trong tài liệu hướng dẫn, chúng tôi sửa tài liệu hướng dẫn và làm lại các mục bị ảnh hưởng, không chỉ những mục quý khách đánh dấu, vì cùng lỗ hổng đó chắc chắn đã tạo ra cùng lỗi ở chỗ khác.

Năng suất phụ thuộc vào độ phức tạp của tác vụ, độ sâu thẩm định và mức độ mơ hồ thực sự trong dữ liệu, và nó dao động giữa các tác vụ nhiều hơn phần lớn ước lượng thừa nhận. Chúng tôi đo năng suất thực tế trong giai đoạn thử nghiệm trên dữ liệu của quý khách rồi cam kết một kế hoạch từ đó. Một ngày bàn giao được đưa ra trước khi có ai gán nhãn dữ liệu của quý khách là một phỏng đoán được trình bày như một cam kết.

Chúng tôi cùng quý khách xem lại chính những mục đó. Thường một trong ba điều sau là đúng: tài liệu hướng dẫn còn mơ hồ, khi đó chúng tôi sửa nó và làm lại; tài liệu hướng dẫn đã rõ nhưng bị áp dụng sai, khi đó chúng tôi sửa và đưa việc này trở lại khâu thẩm định; hoặc tài liệu hướng dẫn nói một điều mà quý khách không còn muốn nó nói nữa, khi đó thay đổi là một quyết định về phạm vi. Xếp một bất đồng vào một trong ba loại đó hiệu quả hơn nhiều so với tranh luận về từng cái nhãn riêng lẻ.

05

Bảo mật, pháp lý và thương mại

Bảo mật, hợp đồng và cách chúng tôi làm việc với bộ phận mua sắm.

Ký NDA trước khi chia sẻ bất cứ thứ gì, ký thỏa thuận xử lý dữ liệu khi có liên quan đến thông tin cá nhân, phân quyền theo vai trò chỉ giới hạn ở những người được bố trí cho dự án, một môi trường làm việc tách biệt, cùng các điều khoản về thời hạn lưu trữ và xóa dữ liệu được ghi vào hợp đồng chứ không để mặc cho chính sách chung. Trang về bảo mật trình bày từng biện pháp kiểm soát và, quan trọng không kém, những gì chúng tôi không tuyên bố.

Chúng tôi không tuyên bố bất kỳ chứng nhận nào không được ghi vào hợp đồng của chúng tôi với quý khách. Hãy hỏi về một hệ thống cụ thể và quý khách sẽ nhận được câu trả lời thẳng, kể cả khi câu trả lời đó là không. Chúng tôi thà thua một cuộc thầu vì nói đúng sự thật còn hơn qua được nó bằng một tuyên bố không trụ nổi trước một cuộc kiểm toán.

Quý khách. Sản phẩm bàn giao và phần gán nhãn phái sinh thuộc về quý khách theo hợp đồng hợp tác. Chúng tôi không giữ lại dữ liệu khách hàng để tái sử dụng nội bộ, để huấn luyện mô hình hay làm hồ sơ năng lực, và mọi tài liệu mẫu hiển thị trên website này là của chính chúng tôi, được tạo ra để minh họa.

Có, đó là chuyện bình thường với các hợp tác cấp doanh nghiệp. Ở chỗ một điều khoản ràng buộc chúng tôi vào điều mà chúng tôi thực sự không làm được — một con số chính xác cụ thể, một chứng nhận chúng tôi không có — chúng tôi sẽ nói rõ và đề xuất cách diễn đạt khác thay vì ký rồi hy vọng. Đó là một cuộc trao đổi chậm hơn nhưng ngắn hơn so với phương án ngược lại.

Ở đâu có thuê ngoài thì điều đó được công bố, và nó được bao phủ bởi chính những nghĩa vụ bảo mật ràng buộc nhân sự của chúng tôi. Nó không bao giờ được mặc định một cách âm thầm. Nếu chính sách của quý khách cấm hoàn toàn việc thuê ngoài, hãy cho chúng tôi biết và chúng tôi sẽ xác nhận xem có bố trí được nhân sự cho dự án trên cơ sở đó hay không trước khi quý khách cam kết.

06

Gán nhãn bởi chuyên gia

Chuyên gia lĩnh vực, và giới hạn của những gì chúng tôi tuyên bố.

Với những dự án có nhu cầu đó, chúng tôi xây dựng đội ngũ xoay quanh chuyên môn lĩnh vực được yêu cầu, có thể bao gồm những người có chứng chỉ phù hợp hoặc kinh nghiệm thực tiễn trong các lĩnh vực như pháp luật, thuế, kế toán, lao động và bảo hiểm xã hội, hoặc đăng ký doanh nghiệp. Chúng tôi không duy trì một danh sách thường trực gồm những người hành nghề có chứng chỉ. Khả năng đáp ứng được đánh giá theo từng dự án dựa trên phạm vi, khối lượng, mức độ chuyên sâu và tiến độ, và nếu không thể tìm được người có chứng chỉ phù hợp cho dự án của quý khách, chúng tôi sẽ thông báo trước khi dự án bắt đầu.

Bằng loại phán đoán mà tác vụ đòi hỏi. Thuật ngữ và quy ước tài liệu có thể truyền lại cho một chuyên viên gán nhãn được đào tạo thông qua một bộ từ vựng tốt và một vòng hiệu chỉnh, và với phần lớn công việc thì đó là câu trả lời tốt hơn — nhanh hơn, nhất quán hơn và rẻ hơn. Chuyên gia là xứng đáng khi bản thân phán đoán mang tính nghề nghiệp: một cách diễn giải có bảo vệ được hay không, một câu trả lời có khiến người đọc hiểu nhầm về nghĩa vụ của họ hay không.

Có. Chuyên gia lĩnh vực có thể chấm điểm các câu trả lời do mô hình tạo ra về độ chính xác thông tin, chất lượng lập luận, tính phù hợp về chuyên môn và mức tuân thủ các tiêu chí của quý khách, đồng thời tạo ra xếp hạng ưu tiên phục vụ công việc căn chỉnh, bộ dữ liệu chuẩn, đánh giá truy xuất và red teaming. Lập luận đứng sau từng phán đoán đều được ghi lại, và đó thường là thứ khiến một cuộc đánh giá bởi chuyên gia xứng đáng với chi phí của nó.

Không. Họ đang gán nhãn và đánh giá dữ liệu. Kết quả là dữ liệu huấn luyện hoặc dữ liệu đánh giá cho hệ thống AI của quý khách, không phải tư vấn pháp lý, thuế hay kế toán dành cho quý khách hoặc cho người dùng của quý khách, và không có gì được tạo ra trong một dự án gán nhãn nên được trình bày với người dùng cuối như một lời tư vấn nghề nghiệp. Chúng tôi nói rõ điều này vì sự phân biệt đó quan trọng với cả hai bên.

Vẫn còn câu hỏi?

Hãy hỏi thẳng chúng tôi.

Hãy gửi kèm yêu cầu của quý khách và quý khách sẽ nhận được câu trả lời cụ thể từ một người đã từng chạy đúng loại dự án mà quý khách đang mô tả — chứ không phải một đường dẫn quay lại trang này.

Chúng tôi phản hồi trong vòng một ngày làm việc.