FAQ

Pertanyaan yang sering diajukan

Pertanyaan yang benar-benar diajukan kepada kami, dijawab sepanjang yang memang diperlukan, bukan dalam satu kalimat. Dikelompokkan agar Anda dapat menemukan pertanyaan Anda tanpa membaca sisanya.

Jika ada hal yang belum tercakup di sini, sertakan saja dalam permintaan Anda dan kami akan menjawabnya langsung alih-alih menunjuk kembali ke halaman ini.

01

Memulai

Seperti apa bentuk kerja sama pertama.

Dengan pilot yang jelas cakupannya. Anda mengirimkan sampel data yang representatif dan penjelasan tentang apa yang seharusnya dilakukan model; kami menyusun draf keputusan pedoman yang akan dituntut tugas tersebut, menganotasi satu batch kecil, dan melaporkan kesepakatan yang terukur di dalamnya. Pilot ada untuk menemukan di mana dua anotator yang sama-sama masuk akal berbeda pendapat, karena di situlah spesifikasi Anda belum lengkap. Penakaran volume produksi dan harganya mengikuti hasil pengukuran pilot, bukan sebuah perkiraan.

Sampel data, deskripsi tugas, format keluaran yang Anda butuhkan, dan batasan apa pun — tenggat waktu, persyaratan kerahasiaan, perangkat yang Anda inginkan kami pakai. Penawaran yang dibuat hanya dari deskripsi tugas adalah tebakan; kami lebih memilih menelaah data nyata selama satu jam daripada menghasilkan angka yang berubah setelah batch pertama.

Umumnya satu sampai tiga minggu sejak data diterima, bergantung pada seberapa banyak pekerjaan spesifikasi yang dibutuhkan tugas tersebut. Sebagian besar waktunya habis untuk menyusun pedoman dan kalibrasi, bukan untuk menganotasi. Tugas yang sudah punya pedoman teruji bergerak jauh lebih cepat.

Tidak ada minimum yang tetap. Kami menjalankan pilot kecil dan juga meningkatkannya ke program produksi bervolume tinggi. Yang menetapkan batas bawah secara praktis adalah biaya penyiapan — pekerjaan pedoman, perangkat, dan kalibrasi sebagian besar tetap besarnya berapa pun volumenya, sehingga pekerjaan sekali jalan yang sangat kecil bisa menanggung porsi biaya itu secara tidak proporsional. Kami akan memberi tahu Anda bila memang begitu keadaannya, bukan menyiasatinya dalam penawaran.

Per unit pekerjaan — per item, per jam audio, per gambar, per evaluasi — dengan tarif yang ditentukan oleh kompleksitas tugas, kedalaman tinjauan, dan tingkat keahlian yang dibutuhkan. Penyusunan pedoman dan kalibrasi dihitung cakupannya secara terpisah karena keduanya pekerjaan nyata yang terjadi sebelum satu item pun dilabeli. Kami tidak memungut biaya untuk percakapan penentuan cakupan pilot.

02

Layanan dan cakupan

Apa yang kami kerjakan, dan di mana kami bukan pilihan yang tepat.

Bahasa Jepang adalah alasan kami dibangun. Kami menangani pekerjaan dwibahasa Jepang–Inggris — tinjauan terjemahan, penyelarasan lintas bahasa, set evaluasi paralel — karena semuanya bersandar pada pertimbangan kebahasaan Jepang yang sama. Untuk pekerjaan bervolume besar dalam bahasa lain, kami lebih memilih menyampaikan terus terang bahwa kami bukan vendor yang tepat daripada menerima proyeknya lalu mensubkontrakkannya.

Bisa. Kami bekerja di platform dan desktop virtual yang disediakan klien, termasuk ketika kebijakan mensyaratkan data tidak boleh keluar dari infrastruktur Anda, dan di lingkungan aman milik kami sendiri bila Anda lebih memilih tidak menyiapkan akun. Yang berubah adalah perangkatnya; pedoman, tahap tinjauan, dan pelaporan QA tidak berubah.

Kami mengumpulkan dan membuat data bila pekerjaannya berbahasa Jepang — menulis data instruksi, menyusun prompt evaluasi, merekam ucapan berskrip, mencari sampel dokumen. Kami bukan operasi pengumpulan data serbaguna, dan untuk pengumpulan lapangan berskala besar Anda akan lebih terbantu oleh penyedia yang memang khusus untuk itu.

Bisa, dan hal pertama yang kami lakukan adalah membaca pedoman mereka lalu menganotasi ulang sampel data yang sudah mereka kirimkan secara buta. Itu memberi tahu Anda apa yang sebenarnya Anda miliki — termasuk apakah label yang ada konsisten secara internal — sebelum kami menambahkannya. Melanjutkan sebuah dataset tanpa mengukur isinya saat ini adalah cara inkonsistensi menumpuk.

Ya. Skema tim khusus lazim untuk program AI jangka panjang, ketika anotator yang sama membawa pedoman itu terus maju dan konteks yang mereka kumpulkan menjadi aset yang nyata. Skema ini juga yang paling rawan pergeseran pedoman, sehingga disertai kalibrasi ulang berkala terhadap sebuah gold set.

03

Bahasa Jepang

Apa arti cakupan bahasa Jepang dalam praktiknya.

Ragam formal dan informal dalam kanji, hiragana, katakana, dan aksara Latin, termasuk bahasa hormat, variasi kedaerahan, bahasa gaul, jargon industri, dan tulisan teknis campuran Jepang–Inggris. Aturan normalisasi untuk pilihan aksara, angka, tanda baca, emoji, dan karakter full-width disepakati saat kickoff, karena pilihan-pilihan itulah yang menentukan apakah korpusnya konsisten secara internal.

Ya. Hal ini penting untuk penilaian yang bergantung pada bagaimana sebuah kalimat diterima, bukan pada apa yang dirujuknya — apakah sebuah penolakan terbaca sebagai penolakan, apakah tingkat kesantunannya sesuai dengan hubungan antarpihak, apakah sebuah ungkapan terdengar seperti terjemahan. Untuk tugas mekanis dengan pedoman yang ketat, persyaratan itu tidak sekritis itu, dan kami menyusun tim sesuai kebutuhan alih-alih menagih biaya untuk keahlian yang tidak dibutuhkan tugas tersebut.

Bisa, dengan catatan bahwa cakupan dialek adalah soal ketersediaan orang dan kami akan spesifik tentang ragam mana yang dapat kami tangani dengan andal. Keputusan yang lebih penting ada di hulu: apakah dialek ditranskripsikan sebagaimana diucapkan atau dinormalisasi ke bahasa Jepang baku. Pilihan itu mengubah datasetnya secara menyeluruh dan harus diambil dengan sengaja.

Dengan konvensi normalisasi tertulis, yang diterapkan saat anotasi dan ditegakkan oleh pemeriksaan otomatis sebelum pengiriman. Konvensi itu mencakup pilihan aksara untuk kata yang sering muncul, ejaan vokal panjang dalam katakana, angka Arab versus kanji, karakter full-width dan half-width, serta spasi di sekitar teks Latin dan tanda baca. Variasi ortografis adalah cacat paling umum pada dataset bahasa Jepang yang tidak dispesifikasikan sekaligus yang paling mudah dicegah.

Bisa, dan kami lebih memilih memakai punya Anda daripada memaksakan punya kami — model yang sudah menulis dengan gaya rumah Anda sebaiknya tetap begitu. Yang akan kami lakukan adalah mengujinya dengan kasus batas yang nyata selama pilot, karena sebagian besar panduan gaya punya dua atau tiga aturan yang ternyata saling bertabrakan begitu bertemu data yang sebenarnya.

04

Kualitas dan pengiriman

Bagaimana kualitas diukur dan apa yang Anda terima.

Kesepakatan antaranotator dengan koefisien terkoreksi peluang, akurasi gold set, tingkat ajudikasi, dan jumlah kesalahan yang dirinci menurut taksonomi bernama, bukan sebagai satu total cacat. Semuanya dilaporkan per label atau per kriteria, bukan dicampur, karena angka campuran justru menyembunyikan kategori yang sedang gagal. Halaman kualitas menguraikan bagaimana tiap angka dihitung dan apa yang tidak tertangkap olehnya.

JSONL, CSV, CoNLL-U, COCO, SRT, CTM, TextGrid, hOCR, dan skema khusus yang ditentukan saat kickoff. Data rentang selalu menyertakan offset karakter di balik format tag apa pun yang Anda pilih, sehingga pergantian tokenizer di kemudian hari cukup diselesaikan dengan ekspor ulang, bukan anotasi ulang. Setiap batch dikirim bersama versi pedomannya dan catatan perubahan terhadap batch sebelumnya.

Revisi melewati jalur tinjauan dan ajudikasi yang sama dengan pekerjaan tahap pertama — jalur koreksi cepat justru cara dataset bergeser antarbatch. Bila penyebabnya adalah lubang pada pedoman, kami merevisi pedomannya lalu mengerjakan ulang item yang terdampak, bukan hanya item yang Anda tandai, karena lubang yang sama pasti telah menghasilkan kesalahan yang sama di tempat lain.

Throughput bergantung pada kompleksitas tugas, kedalaman tinjauan, dan seberapa banyak ambiguitas yang sungguh-sungguh terkandung dalam datanya, dan variasinya antartugas lebih besar daripada yang diakui kebanyakan perkiraan. Kami mengukur throughput yang sebenarnya selama pilot pada data Anda dan menetapkan rencana dari situ. Tanggal pengiriman yang disebutkan sebelum ada orang yang menganotasi data Anda adalah tebakan yang disajikan sebagai komitmen.

Kami menelaah item-item tersebut bersama Anda. Biasanya salah satu dari tiga hal yang berlaku: pedomannya ambigu, dan kami merevisinya lalu mengerjakan ulang; pedomannya jelas tetapi salah diterapkan, dan kami memperbaikinya lalu mengembalikannya ke proses tinjauan; atau pedomannya menyatakan sesuatu yang tidak lagi Anda inginkan, dan perubahan itu menjadi keputusan cakupan. Memilah perbedaan pendapat ke dalam salah satu dari tiga kategori itu lebih produktif daripada memperdebatkan label satu per satu.

05

Keamanan, hukum, dan komersial

Kerahasiaan, kontrak, dan cara kami bekerja dengan bagian pengadaan.

NDA sebelum apa pun dibagikan, perjanjian pemrosesan data bila menyangkut informasi pribadi, akses berbasis peran yang terbatas pada orang-orang yang ditugaskan di proyek tersebut, lingkungan kerja terisolasi, serta ketentuan retensi dan penghapusan yang dituliskan ke dalam kontrak, bukan diserahkan pada kebijakan sepihak. Halaman keamanan membahas tiap kontrol dan, sama pentingnya, apa yang tidak kami klaim.

Kami tidak mengklaim sertifikasi apa pun yang tidak tertulis di dalam kontrak kami dengan Anda. Tanyakan tentang skema tertentu dan Anda akan mendapat jawaban langsung, termasuk ketika jawabannya tidak. Kami lebih memilih kalah dalam proses pengadaan karena berkata akurat daripada lolos berkat klaim yang tidak akan bertahan saat diaudit.

Anda. Hasil kerja dan anotasi turunannya menjadi milik Anda berdasarkan kontrak kerja sama. Kami tidak menyimpan data klien untuk pemakaian ulang internal, untuk melatih model, atau sebagai materi portofolio, dan materi contoh apa pun yang ditampilkan di situs web ini adalah milik kami sendiri, dibuat untuk ilustrasi.

Bisa, dan itu lazim untuk kerja sama tingkat enterprise. Bila ada klausa yang mengikat kami pada sesuatu yang sebenarnya tidak dapat kami penuhi — angka akurasi tertentu, sertifikasi yang tidak kami miliki — kami akan menyampaikannya dan mengusulkan rumusan alternatif, bukan menandatanganinya sambil berharap. Percakapannya memang lebih lambat, tetapi lebih singkat daripada alternatifnya.

Bila ada subkontrak, hal itu diungkapkan, dan subkontraktornya terikat kewajiban kerahasiaan yang sama dengan yang mengikat staf kami sendiri. Hal itu tidak pernah diandaikan diam-diam. Jika kebijakan Anda melarang subkontrak sama sekali, sampaikan kepada kami dan kami akan memastikan apakah kami dapat menyusun tim proyeknya dengan syarat tersebut sebelum Anda menyanggupinya.

06

Anotasi ahli

Spesialis domain, dan batas dari apa yang kami klaim.

Untuk proyek yang membutuhkannya, kami membentuk tim sesuai keahlian domain yang diperlukan, yang dapat mencakup orang dengan kualifikasi relevan atau pengalaman praktis di bidang seperti hukum, perpajakan, akuntansi, ketenagakerjaan dan jaminan sosial, atau pendaftaran perusahaan. Kami tidak memiliki daftar tetap tenaga profesional berlisensi. Ketersediaan dinilai untuk setiap proyek berdasarkan cakupan, volume, spesialisasi, dan jadwalnya, dan jika suatu kualifikasi tidak dapat kami penuhi untuk proyek Anda, kami akan menyampaikannya sebelum proyek dimulai.

Dari jenis penilaian yang dituntut tugas itu. Terminologi dan konvensi dokumen dapat dialihkan kepada anotator terlatih lewat leksikon yang baik dan satu putaran kalibrasi, dan untuk sebagian besar pekerjaan itulah jawaban yang lebih tepat — lebih cepat, lebih konsisten, dan lebih murah. Spesialis diperlukan ketika penilaiannya sendiri bersifat profesional: apakah sebuah penafsiran dapat dipertahankan, apakah sebuah jawaban akan menyesatkan pembaca tentang kewajibannya.

Bisa. Spesialis domain dapat menilai jawaban yang dihasilkan dari sisi akurasi fakta, kualitas penalaran, kepatutan profesional, dan kesesuaian dengan kriteria Anda, serta dapat menghasilkan peringkat preferensi untuk pekerjaan penyelarasan, set benchmark, evaluasi retrieval, dan red teaming. Penalaran di balik tiap penilaian ikut dicatat, dan biasanya hal itulah yang membuat evaluasi oleh ahli sepadan dengan biayanya.

Tidak. Mereka menganotasi dan mengevaluasi data. Keluarannya adalah data pelatihan atau data evaluasi untuk sistem AI Anda, bukan nasihat hukum, perpajakan, atau akuntansi kepada Anda maupun kepada pengguna Anda, dan tidak ada hasil dari proyek anotasi yang boleh disajikan kepada pengguna akhir sebagai nasihat profesional. Kami menyatakannya secara eksplisit karena pembedaan ini penting bagi kedua belah pihak.

Masih ada pertanyaan?

Tanyakan langsung.

Sertakan dalam permintaan Anda dan Anda akan mendapat jawaban spesifik dari orang yang pernah menjalankan proyek seperti yang Anda gambarkan — bukan tautan kembali ke halaman ini.

Kami membalas dalam satu hari kerja.