자료 / Blog Articles / For contributors

Jwuma 품질 단계 체계: 검토자, QA, 팀 리드가 작업을 공정하게 지키는 방법

Jwuma에 제출된 모든 작업은 다단계 검토 체계를 거치므로, 어느 한 명의 검토자도 작업 대금 지급 여부를 견제 없이 결정할 수 없습니다.

단계 체계가 작동하는 방식

1차 검토자가 프로젝트의 채점 기준에 따라 제출물을 확인합니다. 결정에 이의가 제기되거나 작업이 채점 기준선 근처에 있는 경우 QA 전문가에게 상향되고, 필요하면 거기서 다시 팀 리드 또는 슈퍼 리드에게 상향됩니다. 결정은 상위 단계로만 번복할 수 있으며, 하위 단계가 상위 단계의 결정을 뒤집을 수는 없습니다. 모든 번복은 감사를 위해 기록됩니다.

이 체계가 기여자를 보호하는 이유

검토자 한 명이 컨디션이 나쁘거나, 채점 기준을 잘못 읽거나, 일관되지 않은 기준을 적용하는 일은 어노테이션 플랫폼에서 부당한 반려가 생기는 가장 흔한 원인 중 하나입니다. Jwuma의 단계 체계는 그런 문제가 사용자의 대금이나 프로젝트에서의 평가에 영향을 미치기 전에 발견해 바로잡기 위해 만들어졌습니다.

골드 작업과 보정

Jwuma는 정답이 이미 알려진 항목인 숨겨진 골드 작업도 진행 중인 프로젝트 대기열에 섞어 넣습니다. 이는 기여자를 부당하게 걸러내려는 용도가 아닙니다. 플랫폼 전체에서 검토자의 일관성을 보정하고, 채점 기준 자체에 명확한 설명이 필요할 때 이를 알려 주는 용도입니다.

자주 묻는 질문

반려된 작업에 동의하지 않으면 어떻게 되나요?

검토 상향을 요청할 수 있습니다. 작업은 QA 전문가에게 넘어가고, 여전히 이견이 있으면 팀 리드에게 넘어가며, 팀 리드는 원래의 결정을 번복할 수 있습니다.

상위 단계 검토자가 하위 단계 검토자의 결정을 번복할 수 있나요?

예. 번복은 단계 체계에서 위쪽으로만 이루어지며, 모든 번복은 기록됩니다.

골드 작업이란 무엇이며, 제 점수에 부당하게 영향을 주지는 않나요?

골드 작업은 정답이 알려진 품질 관리용 항목으로, 검토자와 기여자 전반의 일관성을 측정하는 데 쓰입니다. 플랫폼 전체에서 사용하는 일반적인 보정 도구이며 함정이 아닙니다.

평소에 제 작업은 누가 채점하나요?

대부분의 제출물은 1차 검토자가 각 프로젝트별로 공개된 채점 기준에 따라 채점합니다.

기여자 기준에 대해 더 알아보기 →

Published 2026-10-02 by Jwuma, operated by Corpshore AI. This piece is written for Jwuma contributors. Visit platform.corpshore.ai 에서 지원하거나 로그인하세요.