CONTRIBUTION POLICY V1
제출·라벨링 참여 원칙
올릴 수 있는 자료
본인이 작성했거나 오너의 명시적 허락을 받은 이미지만 제출하세요. 이름, 학번, 학교, 연락처, 사인 등 개인정보는 먼저 제거해야 합니다. 타인의 답안을 동의 없이 제출하면 안 됩니다.
라벨 방법
보이는 문자와 수식 구조만 전사하세요. 정답을 추측하거나 점수를 매기지 마세요. 근호 범위, 괄호, 분수선, 위·아래첨자, 취소선은 관계 태그로 남겨주세요. 판독할 수 없으면 ‘판독 불가’를 선택하세요.
과거 OCR 실패 자료
기존 처리에서 실패하거나 불확실했던 자료도 최소 OCR 영역으로 잘라 공개 라벨 큐에 순차 등록합니다. 원본 답안 전체, 이름, 학번, 정답, 평가표와 점수는 라벨 화면에 제공하지 않습니다.
합의와 학습 후보
같은 작업을 서로 다른 참여자 3명이 독립적으로 라벨링합니다. 정확히 일치해야만 합의로 분류되며, 불일치는 오너 재검토로 보냅니다. 학습 동의가 있더라도 작성자 분리가 확정되기 전에는 학습 배치에 들어가지 않습니다.
모델이 발전하는 순서
합의·재검토가 끝난 라벨은 버전이 고정된 오프라인 데이터셋에만 추가합니다. 새 후보 모델을 별도로 학습하고, 한글 문자 정확도와 수식 모양·근호 범위·괄호·첨자 구조를 이전 모델과 비교한 뒤 성능이 좋아진 릴리스만 서명해 교체합니다. 운영 중인 모델이 웹 라벨을 즉시 학습하는 온라인 학습은 하지 않습니다.
채점은 봉인 Shadow로 진행
OCR 보강과 함께 46개 시험 무인 재평가를 진행합니다. 고정 평가세트와 수식 구조 지표를 통과하기 전 결과는 공식 점수로 공개하지 않습니다.