DataAnnotationOutlier AIMercorAlignerrTELUSWelocalize
AI 트레이너 평가를 한 번에 통과하세요
대부분의 AI 트레이너 플랫폼은 스타터 또는 자격 평가에 단 한 번의 기회만 줍니다. 실전 전에 A/B 응답 평가, 환각(Hallucination) 탐지, 코딩 RLHF, 이진 루브릭 및 검색 품질 평가를 연습하세요.
- 391 개 자체 제작 문제
- 32 개 평가
- 6 개 트랙
- 17 개 언어
트랙별 연습 시험
아직 모든 연습 시험이 번역된 것은 아닙니다. “영어”라고 표시된 시험은 영어 페이지로 열립니다.
코어 및 제너럴리스트 RLHF
A/B 응답 비교, 지시 준수, 부정 제약 조건, 팩트 체크 및 평가 근거 작성.
코딩 및 SWE 평가
LLM 코드 출력 디버깅, 엣지 케이스 검증, 알고리즘 복잡도 및 코드 선호도 순위 지정.
수학, 논리 및 STEM
단계별 사고의 사슬(CoT) 검증, 산술 및 증명 오류 발견, 형식 논리 퍼즐.
루브릭 설계 및 프롬프팅
원자적 이진 자동 채점 루브릭 작성, 적대적 프롬프트 설계 및 응답 근거성(Groundedness) 채점.
검색 품질 및 안전성 평가
페이지 품질(E-E-A-T), Needs Met 평가 척도, YMYL 안전성 및 PII/레드티밍 안전 가이드라인.
이중 언어 및 작문
어학 평가를 위한 어조, 문법, 문체 제어, 현지화 정확성 및 창의적 제약 조건 준수.
이용 방법
- 트랙 또는 플랫폼을 선택하세요. 스타터 평가, 코딩 자격 시험, 수학 검증 및 루브릭 설계에서 평가하는 핵심 기술을 정확히 연습합니다.
- 한 번에 10개의 실전 시나리오를 풀어보세요. 미묘한 환각, 누락된 부정 제약 조건, 오프바이원(off-by-one) 버그 또는 결함 있는 루브릭 항목을 찾아내고 즉시 정확한 채점 근거를 확인하세요.
- 제한 시간이 시작되기 전에 약점을 보완하세요. 단 한 번의 기회만 주어지는 자격 시험을 치르기 전에 속도와 일관성을 기르세요.
문제가 만들어지는 방식
모든 시나리오는 자체 제작되었으며 실제 RLHF 평가 워크플로우, 소프트웨어 디버깅 표준, 공식 루브릭 설계 원칙 및 공개된 검색 품질 가이드라인을 바탕으로 합니다. 각 정답 해설은 정확한 오류를 짚어내고 근거 규칙을 인용합니다. 문제 제작 방식 보기.
- 자체 제작 시나리오만 사용합니다. 모든 프롬프트, Model A/B 비교, 코드 스니펫 및 루브릭 항목을 새로 작성합니다.
- 명확한 채점 원칙을 제시합니다. 각 정답은 근거가 되는 정확한 평가 규칙, 디버깅 원칙 또는 평가 기준을 인용합니다.
- 기술 및 수학적 검증을 수행합니다. 코딩 엣지 케이스, 복잡도 한계 및 수학적 증명은 독립적으로 검증합니다.
- 독립적인 2차 검수를 진행합니다. 인용된 평가 원칙과 대조하여 정답과 해설을 다시 검토합니다.
어떤 평가를 준비하고 계신가요?
플랫폼과 자격 트랙을 알려주세요. 여러분의 요청에 따라 다음에 제작할 문제가 결정됩니다.