아론AI 22편 · 시험지 노무100-v1 (고정일 2026-10-17)
AI 노무사 실력 — GPT-6.1 Sol에 노무 질문 100개, 노동부 해석으로 채점
맞음
93
99문항 중
틀림
5
Q014 · Q047 · Q059 · Q079 · Q085
결론 안 냄
1
Q026
'아니오'로만 찍었을 때
61
비교 기준
정답 근거 조문을 댐
66
지어낸 판례·조문
0
법제처 공개 데이터로 확인
어떻게 물었나
- 모델: OpenAI GPT-6.1 Sol(gpt-6.1-sol, 추론 high)
- 창구: 코덱스 CLI 0.159.2 — 챗GPT 화면이 아님(개인 메모리·설정이 섞이지 않게)
- 웹검색: 끔(셸·코드 실행도 끔)
- 묻는 법: 질문 문장만, 문항마다 새로, 한 번씩
- 언제: 2026-10-17 11:07~11:51 (한국 시각)
어떻게 채점했나
- 결론: 서로 결과를 모르는 AI 채점자 둘이 따로 매김. 둘이 갈린 1문항(Q036)은 사람이 정함
- 근거 조문·판례 실존: 법제처 공개 데이터로 기계가 확인
- 채점자 중 노무사는 없음 — 판정이 틀렸다고 보이면 알려 주세요
시험지: 고용노동부 해석 9,636건 중 2020년 이후 1,258건(법제처 Open API, 2026-10-16 받음) 중 결론이 분명한 것을 골라 사람이 묻는 말투로 다시 씀. 정답 기준은 2026-10-16 시행 중인 법
이 결과의 약점
- 정답은 고용노동부 행정해석입니다. 법원 판단과 다를 수 있습니다.
- 모델 하나에, 문항마다 한 번씩만 물었습니다.
- 채점자 중 노무사는 없습니다.
Q070 채점 제외 — 정답을 '아니오'로 적었는데 회시는 '적용을 배제하는 별도 규정이 없는 한 전체 근로자에게 적용'이라고 한다 — 배제 규정을 두면 신규 입사자에게만 적용할 수 있다는 뜻이므로 정답은 '조건부'여야 했다. 시험지를 만들 때 단서를 빠뜨렸고 검수에서도 놓쳤다
채점이 틀렸다고 보이면 알려 주세요
문항 번호와 이유를 적어 varkiry05@gmail.com 로 보내 주시거나 영상 댓글로 남겨 주세요.
눈여겨볼 문항
문항 100개
100개 · 행을 누르면 정답 설명·출처·AI 답 원문·판정 과정이 열립니다