← Changelog

자료 수정

요약 대조 모델 열둘의 비교, 그리고 갈라디아서 항목 하나의 고침

모델로 수집 전체를 대조하기 전에, 오류를 심은 시험지로 열두 모델을 시험했습니다. 그 비교가 갈라디아서 항목에서 실제 잘못 하나도 찾았습니다.

항목의 요약은 인용한 절이 말하는 것보다 더 말하면 안 됩니다. 그런 곳을 찾는 데 모델을 쓰려고, 하나를 고르기 전에 열둘을 비교했습니다. Claude 넷, GPT 셋, Ollama 클라우드 하나, 노트북에서 돌린 모델 넷입니다. 모델마다 오류를 일부러 하나씩 심은 요약을 읽게 했습니다. 숫자를 바꾸거나, 말한 사람을 바꾸거나, 명령을 한 일로 적거나, 환상을 일어난 일로 적은 것들입니다.

  • Claude Sonnet, Opus, Fable과 GPT-6 astra, sol은 심은 오류를 모두 찾았습니다. 노트북에서 돌린 모델들은 어려운 시험지에서 절반 안팎만 찾았습니다.
  • 갈라디아서 2:11–14 항목이 “WEB은 바울이 베드로에게 한 말을 2:21 끝에서 맺는다”고 적었는데, 이 항목은 2:21을 인용하지 않습니다. 이제 2:14로 확인되는 것만 적습니다. 열두 모델 가운데 아홉이 이것을 짚었습니다.

이것은 모델의 시험이지 검토가 아닙니다. 모든 항목은 여전히 사람의 검토를 기다립니다.

커밋: ba5b020 (푸터의 버전 표기에 나오는 코드 번호)