01 / QUESTION
주어진 정보가 바뀌면, 판단의 근거도 일관되게 바뀔까?
비인간적 존재의 출력과 행동을 의사·동의·거부의 근거로 해석할 때, AI의 설명이 주어진 정보와 일관되는지 탐구하는 개인 평가 프로젝트입니다.
02 / CONTRIBUTION
내 역할과 AI 지원
직접 맡은 일
연구 질문·범위와 진행 조건을 정하고 검토했습니다. 사례·절차의 원형과 AI 지원으로 확장한 내용을 구분해 설계를 관리합니다.
AI의 도움을 받은 부분
문항·절차·코드·검토 문서 작성에 AI 도구를 활용했습니다. 사용자 원형과 AI가 확장한 내용을 구분해 관리합니다.
03 / METHOD
평가 설계
- 사례 설계
- 비교 조건을 달리한 합성 사례 12쌍·24개를 구성했습니다. 고유 입력 텍스트는 23종입니다.
- 입력과 판단
- 비교 조건의 누출을 막고, 비해당과 정보 부족을 구분하도록 설계를 검토했습니다.
- 집계 규칙
- 실패·재시도·제외·분모의 처리 규칙과 요청 기록의 연결을 오프라인에서 점검했습니다.
04 / TIMELINE
진행 기록
- 설계
연구 질문과 가상 사례 정리
연구 헌장, 문헌 지도, 사례와 평가 기준을 작성했습니다.
- 설계 검토
조건과 집계 규칙 보완
비교 조건 누출, 비해당·정보 부족의 구분, 실패·집계 규칙을 검토하고 보완했습니다.
- 도구 검증
오프라인 구현 후속 검토
요청·정본 연결 결함을 수정하고 정적 28개·합성 40개 도구 검사를 통과했습니다.
- 실행 준비
실측 준비 상태 갱신
모델 응답 수집을 위한 입력 계수와 실행 조건을 준비하는 단계입니다.
- 도구 검증
실행 전 확인 도구의 오프라인 검토
입력 확인과 실행 도구를 오프라인으로 점검했습니다. 다음 단계는 제공자 입력 계수 확인과 모델 응답 수집입니다.
05 / CURRENT FINDINGS
진행 내용과 다음 단계
- 연구 헌장과 출처 구분 기록
- 가상 사례와 평가 기준
- 요청·입력 경계 및 집계 검증 도구
- 실행 전 입력 확인 도구
실행 전 입력 확인, 요청 기록과 집계 경계를 오프라인으로 점검했습니다.
연구 질문·범위와 진행 조건을 검토했습니다. 응답 수집 후 사람의 평가를 진행할 계획입니다.
실제 모델 응답 수집 전
06 / LIMITS & NEXT
연구 범위와 다음 단계
현재 단계는 합성 사례와 실행 도구의 오프라인 검증입니다. 모델 응답 분석은 수집 후 진행합니다.
다음에 확인할 일
입력 계수와 실행 조건을 점검한 뒤 모델 응답을 수집할 계획입니다.
자료와 변경 이력
공개용 자료를 정리하고 있습니다.
연구 진행 기록 기준