ReSeorch.AI

AI Systems Evaluation & Analysis

리서치에이아이 · 서경민 대표

한국어 AI를 평가하고,
근거를 기록합니다.

VISUAL

문제를 살피는 네 가지 관점

01

AI 평가 업무

Voice AI Evaluation

발화가 겹치는 구간을 살펴봅니다

발화가 겹치는 구간을 살펴봅니다
발화 시점 비교 · 합성 신호
입력
사용자 발화와 응답 A·B의 시작 시점
판단
사용자의 말이 끝나기 전에 응답이 시작하는지 같은 시간축에서 대조합니다.
관찰
A는 사용자 발화와 겹치고, B는 발화가 끝난 뒤 시작합니다.
작업 과정 살펴보기
02

소프트웨어 QA 업무

Quality Assurance & Evidence

오류를 재현하고 원인을 좁힙니다

오류를 재현하고 원인을 좁힙니다
필터 동작 비교 · 합성 작업 데이터
입력
‘검토 완료만’ 필터를 선택한 작업 목록
판단
예상 목록과 표시 목록을 비교하고, 항목을 추가한 뒤에도 필터가 적용되는지 살펴봅니다.
관찰
완료 항목 B만 남아야 하는 조건에서 대기·예외 항목이 함께 표시되는 차이를 확인합니다.
작업 과정 살펴보기
03

독립 프로젝트 · 작업 구조 설계

AI Systems & Orchestration

AI에 맡길 일과 사람이 확인할 일을 나눕니다

AI에 맡길 일과 사람이 확인할 일을 나눕니다
작업 분배와 검토 · 독립 설계
입력
안내 문서의 초안과 검토표를 만드는 요청
판단
초안 작성, 사실 대조, 형식 검토를 나누고 결과를 다시 모아 확인합니다.
관찰
수정 경로와 사람의 검토 단계를 포함한 작업 흐름을 정리합니다.
작업 과정 살펴보기
04

독립 연구 · 한국어 맥락

Korean Language & Context

문맥을 대조해 의미를 좁혀갑니다

문맥을 대조해 의미를 좁혀갑니다
문맥에 따른 의미 해석 · 설명용 대화
입력
‘그거 거기 두면 돼.’라는 문장과 두 가지 앞선 대화
판단
‘그거’와 ‘거기’가 가리키는 대상과 장소를 문맥에 비추어 살펴봅니다.
관찰
자료 파일과 배송 상자처럼, 같은 문장이 문맥에 따라 다른 대상을 가리킬 수 있습니다.
작업 과정 살펴보기
01

평가와 검토의 기록

공개 개인 프로젝트

01 개인 평가 프로젝트

AI 응답 직접 평가

공개 개인 기록 · 2026.06

AI 응답 직접 평가 설명도: P008 요청 → R008 응답 → E008 당시 판단 → 해석 범위 유보
입력과 판단의 흐름

경상도 사투리를 표준어로 풀이한 AI 답변을 읽고, 표현의 의미와 말투를 직접 평가했습니다.

그저께 / 며칠 전

개인 평가 기록 R008의 추가 설명에서 발췌했습니다.

역할과 과정, 검토 결과
내 역할
질의응답과 최종 평가를 직접 수행하고 점수·판단 이유를 기록했습니다. 템플릿에 AI 지원을 사용했습니다.
과정
P008 요청 → R008 응답 → E008 당시 판단 → 해석 범위 유보
검토 내용
10개 프롬프트의 응답을 8개 기준으로 평가했습니다. 점수와 함께 출처·표현·불확실성에 대한 판단 근거를 기록했습니다.
범위
2026년 6월의 10개 프롬프트 평가 기록입니다.
기록 자세히 보기

02 개인 QA 프로젝트

웹 QA와 회귀 테스트

공개 개인 기록 · 2026.06

웹 QA와 회귀 테스트 설명도: 페이지·조건 → 수동·정적 검토 → 브라우저 확인 → 검사 범위 기록
입력과 판단의 흐름
역할과 과정, 검토 결과
내 역할
요구사항·화면·문구를 검토하고, AI 도구를 활용해 회귀 검사 항목을 구성했습니다.
과정
페이지·조건 → 수동·정적 검토 → 브라우저 확인 → 검사 범위 기록
검토 내용
개인 홈페이지의 기능과 링크, 화면 표시를 검토하고 Playwright로 주요 영역의 기본 회귀 테스트를 구성했습니다.
범위
독립 프로젝트의 수동·정적 검토와 웹 회귀 테스트를 다룹니다.
기록 자세히 보기

전체 개인 프로젝트와 진행 상태

KOREAN TEXT

한국어 응답

한국어 응답의 자연스러움, 문맥, 어투와 요청 적합성을 검토합니다.

AUDIO / TTS

오디오/TTS

오디오/TTS 출력에 주어진 평가 기준을 적용해 품질을 검토합니다.

02

실제 업무 경력

업무와 도구 자세히
현재Independent Contractor

AI Evaluator

한국어 응답 · 오디오/TTS

Outlier · Independent Contractor

한국어 응답과 오디오/TTS 출력을 주어진 기준에 따라 검토합니다. 응답 간 품질 차이와 모호한 사례를 판별하고, 비교 결과와 판단 근거를 기록합니다.

2023.04 — 2023.09상용 소프트웨어 QA

Mobile Software QA

모바일 앱 · 통신 부가서비스

테스트이앤씨 · 정규직

통신사 모바일 앱과 관련 서비스의 기능·호환성·회귀 테스트에 참여했습니다. 결함과 재현 절차를 기록하고, 수정된 항목을 다시 확인했습니다.

03

학력

2025.03 — 현재재학

한국방송통신대학교

문화교양학 학사과정

04

개인 개발 프로젝트

PERSONAL DEVELOPMENT

개인 프리랜서 운영원장

개인 스프레드시트 기반 운영 도구에서 입력 구조, 예외 상태, 원자료 보존과 사용 흐름을 검토했습니다. 구현에는 AI 지원을 사용했습니다.

프로젝트 소개와 체험
05

독립 연구

전체 연구 보기
01

Nunchi

한국어 대화의 맥락 적합성

한국어 대화 평가 문항에 맥락 검토를 반영하고, 소규모 응답 수집과 블라인드 비교 카드 생성을 진행했습니다.

문항 검토 반영 · 소규모 응답 수집내용 확인
02

MirrorRun

LLM 행동 예측 평가

실제 응답을 수집하고, 원문 또는 AI 요약을 바탕으로 행동 판단과 이유를 기록했습니다. 원문 대조와 예측·관측 비교 분석을 준비합니다.

응답 수집·판단 기록 완료 · 대조·분석 예정내용 확인
03

Goose

AI 응답의 근거와 판단 일관성

조건별 사례와 실행 도구를 구성하고, 입력·기록·집계 흐름을 오프라인으로 검증했습니다.

문항·실행 도구 오프라인 검증 · 응답 수집 전내용 확인