RAG·지식검색 시스템 구축개념 중심콘텐츠 기준 2026.07
RAG 정확도 평가·개선 실전
만든 RAG가 얼마나 맞는지 숫자로 말하고, 무엇을 고치면 오르는지 찾아냅니다.
이런 걸 얻어요
- 평가 세트 100문항을 실제 문서에서 만듭니다
- 검색 단계와 생성 단계를 분리해 원인을 찾습니다
- 변경안의 효과를 회귀 없이 비교합니다
- 자동 평가 배치로 품질 저하를 조기에 잡습니다
이런 분께 추천해요
- RAG를 운영 중인데 정확도를 못 올리는 팀
- 개선안을 감으로 고르고 있는 개발자
- AI 품질을 보고해야 하는 리드
선수 지식
- RAG 파이프라인 구축 경험
- Python 데이터 처리
- 기초 통계 개념
강의 소개
이 강의가 끝나면
재현율·정확도·환각률을 측정하는 평가 하네스를 갖추고, 개선안을 데이터로 고릅니다.
다루는 범위
- 평가 세트 100문항 만들기
- 검색 단계와 생성 단계 분리 측정
- 리랭커·청킹·프롬프트 변경의 효과 비교
- 회귀 방지용 자동 평가 배치
선수 지식
RAG 파이프라인을 한 번 이상 만들어 본 경험이 필요합니다.
커리큘럼
전체 16개 레슨 · 총 4시간 25분
섹션 1. 무엇을 측정할 것인가4개 레슨 · 48분
- 영상 레슨오리엔테이션: 감으로 고치면 왜 안 오르는가미리보기9분
- 영상 레슨검색 지표와 생성 지표 구분하기17분
- 영상 레슨환각률을 정의하는 방법15분
- 텍스트 레슨수업 자료: 지표 정의와 계산식7분
섹션 2. 평가 세트 만들기4개 레슨 · 1시간 22분
- 영상 레슨실제 문서에서 질문 뽑아내기19분
- 영상 레슨정답 근거 라벨링 기준20분
- 영상 레슨적대적 질문 만들기18분
- 영상 레슨실습: 평가 세트 100문항25분
섹션 3. 단계별 원인 분리4개 레슨 · 1시간 13분
- 영상 레슨검색이 틀렸는가 생성이 틀렸는가21분
- 영상 레슨청킹 변경의 효과 측정17분
- 영상 레슨리랭커 도입 전후 비교19분
- 영상 레슨프롬프트 변경이 만드는 회귀16분
섹션 4. 개선과 회귀 방지4개 레슨 · 1시간 2분
- 영상 레슨개선안 우선순위 정하기15분
- 영상 레슨자동 평가 배치 구성22분
- 영상 레슨품질 저하 알림 붙이기14분
- 영상 레슨마무리: 분기별 평가 운영11분
강사 소개
박준서수강생 60명 · 강의 2개
제조·이커머스 사내 문서 RAG 12건 구축. 검색 정확도 평가 세트와 실패 질의 리포트를 산출물에 포함해 넘깁니다. pgvector·하이브리드 검색·리랭킹 구간을 주로 맡습니다.
수강평 7
- 별점 4.0 / 542% 수강 후 작성편수현 · 2026년 6월 22일
작업 순서를 그대로 따라 하니 결과가 재현됐습니다. 재현되는 강의가 좋은 강의입니다.
강사 답글
팀 단위 적용 사례를 공유해 주셔서 감사합니다. 다음 개정에 반영하겠습니다.
- 별점 4.0 / 559% 수강 후 작성채민서 · 2026년 6월 16일
중간 점검 과제가 있어 이해도를 확인하며 갈 수 있었습니다.
- 별점 4.0 / 576% 수강 후 작성김서연 · 2026년 6월 10일
도입 검토 보고서를 쓰는 데 그대로 활용했습니다. 근거 자료가 충분합니다.
- 별점 5.0 / 593% 수강 후 작성이준혁 · 2026년 6월 4일
오래된 방식과 최신 방식을 비교해 줘서 왜 바뀌었는지 이해했습니다.
- 별점 5.0 / 534% 수강 후 작성박지훈 · 2026년 5월 29일
실무에서 바로 못 쓰는 부분도 있습니다. 우리 환경 제약을 고려해 일부는 다르게 구현했습니다.
강사 답글
준비물 안내를 강의 소개 상단으로 올렸습니다. 알려 주셔서 감사합니다.
- 별점 5.0 / 551% 수강 후 작성최유진 · 2026년 5월 23일
수강 후 사내 스터디 교재로 재사용 중입니다.
- 별점 3.0 / 525% 수강 후 작성간지수 · 2026년 3월 20일
기초는 다른 곳에서 채우고 오는 게 낫습니다. 이 강의는 실전 구간에 집중합니다.
수강료
수강 신청하기₩129,000