RLHF(인간 피드백 강화학습)란?

질문: "면접 자기소개 어떻게 시작하면 좋을까?"

답변 A

"안녕하세요, 저는 최선을 다하는 사람입니다. 열심히 하겠습니다."로 시작하시면 됩니다. 자신감 있게 말하는 게 중요해요.

답변 B

지원 직무와 연결된 구체적 강점 한 가지를 첫 문장에 넣어보세요. 예: "3년간 데이터 분석 업무를 하며 문제를 숫자로 증명하는 습관을 길러온 OOO입니다." 이렇게 시작하면 첫 문장부터 "이 사람은 이 일을 할 준비가 됐다"는 인상을 줄 수 있어요.

이런 선택이 모아지고 모아지면, AI는 B 같은 스타일의 답변을 더 많이 만들어내는 쪽으로 조금씩 조정돼요.

A 선호 누적B 선호 누적

아직 0회 선택함 — 계속 클릭해서 "많은 사람이 반복해서 고르면" 어떻게 되는지 시뮬레이션해보세요

💬 한 줄 정리

AI 모델은 먼저 방대한 텍스트로 기본적인 언어 능력을 갖춘 뒤, 그 다음 단계에서 사람이 개입해요. 같은 질문에 대해 AI가 만든 여러 답변 중 사람이 "이게 더 낫다"고 반복해서 골라주면, 그 선택들을 모아 보상 모델(reward model)이라는 것을 만들고, 이 보상 모델이 "사람들이 더 선호하는 답변 스타일"을 점수로 매길 수 있게 돼요. 그 다음 AI는 이 점수를 기준 삼아 더 높은 점수를 받는 방향으로 스스로를 조금씩 다듬어가요 — 이 전체 과정을 RLHF(인간 피드백 강화학습)라고 불러요. 요즘 AI 비서들이 예전 언어모델보다 더 친절하고, 구조적이고, 상황에 맞는 톤으로 답하는 데에는 이 과정이 큰 몫을 해요.

🧾 이 페이지, 이런 프롬프트로 만들었어요

아래 프롬프트를 복사해서 Claude·ChatGPT(GPT)·Gemini 어디에든 붙여넣고 직접 시도해보세요. 참고로 이건 예시 없이 지시만 담은 제로샷(zero-shot) 프롬프트예요 — 원하는 결과물의 예시를 1개 넣으면 원샷(one-shot), 여러 개 넣으면 퓨샷(few-shot) 프롬프팅이 되는데, 예시를 더할수록 결과가 원하는 스타일에 더 가까워지는 경우가 많아요.

AI 강의용 인터랙티브 데모 페이지를 만들어줘. 주제는 "RLHF(인간 피드백 강화학습)".
- 고정된 예시 질문 "면접 자기소개 어떻게 시작하면 좋을까?"에 대해 두 개의 AI 후보 답변을 나란히 보여줄 것
  - 답변 A: 평범하고 진부한 도입부
  - 답변 B: 더 구체적이고 구조적이며 자신감 있는 도입부
- 사용자가 "A가 더 좋아요" / "B가 더 좋아요" 버튼을 눌러 (사람 평가자 역할을 체험)
- 클릭하면 "이런 선택이 모아지고 모아지면, AI는 [선택한 쪽] 같은 스타일의 답변을 더 많이 만들어내는 쪽으로 조금씩 조정돼요" 같은 설명이 나타남
- 하단에는 "A 선호 누적 vs B 선호 누적"을 보여주는 막대바가 있고, 클릭할 때마다 선택한 쪽으로 막대가 조금씩 이동함 (실제 저장 없이 자바스크립트 변수로만 상태 유지)
- 여러 번 반복 클릭 가능하게 해서 "많은 라운드에 걸쳐 일어나는 일"이라는 감각을 주도록
- 하단에 "한 줄 정리" 카드에서 RLHF 개념을 초보자도 이해할 수 있게 설명
- CSS·JS 전부 인라인으로 넣은 단일 HTML 파일로, 한국어로 출력해줘

👍 RLHF(인간 피드백 강화학습)란?

답변 A

답변 B

💬 한 줄 정리

🧾 이 페이지, 이런 프롬프트로 만들었어요