OpenAI LifeVal 점수 읽는 법 — 집 찾기·돌봄을 AI에 맡기기 전에

OpenAI 에이전트 평가 · 스텝 4개 · 2026-11-07 갱신

OpenAI가 2026-11-02에 공개한 LifeVal은 “일상에서 정말 맡기고 싶은 일”로 AI 성능을 재는 벤치마크예요. 새 버튼이 생긴 제품 출시 공지가 아니라, 유치원 후보·홍수 자원봉사·집 찾기 같은 예시 과제 점수를 보여 주는 연구/평가 페이지에 가깝습니다. 이 글은 점수를 보고 바로 맡기지 않도록, 요청문을 쓰기 전에 조건을 적는 법을 공식 예시 기준으로 정리해요.

직접 실행: ChatGPT에 LifeVal 과제를 그대로 넣어 측정하지 않았어요. 점수·문장은 공식 페이지 표기입니다.

Quick Start

• 🔗 공식: openai.com/index/lifeval

• 🔗 (심화) PDF 논문: cdn.openai.com/pdf/lifeval.pdf — 과제 수·한계 서술

• 한 줄 정의: 돌봄·건강·교육·가사행정·개인재무·쇼핑·정부서비스 등 일상 과제에서 에이전트형 성능을 추적하는 평가.

• 근거 조사: American Time Use Survey, Multinational Time Use Study + 발표문은 설문 응답자 3,995명이라고 적지만, 논문은 완료자 3,837명·점검 통과자 1,826명·제외 2,011명을 보고해요. 두 문서의 모집단 관계는 설명되지 않아, 하나의 확정 표본 수로 합쳐 쓰지 않아요.
• 페이지에 없는 것(쓰지 말 것): 각 예시 점수의 모델·설정·반복 횟수 명시, “한국 부동산 사이트에서 100%” 같은 보장, 특정 소비자 요금제 버튼.

공식 페이지가 제시한 예시 점수 (성공 확률 아님)

이 숫자는 OpenAI가 고른 예시 카드의 평가 점수예요. 성공 확률·실제 집 계약 완료율·모든 이용자의 결과가 아니에요. 발표문은 각 카드의 모델·추론 설정·반복 횟수·신뢰구간을 명시하지 않아요. 예시를 전체 평균으로 읽거나 한국 서비스에 그대로 적용하면 안 됩니다.

논문을 함께 보면 달라지는 해석

공식 논문은 2026년 11월 3일자로 169개 과제를 평가했다고 적어요. 개인 맥락·참고 파일·채점 기준표(rubric)·실행 환경이 주어지고, 주로 RLE 환경과 오프라인 웹으로 평가합니다. 실제 사용자 계정에서 실시간으로 집 계약을 끝냈다는 시연과는 달라요.

• 채점은 모델 기반 자동 채점으로 기준표를 평가하는 방식이에요. “100%”가 특정 실제 과제를 한 번도 틀리지 않았다는 뜻은 아닙니다.
• 논문은 설문이 미국 중심·영어 기반이라는 한계를 인정해요. 바탕이 된 시간 사용 자료의 최신 연도도 2021년이라고 적습니다.
• 고정되지 않은 웹 캐시 때문에 검색 과제 점수가 실행마다 달라질 수 있어요.
• 독립적인 재현 실험은 이 검수에서 찾지 못했어요. 점수는 OpenAI의 보고값으로만 읽으세요.

STEP 1. LifeVal이 “제품 스위치”가 아님을 확인

공식 페이지 목적문은 일상 과제에서 모델 개선을 측정하는 것입니다. ChatGPT 설정에 “LifeVal 모드”를 켠다는 안내가 페이지에 없습니다. → 우리는 같은 종류의 요청을 할 때 조건을 어떻게 적을지만 배웁니다.

STEP 2. 공식 집 찾기 예시에서 조건 구조 뽑기

공식 집 찾기 예시에는 대략 이런 요소가 들어 있어요.

1. 지역 (예: Luzerne County — 미국 사례)
2. 예산
3. 공간 조건 (별도 주거공간)
4. 통근·생활 동선 (학교 드롭오프 후 짧은 통근)
5. 실행 작업 (등기 서류를 장바구니에 담기)
6. 사람 확인 (예시 응답도 검토를 요청하며 끝남)

한국에서 쓸 때(편집부가 작성한 입력 예시, 실행 결과 아님):

(예시) 예산 월세 ○○만 원 이하, 전용 ○평대, 직장(마곡) 대중교통 45분 이내,
반려동물 가능, 후보 3곳을 표로 비교하고, 계약 전 필수 확인 질문 5개를 남겨 줘.
서류 제출·결제·계약은 하지 마. 각 후보 출처 URL을 붙여 줘.

STEP 3. 요청 전에 점수·한계를 같이 보기

체크리스트:

• [ ] 이 과제가 미국 행정·지도·서비스 전제인지
• [ ] 점수가 어떤 모델·노력 설정인지 페이지에 명시됐는지 (없으면 “모름”)
• [ ] 브라우저 사용·컴퓨터 사용·커넥터가 필요한 일인지
• [ ] 최종 결정·서명·송금을 내가 하는지

❌ 이렇게 말고: “100%니까 집을 맡겨도 된다”
✅ 이렇게: 조건·금지 행동·검토 포인트를 요청문에 명시

결과가 왔을 때 확인하기

아래는 벤치마크 점수가 아니라 실사용 검수 기준으로 제안해요.

1. 후보 링크를 각각 열어 지역·예산·현재 상태가 맞는지 보세요. 삭제된 매물·과거 가격은 제외해요.
2. 통근 시간은 경로와 출발 시각을 함께 확인하고, 실제 거주 조건은 직접 문의해야 해요.
3. 링크가 없거나 조건이 빠졌다면 “출처 없는 행을 빼고, 확인 못 한 조건을 별도 열로 분리해 줘”라고 요청하세요.
4. 건강·돌봄 예시는 치료 계획이 아니에요. AI가 제안한 식단·약물 관련 내용은 의료진과 확인하고, 타인의 민감 자료는 무단 업로드하지 마세요.

STEP 4. 업무에 옮기는 템플릿

목표: …
제약(예산/지역/기한): …
하면 안 되는 것: 결제, 개인정보 제출, 타인 연락
출력: 후보 표 / 근거 링크 / 내가 확인할 질문
검증: 출처 없는 주장은 제외

👉 원본 인스타: https://www.instagram.com/p/DfR2t_0Et88/
출처 확인일 2026-11-07 KST.

근거

• 공식 발표: 11월 2일·예시 점수·발표문 설문 인원
• 공식 논문 PDF: 11월 3일·§3.3/3.5/4/5·부록 A.1의 평가·설문 한계