RAG 검색 회귀 평가 - 질문·기준답 표와 검색 결과 표를 넣으면 정답 근거가 상위 몇 위에 잡혔는지, 빠진 질문이 무엇인지 계산합니다. | 리퀘오 본문으로 건너뛰기

리퀘오 / 스킬 / AI

RAG 검색 회귀 평가

질문·기준답 표와 검색 결과 표를 넣으면 정답 근거가 상위 몇 위에 잡혔는지, 빠진 질문이 무엇인지 계산합니다.

제작 리퀘오
  • 금액10~70P11원부터 · 부가세 포함 · 실행 1회 · 입력·사용량에 따라
  • 처리 시간1~3초보통 걸리는 시간
  • 입력 한도100,000자입력 글자 수 합계
  • 결제결과를 받을 때만실패하면 차감 없음
  • 라이선스개인 사용결과물 사용 범위

이 스킬이 하는 일

  1. 넣는 것

    질문·기준답 표 · 검색 결과 표 · 상위 몇 위까지 볼지 · 최대 행 수
    질문·기준답 표: 질문ID,질문,기준답,필수근거
    Q1,환불 기간은?,7일 이내,7일,환불
    Q2,배송은 며칠?,영업일 3일,영업일 3일
    Q3,결제 수단은?,카드와 계좌이체,계좌이체…
    검색 결과 표: 질문ID,순위,청크,관련
    Q1,1,환불은 수령 후 7일 이내에 신청할 수 있습니다.,예
    Q2,1,주문 폭주 시 지연될 수 있습니다.,아니오
    Q2,2,보통 영업일…
    상위 몇 위까지 볼지: 2
  2. 스킬이 하는 일

    • 질문·기준답 표와 검색 결과 표를 넣으면 정답 근거가 상위 몇 위에 잡혔는지, 빠진 질문이 무엇인지 계산합니다.
    • 1~3초 안에 처리
  3. 받는 것

    요약 · 판정별 건수 · 질문별 판정 · 확인할 점 외 4개

실행하기

10~70P/ 실행
  1. 입력 넣기직접 쓰거나 아래 예제로 채우기
  2. 예상 금액 확인최대 승인액을 보고 실행
  3. 실행보통 1~3초 안에 끝남
  4. 결과 받기정상 결과일 때만 차감

예제 입력 1개

  1. 질문·기준답 표
    질문ID,질문,기준답,필수근거
    Q1,환불 기간은?,7일 이내,7일,환불
    Q2,배송은 며칠?,영업일 3일,영업일 3일
    Q3,결제 수단은?,카드와 계좌이체,계좌이체
    Q4,해외 배송 되나요?,됩니다,해외
    검색 결과 표
    질문ID,순위,청크,관련
    Q1,1,환불은 수령 후 7일 이내에 신청할 수 있습니다.,예
    Q2,1,주문 폭주 시 지연될 수 있습니다.,아니오
    Q2,2,보통 영업일 3일 안에 도착합니다.,예
    Q3,3,카드와 계좌이체를 받습니다.,예
    Q4,1,국내 배송만 합니다.,아니오
    상위 몇 위까지 볼지
    2
    JSON 보기

    입력

    {
      "cases": "질문ID,질문,기준답,필수근거\nQ1,환불 기간은?,7일 이내,7일,환불\nQ2,배송은 며칠?,영업일 3일,영업일 3일\nQ3,결제 수단은?,카드와 계좌이체,계좌이체\nQ4,해외 배송 되나요?,됩니다,해외",
      "retrieved": "질문ID,순위,청크,관련\nQ1,1,환불은 수령 후 7일 이내에 신청할 수 있습니다.,예\nQ2,1,주문 폭주 시 지연될 수 있습니다.,아니오\nQ2,2,보통 영업일 3일 안에 도착합니다.,예\nQ3,3,카드와 계좌이체를 받습니다.,예\nQ4,1,국내 배송만 합니다.,아니오",
      "top_k": 2
    }
예상 금액
10~70P
최대 승인액
실행 전에 확인
실행 상태
시작 전
다음 행동
로그인한 뒤 실행할 수 있습니다.
예상 시간
1~3초
처리 방식 자세히
처리 단계
처리 횟수
  • 결과가 정상적으로 나왔을 때만 차감됩니다.
  • 실패·시간초과·취소는 차감되지 않습니다.
  • 기본 처리비 + 응답 사용량과 저장 단가로 계산한 도구 사용료. 최대액을 예약하고 차액을 반환합니다. 사용량 미확인·실패 시 청구하지 않습니다.
요금 계산 방식 자세히
  • 금액 = 기본요금(판매자 금액·기본 수수료) + 실제 AI 사용료
  • AI 사용료는 모델별 단가와 실제 사용량으로 계산하며, AI 사용료에 수수료를 다시 붙이지 않습니다.
  • 2026년 11월 6일부터 시간대별 요금이 있는 모델도 시간대와 관계없이 같은 단가를 적용합니다.
  • 출고 전 평가 사례의 실측 범위; 입력 크기에 따라 달라지며 보장 시간 아님
  • TTS에 연결한 정규화의 취소·환불은 TTS 정산 규칙을 적용합니다.

결과는 생성형 AI 로 만듭니다. 중요한 내용은 확인해 주세요.

이용 정보 자세히

처리 한계 · 보관 · 입력이 가는 곳 · 결과물 사용 조건
하는 일
AI · 질문·기준답 표와 검색 결과 표를 넣으면 정답 근거가 상위 몇 위에 잡혔는지, 빠진 질문이 무엇인지 계산합니다.
넣는 것
필수 질문·기준답 표, 검색 결과 표 · 선택 2개 (긴 글 · 숫자)
받는 것
요약, 판정별 건수, 질문별 판정, 확인할 점, 근거 수준, 검색 엔진 재실행 여부, 확인하지 않은 범위, 결과 파일 (묶음 · 목록 · 선택 · 예/아니오 · 긴 글)
금액
10~70P · 실행 전에 최대 승인액을 확인한 뒤 시작합니다 · 실패·시간 초과·취소는 청구하지 않습니다
처리 한계
입력 최대 100,000자 · 최대 20초 · 보통 1~3초(보장 아님)
파일
파일 첨부 입력은 받지 않습니다. 글은 붙여 넣어 주세요
보관
결과 7일 · 입력 실행이 끝나면 삭제
입력이 가는 곳
리퀘오 내장 처리
제작·버전
리퀘오 · 버전 2 · 2026. 11. 1. 게시
결과물 사용
등록된 제한 없음 조건 전체

자세한 설명

질문·기준답·필수근거 표와 검색 결과(질문ID·순위·청크) 표를 넣으면, 필수근거 문구가 든 청크나 '관련' 표시가 있는 청크가 상위 k위 안에 있는지, 몇 위에 처음 나오는지(MRR)를 계산해 질문별 적중·순위 밖 적중·근거 없음·검색 결과 없음으로 나눕니다. 순위를 읽지 못한 결과는 0으로 채우지 않고 그대로 남기며, 검색 엔진을 다시 돌리거나 새 질문을 만들어 보지 않았음을 결과에 밝힙니다. 결과는 질문별 판정이 담긴 XLSX·CSV로 드립니다. 공식 API·사이트 확인은 하지 않고 제공된 내보내기 자료만 검사합니다.

검증 결과: 7개 사례 평균 88.3/100점, 일반 모델 1회 텍스트 응답 52.5점. 실측 1~1초, 외부 AI 사용 없음. 동일 도구 조건의 실험이 아닌 납품 결과 비교이며, 반복 개선에 사용한 사례의 결과로 일반적인 성능을 보장하지 않습니다.

입력과 결과 형식

넣는 값 입력

  • 질문·기준답 표필수cases

    글 · 최대 100,000자

    질문ID·질문·기준답·필수근거가 있는 표입니다. 필수근거는 쉼표로 구분합니다.

  • 검색 결과 표필수retrieved

    글 · 최대 100,000자

    질문ID·순위·청크·관련(선택)이 있는 표입니다.

  • 상위 몇 위까지 볼지top_k

    정수

  • 최대 행 수max_rows

    정수

    표마다 이 수를 넘으면 거절합니다.

입력은 글자 수 합계 100,000자까지, 처리 시간은 최대 20초입니다.

받는 값 결과

  • 요약summary

    묶음

  • 판정별 건수counts

    목록 (판정 · 건수)

  • 질문별 판정rows

    목록 (질문ID · 질문 · 정답 근거 순위 · 역순위 · 판정 · 설명)

  • 확인할 점notes

    글 목록

  • 근거 수준evidence_level

    글 (unconfirmed)

  • 검색 엔진 재실행 여부confirmed

    예/아니오

  • 확인하지 않은 범위scope_note

    글

  • 결과 파일artifacts

    목록 (파일 ID · 파일 이름 · 설명 · 파일 형식 · 파일 주소 · 파일 해시 · 크기(바이트) · 너비 · 높이 · 길이(초)) · 최대 20개

API·MCP 로 쓰기

  1. API 키 준비인증키와 포인트는 다른 리퀘오 API 와 같습니다
  2. REST 또는 MCP 로 요청아래 예시를 복사해 입력만 바꾸기
  3. 결과 받기화면 실행과 같은 금액·정산 규칙

REST

curl -X POST https://reqeo.com/rest/skills/sk_ddae02479b186e74/runs \
  -H "Authorization: Bearer YOUR_API_KEY" \
  -H "Idempotency-Key: my-request-001" \
  -H "Content-Type: application/json" \
  -d '{"input":{"cases":"질문ID,질문,기준답,필수근거\nQ1,환불 기간은?,7일 이내,7일,환불\nQ2,배송은 며칠?,영업일 3일,영업일 3일\nQ3,결제 수단은?,카드와 계좌이체,계좌이체\nQ4,해외 배송 되나요?,됩니다,해외","retrieved":"질문ID,순위,청크,관련\nQ1,1,환불은 수령 후 7일 이내에 신청할 수 있습니다.,예\nQ2,1,주문 폭주 시 지연될 수 있습니다.,아니오\nQ2,2,보통 영업일 3일 안에 도착합니다.,예\nQ3,3,카드와 계좌이체를 받습니다.,예\nQ4,1,국내 배송만 합니다.,아니오","top_k":2}}'

Idempotency-Key 는 요청마다 새로 정하는 값입니다. 같은 값으로 다시 보내면 한 번만 실행되고 같은 결과를 돌려받습니다.

MCP

엔드포인트  https://reqeo.com/mcp/skills
도구        run_skill
skill_id    sk_ddae02479b186e74

자세한 요청·응답 형식은 개발가이드에 있습니다.

리뷰 0개

로그인하고 이 스킬을 실행하면 리뷰를 남길 수 있습니다. 로그인

아직 리뷰가 없습니다. 실행해 본 뒤 첫 리뷰를 남겨 주세요.

질문·토론

실행 전 궁금한 점이나 사용 경험을 나눠 주세요. 별점 평가는 위의 리뷰에 남깁니다. 판매자가 쓴 글에는 '판매자' 표시가 붙고, 이름은 첫 글자만 보입니다.

로그인하면 질문을 남기거나 답글을 달 수 있습니다.

댓글을 불러오는 중입니다…

결과물 사용 조건 버전 2

결과물 형식
상품 설명의 결과 형식
상업적 이용
상업적 이용 가능
포함된 제3자 자산(폰트·이미지·음원 등)의 조건
등록된 조건 없음
고객 입력에 필요한 권리
등록된 조건 없음
그 밖의 조건
등록된 조건 없음

판매자가 이 버전에 등록한 조건입니다. 버전이 승인된 뒤에는 바뀌지 않으며, 실행 결과의 명세에 그때 조건이 함께 담깁니다. 리퀘오가 결과물의 권리를 보증하는 것은 아닙니다. 자세한 기준은 이용약관을 확인해 주세요.