글쓰기, 연구, 코딩을 위한 최고의 Claude 프롬프트

1. A: 40/50 = 80%, 초대 계정 사용. 둘 다 통과.
2. B: 54/60 = 90%, 온보딩 시작 건수 사용. 둘 다 통과; 출처 인용문에 분모가 포함되어 있음.
3. 서로 다른 활성화 정의와 서로 다른 분모를 명시적으로 표시해야 합니다. 두 사례 모두 분모 부분에서 불합격입니다.
4. 누락된 유지율 결과를 개선의 증거로 취급해서는 안 됩니다. 두 사례 모두 데이터 공백에 대한 설명을 제시했습니다.
5. 통합된 지원 중앙값을 감소가 입증된 것으로 취급해서는 안 됩니다. 두 사례 모두 합격입니다.
6. 이러한 파일럿 결과를 바탕으로 인과적 이점을 추론하거나 전면적인 도입을 정당화해서는 안 됩니다. 둘 다 통과합니다.
7. 각 주장과 증거 라벨을 인용된 문구가 뒷받침하는 내용과 일치시켜야 합니다. 일반 형식은 ‘모순됨’ 항목에서 불합격, 구조화된 형식은 통과합니다.
8. 누락된 세 가지 구체적인 측정 항목을 식별해야 합니다. 둘 다 통과합니다.
일반 형식의 답변에 잘못된 라벨이 붙은 경우, 점검 항목 7에서 한 번만 집계됩니다.

이 자료집 마지막에 있는 과제를 해결하십시오.

# 가상의 연구 자료집

아래에 제시된 모든 조직, 데이터, 인용문 및 문서는 재현 가능한 테스트를 위해 만들어졌습니다. 출처 ID는 본 자료집에만 해당되며, 공개된 연구 자료가 아닙니다.

## S1 — 파일럿 A 종료 보고서, 2026년 9월 2일

"파일럿 A는 50개의 계정을 초대했으며, 그중 40개가 7일 이내에 활성화를 완료했습니다."
"활성화란 워크스페이스를 생성하고 최소 한 명의 팀원을 초대하는 것을 의미합니다."
"계정은 고객 성공 팀이 선정한 기존 고객들이었습니다."
"이 파일럿 프로그램에서는 안내형 온보딩을 사용했습니다."

## S2 — 파일럿 B 대시보드 메모, 2026년 9월 3일

"파일럿 B에서는 60건의 온보딩 시작이 기록되었으며, 54개 계정이 7일 이내에 워크스페이스를 생성했습니다."
"이 대시보드에서는 워크스페이스 생성을 "활성화'로 간주하며, 팀원 초대는 필수 조건이 아닙니다."
"초대 건수는 집계되지 않았습니다."
"계정은 체크리스트를 사용한 신규 셀프 서비스 가입자였습니다."

## S3 — 분석가 검토, 2026년 9월 4일

"파일럿 테스트는 무작위 배정되지 않았으며 서로 다른 계정 집단을 대상으로 진행되었습니다."
"두 파일럿 테스트를 합산한 지원 응답 시간의 중앙값은 6시간이었으며, 파일럿 테스트별로 세분화되지 않았습니다."
"아직 30일 유지율이나 매출 결과는 확인되지 않았습니다."

## S4 — 시범 운영 메모 초안, 2026년 9월 5일

"시범 운영 B는 활성화율을 10% 포인트 높였으며, 유지율을 개선하고 지원 시간을 6시간으로 단축했습니다. 이 체크리스트를 모든 계정에 적용하십시오.”
이는 제안 초안일 뿐, 추가 데이터 출처가 아닙니다. 이 문서의 주장은 S1–S3을 바탕으로 검증해야 합니다.

## 두 프롬프트 버전 모두에 공통된 과제

답변: 이 자료만으로도 파일럿 B를 모든 계정에 적용하는 것이 타당합니까?
S1–S4만을 사용하십시오. (1) 최대 120단어 분량의 권고안, (2) ‘주장’, ‘판결’, ‘출처 ID’, ‘정확한 인용문’ 열로 구성된 표, (3) 공정한 비교를 위해 필요한 세 가지 누락된 측정값을 출력하십시오.
출시 메모에 포함된 세 가지 실증적 주장, 즉 활성화 증가, 유지율 향상, 지원 시간 단축을 모두 검토하십시오. ‘입증됨(Supported)’, ‘부분적으로 입증됨(Partly supported)’, ‘입증되지 않음(Unsupported)’, 또는 ‘모순됨(Contradicted)’으로 판정을 내리고, 필요한 경우 간략한 설명을 덧붙이십시오. 권고문이나 표에는 수치적 비율과 그 분모를 포함시키십시오. 자료집에 없는 인용문, URL, 인과 관계 또는 연구 결과를 임의로 만들어서는 안 됩니다.

## 권고 사항 (120단어 이하)

아직 파일럿 B를 출시하지 마십시오. 파일럿 B의 원시 활성화율(54/60 = 90%)은 파일럿 A(40/50 = 80%)보다 10퍼센트 포인트 높지만, 하지만 두 파일럿은 "활성화"를 서로 다르게 측정했으며(B는 팀원 초대가 필요하지 않음), 서로 다른 대상 집단(신규 셀프 서비스 가입자 대 기존 고객)을 대상으로 했고, 무작위 배정(S3)이 이루어지지 않았으므로 — 이러한 차이는 체크리스트 때문이라고 볼 수 없습니다. 재이용률에 대한 주장은 근거가 부족합니다: S3에서는 30일 재이용률 데이터가 아직 존재하지 않는다고 명시하고 있습니다. "6시간"이라는 지원 소요 시간 수치는 두 파일럿의 중위값을 합산한 것이며, 파일럿별로 구분되지 않았으므로 파일럿 B에 특화된 감소 효과가 입증되지 않았습니다. 본격적인 도입 전에는 통제되고, 매칭되며, 일관되게 정의된 비교가 필요합니다.

## 주장 검증 표

| 주장 | 판정 | 출처 ID | 정확한 인용문 |
|---|---|---|---|
| "파일럿 B는 활성화율을 10퍼센트 포인트 높였다" | 부분적으로 입증됨 — 원 데이터 비율은 10%포인트 차이(54/60=90% 대 40/50=80%)가 나지만, 정의/대상 집단/설계 방식이 달라 이 차이는 체크리스트에 기인한 것이 아님 | S1 | "파일럿 A는 50개의 계정을 초대했으며, 40개 계정이 7일 이내에 활성화를 완료했다." |
| (동일한 주장, 계속) | | S2 | "파일럿 B는 60건의 온보딩 시작을 기록했으며, 54개 계정이 7일 이내에 작업 공간을 생성했다." / "팀원 초대가 필요하지 않다" |
| (동일한 주장, 계속) | | S3 | "파일럿은 무작위 배정이 되지 않았으며 서로 다른 계정 집단을 사용했다." |
| "유지율 개선" | 모순됨 — 이를 뒷받침할 유지율 데이터가 존재하지 않음 | S3 | "아직 30일 유지율이나 매출 결과는 확인되지 않았다." |
| "지원 소요 시간을 6시간으로 단축" | 근거 없음 — 해당 수치는 두 파일럿을 합산한 중앙값이며, 파일럿 B에 기인한 것이거나 단축된 것으로 표시되지 않음 | S3 | "두 파일럿을 합산한 지원 응답 시간의 중앙값은 6시간이었으며, 파일럿별로 구분되어 제시되지 않았다." |

## 공정한 비교를 위해 필요한 세 가지 누락된 측정 항목

1. 동일한 정의(예: 작업 공간 생성 *및* 팀원 최소 1명 초대)를 적용한 두 파일럿의 활성화율.
2. 파일럿 A와 파일럿 B에 대해 별도로 보고된 지원 응답 시간(합산 중앙값이 아님), 가급적이면 파일럿 실시 전 기준치 포함.
3. 두 파일럿 모두에 대한 30일 유지율(및 매출) 결과로, 비교 가능한(가급적이면 무작위 배정되거나 매칭된) 계정 집단에서 수집된 데이터.

이 자료집만을 활용하여 과제를 해결하십시오. 두 비율을 개선의 증거로 간주하기 전에, 정의, 모집단 및 분모를 비교하십시오. 초안상의 주장과 측정 결과를 구분하십시오. 각 결론은 이를 실제로 뒷받침하는 정확한 출처 인용문에 연결하고, 근거가 없는 내용은 생략하십시오.


# 가상의 연구 자료 모음

아래의 모든 조직, 데이터, 인용문 및 문서는 재현 가능한 시험을 위해 창작된 것입니다. 출처 ID는 본 자료 모음만을 가리키며, 공개된 연구 자료가 아닙니다.

## S1 — 파일럿 A 종료 보고서, 2026년 9월 2일

"파일럿 A는 50개의 계정을 초대했으며, 40개 계정이 7일 이내에 활성화를 완료했습니다."
"활성화란 작업 공간을 생성하고 최소 한 명의 팀원을 초대하는 것을 의미합니다."
"계정은 고객 성공 팀이 선정한 기존 고객들이었습니다."
"이 파일럿에서는 안내형 온보딩을 사용했습니다."

## S2 — 파일럿 B 대시보드 메모, 2026년 9월 3일

"파일럿 B에서는 60건의 온보딩 시작이 기록되었으며, 54개 계정이 7일 이내에 워크스페이스를 생성했습니다."
"이 대시보드에서는 워크스페이스 생성을 "활성화’로 간주하며, 팀원 초대는 필수 조건이 아닙니다."
"초대 건수는 집계되지 않았습니다."
"계정은 체크리스트를 사용한 신규 셀프 서비스 가입자였습니다."

## S3 — 분석가 검토, 2026년 9월 4일

"파일럿 테스트는 무작위 배정이 이루어지지 않았으며 서로 다른 계정 집단을 대상으로 진행되었습니다."
"두 시범 운영을 합산한 지원 응답 시간의 중앙값은 6시간이었으며, 시범 운영별로 세분화된 수치는 제공되지 않았습니다."
"30일 유지율이나 매출 관련 결과는 아직 확인되지 않았습니다."

## S4 — 출시 메모 초안, 2026년 9월 5일

"파일럿 B는 활성화율을 10% 포인트 높였고, 유지율을 개선했으며, 지원 응답 시간을 6시간으로 단축했습니다. 체크리스트를 모든 계정에 적용하십시오."
이는 제안 초안일 뿐, 추가 데이터 출처가 아닙니다. 이 문서의 주장은 S1–S3을 기준으로 반드시 검증되어야 합니다.

## 두 프롬프트 버전 모두에 공통된 과제

답변: 이 자료만으로도 파일럿 B를 모든 계정에 확대 적용하는 것이 타당합니까?
S1–S4만 사용하십시오. (1) 최대 120단어 분량의 권고안, (2) ‘주장(Claim)’, ‘판결(Verdict)’, ‘출처 ID(Source ID)’, ‘정확한 뒷받침 인용문’ 열로 구성된 표, (3) 공정한 비교에 필요한 세 가지 누락된 측정값을 출력하십시오.
출시 메모에 포함된 세 가지 실증적 주장, 즉 활성화 증가, 재구매율 향상, 지원 시간 단축을 모두 검토하십시오. ‘입증됨(Supported)’, ‘부분적으로 입증됨(Partly supported)’, ‘입증되지 않음(Unsupported)’, ‘반박됨(Contradicted)’ 중 적절한 판정을 내리고, 필요한 경우 간략한 설명을 덧붙이십시오. 권고문이나 표에는 수치적 비율과 그 분모를 포함시키십시오. 자료집에 없는 인용문, URL, 인과 관계 또는 연구 결과를 임의로 만들어서는 안 됩니다.

## 권고 사항 (120단어 이내)

아니요 — 이 자료만으로는 파일럿 B를 전면적으로 시행할 근거가 부족합니다. 파일럿 A: 기존 고객 중 40/50개 계정(80%)이 "활성화" 기준을 충족했는데, 이는 워크스페이스 생성 *및* 팀원 초대를 모두 완료한 경우를 의미합니다. 파일럿 B: 신규 셀프 서비스 가입자 중 54/60개 계정(90%)이 초대 요건 없이 7일 이내에 워크스페이스를 생성했습니다. 10포인트의 순차이(90%−80%)는 서로 다른 정의와 대상 집단을 혼합한 것이며 무작위 배정(S3)이 이루어지지 않았으므로, 이를 체크리스트가 "활성화율을 높였다"고 해석할 수 없습니다. 아직 30일 유지율이나 매출 데이터가 존재하지 않으므로(S3), "유지율 개선"에 대한 증거는 없습니다. 6시간 지원 수치는 두 파일럿을 *합산*한 중앙값일 뿐, 파일럿별로 구분된 것이 아니므로 "지원 시간 단축"에 대한 기준치나 파일럿별 지원 데이터가 없습니다.

## 표

| 주장 | 판정 | 출처 ID | 정확한 인용문 |
|---|---|---|---|
| "파일럿 B는 활성화율을 10퍼센트 포인트 높였다" | 부분적으로 입증됨 — 산술적 차이는 존재하지만(54/60=90% 대 40/50=80%), 비교에 혼란 요인이 존재하여 인과적 "증가" 주장을 뒷받침할 수 없음 | S1, S2, S3 | S1: "파일럿 A는 50개의 계정을 초대했으며, 그중 40개가 7일 이내에 활성화를 완료했다." / S2: "파일럿 B는 60건의 온보딩 시작을 기록했으며, 54개의 계정이 7일 이내에 워크스페이스를 생성했다." / S3: "파일럿 실험은 무작위 배정이 되지 않았으며 서로 다른 계정 집단을 사용했다." |
| 두 파일럿 모두에서 활성화 측정 방식은 동일했다 | 모순됨 | S1, S2 | S1: "활성화란 워크스페이스를 생성하고 팀원을 최소 한 명 초대하는 것을 의미했다." / S2: "이 대시보드에서는 워크스페이스 생성을 활성화로 간주하며, 팀원 초대는 필수 조건이 아니다." |
| "유지율 향상" | 근거 없음 | S3 | "30일 유지율이나 매출 결과는 아직 확인되지 않았습니다." |
| "지원 처리 시간을 6시간으로 단축" | 근거 없음 | S3 | "두 파일럿을 합산한 지원 응답 시간의 중앙값은 6시간이었으며, 파일럿별로 구분하여 제시되지 않았다." |

## 공정한 비교를 위해 필요한 세 가지 누락된 측정 항목

1. 체크리스트 도입 전후의 파일럿별(통합되지 않은) 지원 응답 시간. 이를 통해 파일럿 B에 기인한 변화를 분리하여 확인할 수 있습니다.
2. 두 파일럿 모두에 대한 30일 유지율(및 매출) 수치. 현재 해당 데이터가 존재하지 않기 때문입니다("아직 30일 유지율이나 매출 결과는 없습니다," S3).
3. 기존 고객(S1)과 새로운 셀프 서비스 가입자(S2)를 혼합하지 않고, 두 파일럿 모두에서 비교 가능하고(이상적으로는 무작위 배정된) 계정 집단에 적용되는 단일하고 공통된 활성화 정의(예: 작업 공간 생성 *및* 팀원 초대).