의견 조사는 모든 결과를 측정할 수 없다
- 자료 팀은 “새로운 레이블 레이아웃을 좋아하십니까?”라고 묻는다. 긍정적인 답은 선호도를 나타낼 수 있지만, 독자가 네 개 품목을 올바르게 분류할 수 있음을 의미하지는 않는다. 방법은 질문의 결과와 일치해야 한다.
- 이 원본 GAC033 정합 수업은 관찰, 조사 및 소규모 실험을 비교한다. 모두 특정 질문에 유용하다. 어느 것이 모든 주제에 자동으로 가장 좋은 방법이 되는 것은 아니며, 정교한 방법도 모호한 연구 질문을 수선할 수 없다.
"이 레이아웃을 좋아하십니까?"가 가장 직접적으로 측정하는 것은 무엇입니까?
난이도 1/5 · 100 코인 + 오늘 첫 완료 시 소액 보너스
좋아함은 의견 결과입니다. 분류 정확도 측정을 대체할 수 없습니다.
각 방법이 알려주는 것을 비교하기
- 관찰은 환경에서 일어나는 것을 기록할 수 있으나, 오류만 기록하면 원인을 밝히지 못할 수 있다. 조사는 경험이나 선호도에 대해 물을 수 있으나, 답변은 행동과 다를 수 있다.测量的结果作为证据报告避免这两种方法。
- 실험은 의도적으로 속성을 변경하고 계획된 조건 하에서 결과를 비교한다. 레이블 프로젝트의 경우, 팀은 단어, 품목 선택, 시간 및 지침을 동일하게 유지하면서 레이아웃을 변경할 것을 제안한다. poorly controlled differences would weaken the interpretation.
| 질문 | 가능한 방법 | 중요한 제한 사항 |
|---|---|---|
| 실제 용기에서 어떤 오류가 발생하는가? | 승인된 관찰 | 동기는 직접 관찰되지 않음 |
| 독자는 어떤 레이아웃을 선호하는가? | 조사 | 선호도는 분류 정확도가 아님 |
| 레이아웃 간 정확도가 다른가? | 계획된 비교 과제 | 작은 종이 과제는 일상 사용이 아님 |
공정한 소규모 비교 계획 수립
- 제안서는 24명의 자발적 동료(12명은 A, 12명은 B)를 사용하며, 팀의 선호가 아닌 섞은 slip에 의해 할당된다. 각자는 코칭 없이 2분 내에 동일한 4개 품목 종이 분류 과제를 완료한다. 레이블의 단어는 동일하지만 간격 및 정렬은 다르다.
- 과제가 시작되기 전에 고정된 키와 모든 네 배치 위치가 일치할 때만 완벽한 시트 하나를 점수화하라. 부분 점수와 전체 시트 수의 변종이 아닌 각 그룹의 완전 성공 수를 기록하라. 아직 주요 연구가 수행되지 않았다.
결과 판정 기준: 4개의 올바른 배치 = 1회 성공; 배치 오류 또는 빈칸 발생 시 = 완전한 성공 불가. 별도의 오류 카테고리 메모는 해석에 도움이 될 수 있으나, 주된 결과 판정을 무심코 변경해서는 안 됩니다.
제안된 레이아웃 비교에서 동일하게 유지해야 할 두 가지 기능은 무엇입니까?
난이도 2/5 · 140 코인 + 오늘 첫 완료 시 소액 보너스
wording과 시간을 동일하게 유지하면 대체 설명을 줄입니다. 불균형 코칭이나 키는 비교를 혼란스럽게 만듭니다.
시트에 세 개의 올바른 배치와 빈칸 하나가 있습니다. 이는 몇 건의 완전한 성공으로นับ합니까?
난이도 2/5 · 140 코인 + 오늘 첫 완료 시 소액 보너스
고정 규칙은 모든 네 가지 배치 위치를 정확히 맞췄을 때만 성립합니다. 부분적인 정확성은 이 결과를 충족시키지 못합니다.
샘플을 솔직하게 묘사하기
- 샘플은 참여하는 집단을 말한다. 한 교실의 자원봉사자는 모든 지역의 학생이 아니다. 그 집단 내에서 무작위 할당은 A/B 비교를 더 공정하게 만들 수 있으나, 학교 전체를 무작위로 샘플링하는 것과 다르다.
- 초대 대상, 계획된 인원 및 fewer agree일 경우의 조치를 명시하라. B에게는 자신감 있는 독자를, A에게는 less confident readers를 Recruitment do not. 작은 집단에서도 무작위 할당은 모든 특성에서 동일한 집단을 보장하지 않는다.
교사의 절차 승인을 먼저 받지 않고 참가자 과제를 진행하지 마십시오. 참여는 자발적이어야 하며, 성적과 분리되어야 하며, 팀원이나 교사의 압력 없이 명확히 설명되어야 합니다.
24명의 학급 자원자를 무작위로 배정하더라도 이것이 학교의 모든 학생을 대표한다고 보장할 수 없습니다.
난이도 1/5 · 100 코인 + 오늘 첫 완료 시 소액 보너스
조건에 대한 배정과 모집단으로부터 표본을 추출하는 것은 다릅니다. 한 학급의 자원자만으로는 일반화가 제한됩니다.
윤리적 절차를 구체적으로 명시하기
- 모든 사람이 동의하기 전에 무명 합계의 과업, 목적 및 활용법을 설명하십시오. 참여자는 참여를 중단하거나 서식을 제출하지 않을 수 있습니다. 이름이나 식별 가능한 댓글은 수집하지 마십시오. 식별符 없는 서식이 제출된 후에는 팀이 특정 개인의 데이터를 신뢰할 수 있게 회수할 수 없음을 설명하십시오.
- 일반 인쇄용 자재를 사용하고, 손상, 당혹감, 정보 유출 위험이 있는 방식은 피하십시오. 기록물은 승인된 프로젝트 장소에 보관하고, 교사와 접근권한 및 파기 방식을 합의하십시오. “이름 없음”은 다른 식별 정보를 소홀히 다루는 것을 면책해주지 않습니다.
결론이 아닌 절차를 사전 테스트(pilot)하기
- 승인을 받아 두 사람에게 지시가 이해하기 쉽고 시간이 적절하게 배분되었는지 확인하도록 하십시오. 이 pilot(사전 테스트) 는 방법론의 연습입니다. 만약 팀이 이후 지시를 변경했다면, 그 변경된 사전 테스트 용지는 주요 비교 대상에서 제외해야 합니다.
- Recruitment, assignment, materials, instructions, clock, scoring, privacy and analysis를 포함하여 타인이 따라 할 수 있는 프로토콜을 작성하십시오. 두 명의 보조원이 작업을 다르게 수행할 수 있는 문장을 표시하고, 주요 수집 전까지 명확히 하십시오.
질문에 맞는 방법을 매칭하고, 결과를 사전에 정의하며, 관련 변인을 통제하고, 표본 및 윤리적 한계를 명시하시오.
이 연구 방법론 개발 단계를 순서대로 나열하십시오.
난이도 3/5 · 200 코인 + 오늘 첫 완료 시 소액 보너스
승인은 참여자의 작업 전에 이루어져야 하며, 시범 연구는 본 연구 작업 전에 절차를 다듬는 데 도움이 됩니다.