Choose a method that can answer the question · Elige un método que pueda responder la pregunta
An opinion survey cannot measure every outcome
- The materials team asks, “Do you like our new label layout?” A positive answer may show preference, but it does not show whether the reader can sort the four items correctly. The method must match the outcome in the question.
- This original GAC033-aligned lesson compares an observation, a survey and a small experiment. All are useful for some questions. None is automatically the best method for every topic, and an elaborate method cannot repair a vague research question.
Una encuesta de opinión no puede medir cada resultado
- El equipo de materiales pregunta, “¿Les gusta nuestro nuevo diseño de etiquetas?” Una respuesta positiva puede mostrar preferencia, pero no muestra si el lector puede clasificar correctamente los cuatro elementos. El método debe coincidir con el resultado en la pregunta.
- Esta lección original alineada con GAC033 compara una observación, una encuesta y un experimento pequeño. Todos son útiles para algunas preguntas. Ninguno es automáticamente el mejor método para cada tema, y un método elaborado no puede reparar una pregunta de investigación vaga.
What does “Do you like this layout?” measure most directly? · ¿Qué mide directamente “¿Te gusta este diseño?”
Liking is an opinion outcome. It cannot replace a sorting-accuracy measure. · Gustar es un resultado de opinión. No puede reemplazar una medida de precisión de clasificación.
Compare what each method tells you
- An observation can record what occurs in a setting, but recording errors alone may not reveal why they happen. A survey can ask about experience or preference, but answers may differ from behaviour. Avoid reporting either as evidence of an outcome it did not measure.
- An experiment deliberately changes a feature and compares an outcome under planned conditions. For the label project, the team proposes changing layout while keeping words, item choices, time and instructions the same. Poorly controlled differences would weaken the interpretation.
| Question | Possible method | Important limit |
|---|---|---|
| What errors occur at the real trays? | Observation with approval | Motives are not directly observed |
| Which layout do readers prefer? | Survey | Preference is not sorting accuracy |
| Does accuracy differ between layouts? | Planned comparison task | Small paper task is not everyday use |
Compare lo que cada método le dice
- Una observación puede registrar lo que ocurre en un entorno, pero los errores de registro por sí solos pueden no revelar por qué suceden. Una encuesta puede preguntar sobre experiencias o preferencias, pero las respuestas pueden diferir del comportamiento. Evite reportar uno u otro como evidencia de un resultado que no midió.
- Un experimento cambia deliberadamente una característica y compara un resultado bajo condiciones planificadas. Para el proyecto de etiquetas, el equipo propone cambiar la disposición manteniendo las palabras, las opciones de artículos, el tiempo y las instrucciones iguales. Diferencias mal controladas debilitarían la interpretación.
| Pregunta | Método posible | Límite importante |
|---|---|---|
| ¿Qué errores ocurren en las bandejas reales? | Observación con aprobación | Los motivos no se observan directamente |
| ¿Qué disposición prefieren los lectores? | Encuesta | La preferencia no es la precisión de clasificación |
| ¿Difiere la precisión entre disposiciones? | Tarea de comparación planificada | Una tarea pequeña de papel no es un uso cotidiano |
Plan a fair small comparison
- The proposal uses 24 willing peers: 12 see A and 12 see B, assigned by shuffled slips rather than the team's preference. Each completes the same four-item paper sorting task within two minutes, without coaching. The labels' wording remains the same; spacing and alignment differ.
- Score one completely correct sheet only when all four placements match the key fixed before the task. Record the number of complete successes in each group, not a changing mixture of partial marks and whole-sheet counts. No main study has been conducted yet.
Outcome rule: four correct placements = one success; any placement incorrect or blank = no complete success. A separate error-category note may aid interpretation, but it must not silently change the primary outcome.
Planifique una pequeña comparación justa
- La propuesta utiliza 24 compañeros dispuestos: 12 ven A y 12 ven B, asignados por papeletas barajadas en lugar de la preferencia del equipo. Cada uno completa la misma tarea de clasificación de papel de cuatro elementos en dos minutos, sin orientación. El texto de las etiquetas permanece igual; el espaciado y la alineación difieren.
- Asigne una hoja completamente correcta solo cuando las cuatro colocaciones coincidan con la clave fijada antes de la tarea. Registre el número de éxitos completos en cada grupo, no una mezcla cambiante de marcas parciales y conteos de hojas enteras. Aún no se ha realizado ningún estudio principal.
Regla de resultado: cuatro colocaciones correctas = un éxito; cualquier colocación incorrecta o en blanco = ningún éxito completo. Una nota separada por categoría de error puede ayudar a la interpretación, pero no debe cambiar silenciosamente el resultado primario.
Which TWO features should stay the same in the proposed layout comparison? · ¿Cuáles DOS características deben permanecer iguales en la comparación de diseños propuesta?
Keeping wording and timing equal reduces alternative explanations. Unequal coaching or keys would confound the comparison. · Mantener igual redacción y tiempo reduce explicaciones alternativas. Entrenamiento desigual o claves distintas confundirían la comparación.
A sheet has three correct placements and one blank. How many complete successes does it count as? · Una hoja tiene tres colocaciones correctas y una vacía. ¿Cuántos éxitos completos cuenta?
The fixed rule requires all four placements correct. Partial accuracy does not meet this outcome. · La regla fija requiere las cuatro colocaciones correctas. La precisión parcial no cumple este resultado.
Describe the sample honestly
- A sample is the participating group. Volunteers from one class are not all students everywhere. Random assignment within that group can make the A/B comparison fairer, but it is different from randomly sampling the entire school.
- State who is invited, how many are planned and what happens if fewer agree. Do not recruit only confident readers for B and less confident readers for A. With a small group, random assignment still does not guarantee identical groups in every characteristic.
Do not run a participant task before the teacher approves the procedure. Participation must be voluntary, separate from grades, and explained without pressure from teammates or teachers.
Describa la muestra honestamente
- Una muestra es el grupo participante. Los voluntarios de una sola clase no representan a todos los estudiantes en todas partes. La asignación aleatoria dentro de ese grupo puede hacer que la comparación A/B sea más justa, pero es diferente de muestrear aleatoriamente a toda la escuela.
- Indique quién está invitado, cuántos están planeados y qué sucede si menos aceptan. No reclute solo lectores confiados para B y lectores menos confiados para A. Con un grupo pequeño, la asignación aleatoria aún no garantiza grupos idénticos en cada característica.
No realice una tarea de participante antes de que el profesor apruebe el procedimiento. La participación debe ser voluntaria, separada de las calificaciones y explicada sin presión de compañeros o profesores.
Randomly assigning 24 class volunteers guarantees they represent every student in the school. · Asignar aleatoriamente 24 voluntarios de clase garantiza que representen a cada estudiante de la escuela.
Assignment to conditions and sampling from a population are different. One-class volunteers still limit generalisation. · La asignación a condiciones y el muestreo de una población son diferentes. Los voluntarios de una sola clase aún limitan la generalización.
Make an ethical procedure explicit
- Explain the task, purpose and use of anonymous totals before anyone agrees. Participants may stop or leave a sheet unsubmitted. Collect no names or identifying comments. Explain that after a sheet is submitted without an identifier, the team cannot reliably retrieve one person's data.
- Use ordinary printed materials, not a task that risks damage, embarrassment or disclosure. Keep records in the approved project location and agree access and disposal with the teacher. “No names” does not excuse careless handling of other identifying details.
Haga explícito un procedimiento ético
- Explique la tarea, el propósito y el uso de totales anónimos antes de que nadie acepte. Los participantes pueden detenerse o dejar una hoja sin enviar. No recoja nombres ni comentarios identificativos. Explique que después de enviar una hoja sin identificador, el equipo no puede recuperar confiablemente los datos de una persona.
- Utilice materiales impresos ordinarios, no una tarea que arriesgue daño, vergüenza o divulgación. Mantenga los registros en la ubicación aprobada del proyecto y acuerde acceso y eliminación con el profesor. "Sin nombres" no excusa el manejo descuidado de otros detalles identificativos.
Pilot the procedure, not your conclusion
- With approval, ask two people to check whether instructions are understandable and timing is workable. This pilot is a rehearsal of the method. If the team changes instructions afterward, keep those pilot sheets out of the main comparison.
- Write a protocol someone else could follow: recruitment, assignment, materials, instructions, clock, scoring, privacy and analysis. Mark a sentence that could lead two helpers to run the task differently and make it precise before any main collection.
Match the method to the question, define the outcome in advance, control relevant differences and make sample and ethical limits explicit.
Pruebe el procedimiento, no su conclusión
- Con aprobación, pida a dos personas que verifiquen si las instrucciones son comprensibles y el cronograma es viable. Este pilotaje es un ensayo del método. Si el equipo cambia las instrucciones después, mantenga esas hojas piloto fuera de la comparación principal.
- Escriba un protocolo que otra persona pueda seguir: reclutamiento, asignación, materiales, instrucciones, reloj, puntuación, privacidad y análisis. Marque una oración que podría llevar a dos ayudantes a ejecutar la tarea de manera diferente y hágala precisa antes de cualquier recopilación principal.
Ajuste el método a la pregunta, defina el resultado de antemano, controle las diferencias relevantes y haga explícitos los límites de la muestra y éticos.
Order these method-development steps. · Ordena estos pasos de desarrollo de método.
Approval precedes participant work; the pilot helps refine the procedure before the main task. · La aprobación precede al trabajo de participantes; la prueba piloto ayuda a refinar el procedimiento antes de la tarea principal.